hadoop参数说明

2guxujil  于 2021-06-02  发布在  Hadoop
关注(0)|答案(0)|浏览(280)

hadoo-2.6有以下文档中给出的参数 mapreduce.job.max.split.locations (用于局部性计算的每个分割要存储的最大块位置数。它如何在局部性计算中使用这个?) mapreduce.job.split.metainfo.maxsize (分割元信息文件的最大允许大小。jobtracker不会尝试读取大于配置值的分割元信息文件。但将其固定到某个值有什么好处呢?为什么我们不能让它变得灵活?) mapreduce.job.counters.limit (每个作业的这些用户计数器是什么?我们为什么要限制它们?) mapreduce.jobhistory.datestring.cache.size (日期字符串缓存的大小。影响将被扫描以查找作业的目录数。设置此限制有什么好处?) mapreduce.jobhistory.joblist.cache.size (作业列表缓存的大小。我们为什么要使用这个缓存?) mapreduce.jobhistory.loadedjobs.cache.size (这个和上一个有什么区别?) mapreduce.jobhistory.move.thread-count (用于移动文件的线程数。它们是否仅用于移动历史文件?为什么需要进行此移动?)
它们是否同时适用于mrv1和mrv2类型的作业执行?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题