Configuration Hadoop配置-映射器/组合器是否受io.sort.factor和io.sort.mb的影响?
如果我修改io.sort.factor和io.sort.mb,在映射端进行的本地排序是使用这些变量,还是仅在还原端进行的排序使用这些变量?是的,它们也在映射端使用(无论您是否有合并器):Configuration Hadoop配置-映射器/组合器是否受io.sort.factor和io.sort.mb的影响?,configuration,hadoop,combiners,Configuration,Hadoop,Combiners,如果我修改io.sort.factor和io.sort.mb,在映射端进行的本地排序是使用这些变量,还是仅在还原端进行的排序使用这些变量?是的,它们也在映射端使用(无论您是否有合并器): io.sort.factor-第1695行 io.sort.mb第932-944行
-
-第1695行io.sort.factor
第932-944行io.sort.mb