Магазин неэффективного редуктора

Question

Что бы привести к тому, что только один редуктор в задании Maprecuce отдельно от всех клавишных вывода функции карты одинаковы?

Answer 1

Возможные причины:

1. Ваш кластер все еще имеет настройку по умолчанию иметь только 1 редуктор (= значение по умолчанию).
2. Ваш код явно устанавливает значение 1 редуктора.
3. Вы работаете в локальном режиме (то есть нет кластера вообще).

   цитата из mapded-default.xml

   <property>
     <name>mapred.reduce.tasks</name>
     <value>1</value>
     <description>The default number of reduce tasks per job. Typically set to 99%
     of the cluster's reduce capacity, so that if a node fails the reduces can 
     still be executed in a single wave.
     Ignored when mapred.job.tracker is "local".
     </description>
   </property>
   

   .