Amazon MapReduce kein Reduktions Job

Question

Ich versuche, einen Mapper nur Job über AWS (einen Streaming-Job) zu erstellen. Das Reduktionsmittel ist erforderlich, so dass ich eine Dummy-ausführbare gäbe, und das Hinzufügen von -jobconf mapred.map.tasks = 0 auf das Extra Args Box. In der Hadoop-Umgebung (Version 0.20) I installiert haben, werden keine Reduktions Jobs starten, aber in AWS die Dummy-ausführbaren Starts und schlägt fehl.

Wie kann ein nicht Minderer / Mapper nur Arbeitsplätze in AWS laufen?

Answer 1

Sie können auch Katze oder NONE als Reduktions Argument verwenden.

Answer 2

Es gibt keine Möglichkeit, einen Mapper nur Job in amazon M / R zu erstellen. Ich bin mit dem Identity-Reduzierer (org.apache.hadoop.mapred.lib.IdentityReducer) statt.