Haciendo que el cerdo se incorpore con la integración de Python Script y Pig Cassandra para trabajar con Oozie

StackOverflow https://stackoverflow.com//questions/20036040

Pregunta

Soy nuevo en Oozie y tengo pocos problemas. 1) Estoy tratando de incrustar una acción de cerdo en Oozie, que tiene una importación de guiones de Python.He colocado el archivo Jython.jar en la ruta de Lib y tengo una importación en el script de cerdo que tomará las UDF de Python.Parece que no tengo trabajo.El archivo .py no se está recogiendo.¿Como va esto? 2) Tengo una integración de CASSANDRA CASSANDRA, donde en utilizo el CQL para obtener los datos de Cassandra con cerdo y hacer una transformación básica.En la CLI, soy capaz de hacer esto funcionando.Pero en el frente de Oozie no lo soy.Parece que no encuentro la solución (Configuración y otros) para hacer esto en Oozie.¿Alguien puede ayudarme con esto?Gracias de antemano.

¿Fue útil?

Solución

Esto se resuelve.Soluciones ..

1) Ponga el archivo Python en la ruta de Worklow de Oozie y luego haga referencia si desde aquí.

2) Archivos de jar Cassandra agregados en la carpeta LIB en la ruta HDFS de Oozie.

Licenciado bajo: CC-BY-SA con atribución
No afiliado a StackOverflow
scroll top