Foro Formación Hadoop

Escribir Hadoop Streaming

 
Imagen de Fabio Natalini
Escribir Hadoop Streaming
de Fabio Natalini - jueves, 7 de diciembre de 2017, 11:51
 

He intentado implementar un programa Hadoop Streaming siguiendo las instrucciones del cuaderno de ejercicios y el video del capítulo 5 del curso Desarrollador Hadoop-Spark. Sin embargo tengo obtengo un error:

[cloudera@quickstart Desktop]$ hadoop jar /usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming*.jar \
> -input /formacionhadoop/desarrollador/cervantes/teatro \
> -output /formacionhadoop/desarrollador/pruebaconperl \
> -mapper mapperperl.pl \
> -reducer reducerperl.pl \
> -file /home/cloudera/Desktop/mapperperl.pl \
> -file /home/cloudera/Desktop/reducerperl.pl


Found 1 unexpected arguments on the command line [/usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming-mr1.jar]

 

Entiendo que hay un fallo en la primera línea de comando, pero no encuentro soluciones volviendo a mirar el video

 

Gracias

Imagen de Admin Formación Hadoop
Re: Escribir Hadoop Streaming
de Admin Formación Hadoop - jueves, 7 de diciembre de 2017, 18:28
 

Hola Fabio,

En el siguiente hilo tienes la solución al problema:

http://formacionhadoop.com/aulavirtual/mod/forum/discuss.php?d=172

Un saludo,

Imagen de Fabio Natalini
Re: Escribir Hadoop Streaming
de Fabio Natalini - domingo, 10 de diciembre de 2017, 18:02
 

Vale. Ya lo he solucionado. Gracias