Foro Formación Hadoop

Escribir Hadoop Streaming

 
Picture of Fabio Natalini
Escribir Hadoop Streaming
by Fabio Natalini - Thursday, 7 December 2017, 11:51 AM
 

He intentado implementar un programa Hadoop Streaming siguiendo las instrucciones del cuaderno de ejercicios y el video del capítulo 5 del curso Desarrollador Hadoop-Spark. Sin embargo tengo obtengo un error:

[cloudera@quickstart Desktop]$ hadoop jar /usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming*.jar \
> -input /formacionhadoop/desarrollador/cervantes/teatro \
> -output /formacionhadoop/desarrollador/pruebaconperl \
> -mapper mapperperl.pl \
> -reducer reducerperl.pl \
> -file /home/cloudera/Desktop/mapperperl.pl \
> -file /home/cloudera/Desktop/reducerperl.pl


Found 1 unexpected arguments on the command line [/usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming-mr1.jar]

 

Entiendo que hay un fallo en la primera línea de comando, pero no encuentro soluciones volviendo a mirar el video

 

Gracias

Picture of Admin Formación Hadoop
Re: Escribir Hadoop Streaming
by Admin Formación Hadoop - Thursday, 7 December 2017, 6:28 PM
 

Hola Fabio,

En el siguiente hilo tienes la solución al problema:

http://formacionhadoop.com/aulavirtual/mod/forum/discuss.php?d=172

Un saludo,

Picture of Fabio Natalini
Re: Escribir Hadoop Streaming
by Fabio Natalini - Sunday, 10 December 2017, 6:02 PM
 

Vale. Ya lo he solucionado. Gracias