Foro Formación Hadoop

Ejercicio Spark

 
Imagen de MIGUEL OROPEZA
Ejercicio Spark
de MIGUEL OROPEZA - lunes, 26 de febrero de 2018, 16:17
 

Hola

Se pueden usar variables broadcast para arreglos muy grandes o solo es recomendable para listas pequeñas  como el ejemplo.txt

 

Saludos

Imagen de Admin Formación Hadoop
Re: Ejercicio Spark
de Admin Formación Hadoop - lunes, 26 de febrero de 2018, 16:19
 

Hola Miguel,

Es posible realizarlo con cualquier tipo de información.

Pero hay que tener en cuenta que lo normal será que esta información no sea excesivamente grande, ya que si es así, lo más probable es que esa información debiera estar en el HDFS junto con la información a procesar.

Un saludo,