Foro Formación Hadoop
Dudas con ejercicios
Buenas, ya me aclaré y he hecho la practica de "Trabajando con particiones".
Lo unico que en la siguiente practica "Usando cache con los RDDs" en el apartado 7 se pide acceder a la interfaz web de spark, en el apartado de Storage. Pero al pinchar no me hace nada y la consola de spark me manda continuamente el mismo mensaje: "WARN amfilter.AmIpFilter: could not find proxy-user cookie, so user will not be set".
Y debido a que la practica "Viendo las etapas en la interfaz web de Spark" no esta en el cuaderno, tampoco se si estoy accediendo bien a dicha web.
La direccion que utilizo es http://quickstart.cloudera:4040.
¿me pueden ayudar?
Gracias. Saludos.
Hola Manuel,
Si, es un error, ese ejercicio como tal no está. Para poder ver las etapas en Spark corriendo sobre YARN (que es nuestro caso), debes acceder a la web del ResourceManager (http://localhost:8088/cluster) y ahí pinchar sobre el ID de tú aplicación:
A continuación en la url del ApplicationMaster:
Y ahí ya tendrás lo que se ve en el contenido de teoría (Stages, storage, etc..)
Redes sociales