TRABAJO GRUPO A

LABORATORIO HADOOP

 Proceso paso a paso

Para poder desarrollar este laboratorio ingresaremos a la página Azure para

estudiantes.

Después de asociar nuestra cuenta de Hotmail en Azure a nuestro correo institucional,

ingresamos a la plataforma para crear nuestra máquina virtual dando clic en el menú
desplegable y seleccionando máquina virtual en donde aparecerá lo siguiente:

Tendremos que ir antes a crear nuevo recurso en el menú principal de asure, en

donde ingresaremos en el buscador Hortonworks
Una vez seleccionamos hortonworks, daremos clic en crear

Nos aparecerá el siguiente formulario donde procederos a completar cada casilla,

nuestro nombre del grupo de recurso será clouddemo3
Procederemos a colocar en nombre de usuario clouddemo3 con su respectiva
contraseña Pass@word012

Colocamos el tipo de disco que será SSD estándar

Todos los demás espacios los dejamos por defecto y le damos clic en siguiente hasta
llegar a la pestaña Revisar y crear
Después de llenar los datos anteriores pasamos a la pestaña de etiquetas donde
dejamos todo por defecto y pasamos al siguiente paso

Una vez estemos en esta pestaña le damos clic en siguiente y se empezara a validar
la máquina virtual
Una vez nos aparezca la señal de validación superada, procederemos a información
general, de no aparecer la señal revise las pestañas anteriores

Una vez en la pestaña información general, procedemos a visualizar que se completó

la implementación
De ahí vamos al recurso Ahí nos Muestra todo la configuración de la máquina virtual

Aquí nos muestra la maquina si está disponible el tamaño y el procesador y la

memoria RAM la dirección de IP publica que es la que ocupamos para acceder a
nuestro servidor y la IP

Y de ahí damos al clic al boton agregar

Aquí ponemos la misma fórmula y de ahí le vamos a dar puerto de destino y ponemos
los *en los intervalos de puerto de origen y intervalos de puerto de destino 0-55635 y
le damos guardar

Después de agregar nuestra nueva regla de seguridad de entrada notamos en la

imagen que está ubicado con el nombre All con la prioridad 1010.
Ingresamos a la plataforma de Hortonworks con el IP de nuestra maquina virtual.

Aquí tenemos dos partes a la derecha nos da la plataforma de datos y el de la

derecha es para ver manuales o informacion o clave de acceso usuario

Si ingresamos en QUICK LINKS obtendremos la clave de AMBARI para acceder

Se observan todos los servicios que han sido cargados con éxito después de crear
nuestra máquina virtual HDFS, observamos como primer servicio al YARN que es un
gestor dependencias de JavaScript, que está enfocado en la velocidad y la seguridad, y a
diferencia de otros gestores como NPM, YARN es muy rápido y muy fácil de usar.
Luego se va a files view. se observa los archivos que estén cargando la mayoría está
ya cargado al 100% pero el archivo Start YARN esta con 8% de carga.

Debemos esperar que todos estén en funcionamiento.

Y vemos que nuestra conexión se hizo con éxito aquí ya tenemos levantado el YARN y
ahora podemos seguir con el proceso.
Iniciamos el programa PuTTY donde ingresaremos el IP address, el puerto 2222 y
creamos demo3 lo guardamos y damos click en Open.

Una vez iniciado, ingresamos la contraseña “haddop”, después nos pedirá una nueva
contraseña la cual pondremos Pass@word123, por consiguiente ingresamos “ls” para
confirmar la conexión
En la siguiente imagen creamos el folder que luego pasaremos a analizar con el Putty,
en donde veremos los archivos que contiene nuestro folder, añadiremos una nueva
carpeta.

Observamos el nombre de la carpeta. Luego se hace clic en uploat y selecciono un

archivo y arrastro y subo el archivo a la carpeta Jhordy-Anderson-Flor-Lizeth-Diana:
esta con nombre (nombres.txt)

Terminamos de hacer todos los pasos para trabajar con nuestra máquina virtual

Nos vamos a la ventana de Putty y empezamos a mostrar los archivos de Hadoop.

 Ponemos hadoop fs – ls/

 Buscamos la carpeta Jhordy-Anderson-Flor-Lizeth-Diana
 Luego ponemos hadoop fs – ls/ Jhordy-Anderson-Flor-Lizeth-Diana para ver
que archivos tiene esta carpeta y de paso tambien comprobamos si el archivo
que subimos esta ahí dentro de la carpeta jhordy….(nombres.txt)
Después ponemos Hadoop fs -mkdir/ cesar para ver esta carpeta ya que es creada por
el usuario root

 Luego vemos que la carpeta cesar aparece en la ventana de las demás

carpetas

AHORA

 Vamos a utilizar un archivo para mover de una ruta a otra. Para eso
 ponemos hadoop fs -copyToLocal/nombres.text/

Y vemos que esta copiado

Para terminar y dejar de trabajar con la máquina.

 Paramos la máquina virtual para eso nos vamos a inicio y hacemos clic en el
nombre de la maquina ahí aparecen unas opciones y nosotros hacemos clic en
detener.
Console.cloud.google.com/biggquery