P. 1
PelicanHPC Tutorial en español

PelicanHPC Tutorial en español

|Views: 1.194|Likes:
Publicado porJoan Romero

More info:

Published by: Joan Romero on May 03, 2011
Copyright:Attribution Non-commercial

Availability:

Read on Scribd mobile: iPhone, iPad and Android.
download as DOCX, PDF, TXT or read online from Scribd
See more
See less

12/11/2012

pdf

text

original

PelicanHPC Tutorial

07 2010 Michael Creel Universitat Autònoma de Barcelona Puede comprobar si hay versiones más recientes de este documento en http://pelicanhpc.org/Tutorial/PelicanTutorial.html

Contenido
1. 2. 3. 4. 5. Introducción La configuración inicial Ejemplo de software Guardar el trabajo Uso de la secuencia de comandos make_pelican

Introducción
PelicanHPC es un rápido (alrededor de 5 minutos, cuando sabes lo que estás haciendo) los medios de la creación de una informática de alto rendimiento (HPC) de clúster para computación paralela utilizando MPI. Este tutorial ofrece una descripción básica de lo que se PelicanHPC, direcciones de cómo usar las imágenes de CD lanzado a crear un clúster de HPC, y da algunos ejemplos básicos de uso.

Descripción de PelicanHPC
PelicanHPC es una distribución de GNU / Linux que se ejecuta como un "live CD" (también se puede poner en un dispositivo USB, se puede arrancar desde una partición del disco duro, o puede ser utilizado como un sistema operativo virtualizado). Si el archivo de imagen ISO se quema en un CD, el CD resultante puede usarse para arrancar el ordenador. El equipo en el que se inicia PelicanHPC se conoce como el "nodo de interfaz". Es el equipo con el que interactúa el usuario. Una vez PelicanHPC se está ejecutando, un guión "pelican_setup" - se puede funcionar. Este script configura el nodo frontend como un servidor de arranque en red. Después de esto se ha hecho, otros equipos pueden tener las copias de arranque de PelicanHPC través de la red. Estos otros equipos se conocen como "nodos de cómputo". PelicanHPC configura el grupo formado por el nodo frontend y los nodos de cómputo, para que basados en la computación paralela MPI-se puede hacer. Un "Live CD", como PelicanHPC por defecto no utiliza los discos duros de cualquiera de los nodos (excepto el espacio de intercambio de Linux, si es que existe), por lo que no va a destruir o alterar su sistema operativo instalado. Cuando el clúster PelicanHPC se cierra, todos los equipos están en su estado original, y se iniciará de nuevo en lo que los sistemas

operativos están instalados en ellos. PelicanHPC opcionalmente se puede hacer para utilizar espacio de disco duro, por lo que su estado puede ser preservada a través de las botas. Puede ser configurado para que arranque sin intervención de usuario, con posibilidad de acceso por ssh. También existe la posibilidad de hacer el cálculo de arranque nodos utilizando Wake-on-LAN. Con estas características opcionales más avanzados, PelicanHPC se puede utilizar para ejecutar un grupo permanente sin cabeza. PelicanHPC se hace usando Debian GNU / Linux como base, a través de la de Debian del sistema. Es producido mediante la ejecución de un script único mediante el comando "make_pelican sh". Versiones personalizadas de PelicanHPC, por ejemplo, que contiene paquetes adicionales, se puede hacer fácilmente mediante la modificación de la secuencia de comandos script.The make_pelican make_pelican y los paquetes necesarios se proporcionan en PelicanHPC, para que pueda construir una imagen personalizada utilizando las imágenes proporcionadas. También puede ejecutar make_pelican de cualquier distribución GNU / Linux.
Características
y

y y y y y

y y

El nodo de interfaz puede ser un ordenador real arrancado con un CD o un dispositivo USB, o una máquina virtual que se inicia con el archivo de imagen de CD. Con esta última opción, PelicanHPC se puede utilizar en el momento mismo que el ambiente de trabajo normal, que puede ser cualquiera de los sistemas operativos comunes. Los nodos de cómputo son normalmente los equipos reales, para un máximo rendimiento, pero también puede ser virtual. Apoya base de cálculo paralelo MPI Fortran usando (77, 90), C, C + + y GNU Octave. Ofrece la Open MPI aplicación del MPI. Clúster puede cambiar el tamaño para agregar o quitar nodos con el "pelican_restarthpc" comando. Fácilmente extensible para añadir paquetes. También fácilmente modificables, ya que la imagen de CD PelicanHPC se crea con un único guión que se basa en el de Debian del sistema. Por esta razón, la versión distribuida es básico y ligero. Existen versiones para 32 bits CPU (Pentium 4, Core, Sempron) y para 64 bits CPU (Opteron, Turion, Core 2, etc) Contiene software de ejemplo: Linpack HPL (ahora en versión 2.0) y extenso ejemplos de referencia que utilizan GNU Octave . También ha mpi4py .

Limitaciones y exigencias
y

y

Los nodos de cómputo debe iniciarse en la red. Esta es una opción que ofrece todos los modernos dispositivos de red suministrado con las placas base, pero a menudo deben estar habilitadas en la configuración del BIOS. Que pueda, y darle una mayor prioridad que arranque desde el disco duro o de otras fuentes. Si usted tiene una tarjeta de red que no hará arranque en red, es posible evitar este uso de rom-o-matic . Un grupo PelicanHPC está diseñado para ser utilizado por una sola persona.

así que asegúrese de aislar la red que se utiliza para el clúster de otras redes. .Licencias y Responsabilidad PelicanHPC es una imagen de CD producido mediante la ejecución de un script (ver más abajo). incluso sin la garantía implícita de COMERCIALIZACIÓN o IDONEIDAD PARA UN PROPÓSITO PARTICULAR. etc. Asegúrese de que la configuración de la BIOS permite arrancar desde el CD. pero SIN NINGUNA GARANTÍA. IMPORTANTE: el nodo frontend actuará como servidor DHCP. La interfaz y todos los nodos de cómputo deben ser conectados en red. Esta libertad PelicanHPC imágenes de CD se distribuye con la esperanza de que sea útil. Al arrancar. que está sujeto a las licencias elegido por los autores de dicho software. Por ejemplo. puedo conseguir un teclado en español por <Tab> presionando y luego agregó que "keyb = es" a la configuración predeterminada. El resto de lo que explica cómo funciona esto. La imagen del CD resultante contiene el software de la Debian distribución de GNU / Linux. para configurar la interfaz como un servidor. El guión es licencia GPL v3. y vuelva a encenderlo. o simplemente pulse <Intro> para arrancar con la configuración predeterminada. La configuración inicial Los dos comandos principales para la administración de la agrupación son "pelican_setup". puede usar uno para conectarse al clúster y otro para conectarse a Internet. pueden llegar a ser molesto. Si inicia la entrega de direcciones IP a los compañeros de trabajo sus equipos. para evitar conflictos con otros servidores DHCP. verás algo como lo siguiente. si pulsa <Tab>. que se utiliza para agregar o quitar nodos después de la instalación inicial. o especiales "cheatcodes" para el arranque de CD en el hardware problemático. En este caso. Ponga el CD en el equipo que será el interfaz. Cualquiera de explorar las opciones. y "pelican_restarthpc". Si el nodo frontend tiene múltiples interfaces de red. usted tiene la oportunidad de entrar en las opciones para configurar las asignaciones de teclado. destacando la línea de ayuda y presionando <Intro> o editar las opciones por <Tab> urgentes. la exportación NFS / home.

con el tiempo que se ve: .Una vez que arranque.

Esta pantalla le da la oportunidad de utilizar un dispositivo de almacenamiento permanente para el directorio / home del usuario PelicanHPC. usted puede escribir el nombre de un dispositivo (partición de disco duro. y PelicanHPC no modifica ninguno de los equipos que se utilizan en el clúster. Si se cierra el grupo. Por ejemplo. Para la experimentación casual. unidad USB. Esto es seguro y fácil. Es imposible probar esta función en todas las configuraciones de hardware posibles. puede reemplazar "RAM1" con "sda2" o "hdb5" (sin comillas). y se puede volver a utilizarse cuando se reinicia PelicanHPC. pero tiene el inconveniente de que el trabajo que hace desaparece al apagar el clúster. y se utilizará como el directorio home del usuario de racimo (nombre de usuario "usuario"). los discos duros no se utilizan. Esta función se proporciona para su conveniencia para los usuarios avanzados. por lo que NO SE HACEN GARANTÍAS QUE NO DESTRUIR TU DISCO DURO. usted no necesita esta función. De forma predeterminada. pero por defecto. Para utilizar el almacenamiento permanente. Si usted tiene alguna duda acerca de esto. que será montado en / home. Copia de seguridad de sus datos antes de intentar cualquier cosa. un directorio de "usuario" se creará en la raíz del dispositivo especificado. Si usted hace esto. si usted sólo tiene que pulsar <Intro>. el directorio no ser eliminado. basta con pulsar <Intro>. . etc) que tiene un formato ext2 o ext3.

A continuación. se le pedirá que cambie la contraseña por defecto: . a menos que se vuelvan a utilizar el trabajo que ha guardado en una sesión anterior. A continuación. podrás ver Usted probablemente querrá elegir "sí".

Usted debe de retroceso para eliminar el defecto y escriba una nueva contraseña. también. Esta será la contraseña para el usuario "usuario" en el nodo frontend y en todos los nodos de cómputo. Por último. todos ustedes son arranca y aparece la entrada del sistema: .

Escriba el nombre de usuario "usuario" y luego la contraseña que ha establecido hace un momento. .

PelicanHPC utiliza la consola. A continuación.Ahora que se registran en: Tenga en cuenta que puede entrar en el enterface gráfico Xfce si decide por escribir "startx". sólo para evitar posibles problemas con el hardware de gráficos inusual. vemos lo siguiente. suponiendo que usted tiene más de un dispositivo de red: . Para configurar un clúster. De forma predeterminada. escriba "pelican_setup". Usted puede hacer esto desde la consola como en estas instrucciones. o de Xfce mediante la apertura de un terminal.

. Configuración de un servidor dhcp PelicanHPC te meten en problemas con la red de administradores de tu si lo hace en una red abierta. lea la advertencia en la siguiente captura de pantalla. Por favor. Cuando vea la siguiente pantalla. excepto el grupo. Usted debe asegurarse de que el dispositivo de red que se utiliza para el clúster está aislado de todas las redes. los servicios deben iniciarse.Después de elegir el dispositivo de red. seleccione "sí".

A continuación verá Pulse entrar. . y salir a su vez en los nodos de cómputo.

suponiendo que tiene un monitor: . puedes encontrar esto.Cuando uno empieza a calcular el nodo de arranque de red. verá este genio por: Cuando un nodo de cómputo se realiza el arranque.

De vuelta en el nodo frontend. verá lo siguiente: Una vez que un nodo ha arrancado. la cuenta sube: .

Algunos otros consejos: y y y y y puede agregar software para el nodo frontend con "apt-get install lo que sea". debe estar instalado en algún lugar de / home / usuario. Puede cambiar el tamaño del clúster (agregar o quitar nodos de cómputo) siempre que lo desee. el grupo está listo para usar.No dejan de golpear "no" hasta que todos los nodos de cómputo han arrancado. Una vez que haga clic en Sí. y una pequeña cantidad de esfuerzo que se convierten en un monitor de clúster agradable. etc. verás algo como lo siguiente. pero los nodos de cómputo son reales. dependiendo de cuántos nodos que tiene. Si sus anfitriones tienen velocidades diferentes. probablemente debería eliminar el nodo frontend de los cálculos. entonces usted puede hacer su propia versión muy fácilmente usando el script make_pelican que está disponible en la página de inicio PelicanHPC. Ver este mensaje para obtener información general sobre la manera de hacerlo. ksysguard está disponible. el número de núcleos. Si el nodo frontend es virtual. mediante la ejecución de "pelican_restarthpc". Tenga en cuenta cómo me escriba "lamnodes" para comprobar que realmente funcionaba. . si necesita de otros paquetes. Este asigna clasificaciones a los anfitriones en una forma de round robin. Bueno. suponiendo que la interfaz cuenta con una red segunda tarjeta que ha configurado para permitir el acceso a Internet. Este software no está disponible en los nodos de cómputo. quisiera establecer su propia contraseña por defecto. eso es todo. Para agregar software para que esté disponible a todos los nodos. debe modificar este archivo y re-lamboot (si el uso del MELA). MPI la configuración por defecto está en el archivo / home / usuario / tmp / bhosts. Esto se explica (un poco) a continuación.

Este archivo contiene los interruptores de opciones avanzadas que permiten realizar acciones como el uso de almacenamiento permanente. incluyendo algunos de computación paralela sobre: . pero la gente quiere que un grupo permanente debería verlo. el cambio de la red del clúster. Wake-on-LAN. Econometría es un campo de estudio que aplica los métodos estadísticos a los modelos económicos. El software está en el directorio Econometría: No es un documento "econometrics. Es auto-documentado. el arranque sin intervención del usuario. etc Varios usuarios no necesitan para explorar.IMPORTANTE: En la home / usuario de la guía / es el archivo pelican_config. y algunos ejemplos de la amplia el campo de la econometría que el uso de GNU Octave . Volver al índice Ejemplo de software PelicanHPC tiene el Linpack HPL de referencia.pdf" que tiene una gran cantidad de información.

. la música .. escribe "octava" y luego "kernel_example" (por favor. maestro): . tenga en cuenta que subrayar de nuevo allí. por favor.Abre un terminal.

.

Para ver cómo funcionan en paralelo. con un solo núcleo.et viola! algunas fotos: Esa última imagen de pantalla y muestra el resultado de kernel_example. vea la siguiente fotografía:.m si se ejecuta en serie. por lo que debe especificar al menos dos filas de MPI. NOTA las rutinas del núcleo no hacer cálculos en el rango 0 (se utiliza para recoger los resultados). .

mientras que en Octave. Para saber si el código es. mientras que en Octave. si desea volver a utilizarlo. "mc_example" y algunos otros me estoy olvidando. O. "gmm_example". puede enviarlo por correo electrónico a ti mismo. escriba "editar bfgsmin_example" (o editar lo que quieras) y el archivo se encuentra en la ruta de octava se abrirá en el editor vim. Hay muchas opciones. tales como montar un disco duro. etc Si usted tiene una conexión a Internet configurado. vaya editar el archivo correspondiente para obtener más información acerca de lo que hace.Otras cosas a tratar son "bfgsmin_example". como se ilustra en la siguiente fotografía: . Tendrá que guardar su trabajo entre períodos de sesiones. las imágenes PelicanHPC poner / home / usuario en un disco de memoria que desaparece al apagar. el tipo de "ayuda mc_example". utilizando un dispositivo USB. Volver al índice Guardar el trabajo De forma predeterminada. "mle_example". A continuación. por ejemplo.

Volver al índice Uso de la secuencia de comandos make_pelican Las imágenes ISO distribuidos proporcionar un clúster de configuración del sistema al descubierto los huesos. usted tiene la opción de seleccionar un dispositivo de almacenamiento para su uso. para que su trabajo se guarda entre sesiones sin tomar ninguna medida especial. Si utiliza una partición con otros datos sobre él. a fin de utilizarlo con precaución.Si utiliza PelicanHPC para un trabajo serio. Ver pelican_config en / home / usuario. y yo recomendamos encarecidamente que dedique una partición de disco duro para su uso con PelicanHPC. Esta es una característica para los usuarios avanzados. Al arrancar el nodo interfaz. Esta característica ha sido probado con un conjunto muy limitado de equipos. Esta es la mejor solución para los usuarios que quieran utilizar PelicanHPC sobre una base a largo plazo. es muy conveniente para montar un dispositivo de almacenamiento para utilizar como / home. además de algunos paquetes que uso en mi investigación y la . También existe la opción de montar automáticamente un volumen que tiene un nombre especial. debe asegurarse de que una copia de seguridad antes de usarlo con PelicanHPC! ext2 y ext3 en formato Sólo se sabe que funcionan.

debian. Hay algunos ejemplos tomados de mi trabajo.org/ . es posible dar a todos los nodos del clúster de acceso a Internet a través de la conexión del nodo de interfaz. según en el que dejó sin comentar en el guión. . Añadir los paquetes que necesita para la sección de lista de paquetes. y también en las imágenes en libertad. Una conexión rápida a Internet es útil. Los requisitos previos están instalados en PelicanHPC. eche un vistazo en que antes de intentar utilizar make_pelican. que está disponible en la página de descarga .alioth. o para las personas interesados en la econometría. ayuda a construir la imagen de una forma rápida. Las partes del proceso de construcción son en paralelo y se aprovechará de múltiples núcleos.. si usted es un usuario de Windows. que pueden ser de interés para los que aprenden los conceptos básicos de MPI. Asimismo. Sin embargo..iso" en el . algunos usuarios prefieren tener una versión de atención al cliente al de la imagen del CD. Hay un manual para Debian Live . El: y y y y y y una versión instalada de GNU / Linux. examinar la secuencia de comandos make_pelican. Esta información es la documentación principal. ya que make_pelican es un script que ofrece una configuración específica para el sistema Live de Debian de la construcción de una imagen de CD en vivo. cuando haya terminado. tiene que ejecutar el script make_pelican como usuario root. y también como código fuente para su uso con otras distribuciones. muchos usuarios encontrarán que Pelican no contiene los paquetes que necesitan. También es necesario y rsync paquetes debootstrap. Si uno utiliza pelican_config correctamente. que contiene algunos comentarios se explica por sí mismo. Deb. Información adicional se encuentra en http://debianlive. "hombre lh_config" y "lh_build hombre" le dará la información. El tiempo de construcción para la configuración por defecto en un ordenador portátil de doble núcleo decente con mucha memoria RAM es de aproximadamente media hora. para que pueda construir una versión personalizada con la libertad son de la versión. Esto puede ser una instalación mínima en una cárcel chroot si lo prefiere para ejecutar algo más de su trabajo normal. Sin embargo. Si tiene los requisitos previos para ejecutar el script. habrá un archivo "binary. donde . Por favor. Incluso puede utilizar una máquina virtual en Windows. ya que una gran cantidad de paquetes que se deban descargar. Está disponible como un archivo.docencia. es muy fácil de hacer una versión personalizada de Pelican requisitos. de modo que los paquetes pueden ser simplemente añadido a partir de "apt-get". es de esperar computadora multi-núcleo. Tenga en cuenta que usted puede elegir una contraseña diferente aquí. recuerda que "el hombre vive-ayudante". el vivir a la generación de paquetes. PelicanHPC es producido mediante la ejecución de un script único "make_pelican". Utilice la versión disponible en Debian. / es la ubicación de la secuencia de comandos make_pelican y <arquitectura> es o i386 o amd64. Además. / <arquitectura> directorio / frontend.

You're Reading a Free Preview

Descarga
scribd
/*********** DO NOT ALTER ANYTHING BELOW THIS LINE ! ************/ var s_code=s.t();if(s_code)document.write(s_code)//-->