Hace dos fines de semanas vino Albert de Barcelona, y junto con otra gente de Bulma empezamos a montar el hardware (más fotos).

Nos llevó casi tres días tener todo funcionando, con cena en casa incluida :-) Sobre todo porque la documentación sobre cómo montar lo que queríamos no existe, o está muy dispersa. Básicamente queríamos montar un cluster Beowulf, con MPI, PVM y todo funcionando además sobre OpenMosix. Pero no sólo eso, sino que queríamos que los nodos no tuviesen discos, que estuviesen en una red privada y el master hiciese no sólo de servidor de NFS, sino también de NIS, DHCP, NAT, DNS y todos los servicios que hiciesen falta.

Y como si eso fuese poco, tembién queríamos que una sola fuente de alimentación alimentase a por lo menos diez paquitos. Todo con el objetivo de eliminar ruido, disipar menos calor, ahorrar energía y que quepa todo en un espacio reducido-

Finalmente lo hemos conseguido, con un 100% de hit-ratio :-) Ahora tenemos un cluster con 5 nodos, pero tres más ya están en cola esperando que Bernat les suelde los cables de la fuente.

Es buenísimo ver como el OpenMosix migra los procesos de forma transparente de forma que la carga esté balanceada.

Pero lo mejor de todo es que hacemos uso extensivo de todos los paquetes que nos solucionan la vida, por ejemplo, gracias al diskless y al syslinux, en cuestión de muy pocos minutos, podemos tener un nuevo nodo en marcha, con todas sus imágenes preparadas en el servidor y los ficheros "personalizados" (como el /etc/fstab generados automáticamente) , y además sin duplicar nada que no sea necesario:

  m3d03:/var/lib/diskless/default# ls
192.168.219.100/  192.168.219.101/  192.168.219.102/  192.168.219.103/  
192.168.219.104/  root/
m3d03:/var/lib/diskless/default# du -s *
49588   192.168.219.100
49584   192.168.219.101
49188   192.168.219.102
46808   192.168.219.103
46808   192.168.219.104
241460  root

Y todo lo anterior sin programar una sola línea de código o script.

Gracias a todos los que han ayudado, ha estado, y sigue siendo, muy divertido. Como dirían los matemáticos, a ver si ahora le encontramos una utilidad :-) [*]

[*] En realidad nos interesa una, y casi urgente. Hacer que el ffmpeg trabaje en forma paralela convirtiendo y comprimiendo vídeo en distintos formatos.

Mientras, otros se dedican a marcar paquete comprando cacharros que cuestan una pasta.

La pregunta es obligada... ¿Cuántos Paquitos pueden comprarse con 1.144.600 euros? ¿Ganaríamos en potencia a una SGI Altix 3000? ¿No se marca más paquete montando un cluster?

Personalmente, veo mucho más interesante e innovador montar un cluster que comprar un cacharrín de 1 millón de euros. Y tal como está el mercado (un P4 2.4Ghz completo puede costar unos 600 euros), se pueden comprar muuuchos nodos con ese dinero.

Saludos.

DONDE CONSIGO EL RPM O TAR DE MPI PARA REDHAT8 ??

GRACIAS.

MARIO.

mariozaizar@hotmail.com

¿Qué potencia tiene el cluster de paquitos que teneis montado en este momento?

Tengo entendido que hay que superar un umnbral de máquinas puestas en cluster para que compense vs una sola máquina mucho más potente (pongamos un P4 a 2Ghz).

Felicidades por el proyecto.

He aqui la idea para Baleares: un Linux en cada habitacion de hotel, y cuando el cliente no lo use, que forme parte del cluster insular. Seriais la primera potencia mundial en alquiler de CPU!

Su pagina esta muy bien, pero considero que le faltan algunos conceptos más básicos (para gente como yo) de lo que es un cluster y la arquitectura que estan usando.

En nuestro Departamento, hemos montado un clustes OpenMosix utilizando los ordenadores de los que disponíamos, desde un P4-1700 (que hace de servidor de disco, gateway, nodo principal del OpenMosix, etc) hasta varios PI a 133-166, pasando por gran variedad de hardware hasta sumar los 22 nodos del cluster.

Además, el arranque de los nodos lo hemos implementado usando LTSP (Linux Terminal Server Project), que nos da la posibilidad de arrancar en cada nodo las X, con lo cual, tenemos 22 puestos de trabajo en nuestra aula. Cada nodo es diskless, arranca desde un floppy (pronto desde las propias tarjetas de red) y ejecuta el software con la misma potencia (la del cluster de 22 máquinas, que se reparte para los procesos de todos los puestos de trabajo).

La experiencia es fantástica.

Un saludo,
Ángel