Esta traducción es más antigua que la página original y podría estar obsoleta. Ver lo que ha cambiado.
Estás aquí: start » es » centro » servizos » hadoop

Pequeño cluster de experimentación

¡Esta es una revisión vieja del documento!


Cluster Hadoop

El cluster de Hadoop es un pequeño cluster de 5 servidores útil para la experimentación e investigación en temas relativos a Hadoop.

Está formado por 5 nodos computacionales HP Proliant DL 370 G6. Cada uno cuenta con:

  • 2 procesadores Intel Xeon E5506 @ 2.13GHz
  • 12 GB de memoria RAM ECC repartidos en 6 módulos DDR3 @ 800MHz.
  • 2 discos duros de 2 TB montados en dos RAID0
  • 4 puertos Gigabit Ethernet
  • Instalación CentOS 6.5 mínima (kernel 2.6.32-431.17.1.el6.x86_64)

Nodos

Los nodos tienen una instalación mínima de CentOS 7.2, con una versión de kernel 3.10.0-327.36.2.el7.x86_64.

Cada nodo del clúster posee dos discos duros de 2 TB.

Redes

Los nodos están conectados entre si a traves de una red interna, y acceden a internet a traves del master (ctserv07).

Conexión

Hay que solicitar el acceso mediante el formulario de incidencias.

Al master se tiene acceso por ssh (172.16.242.73:22). Para acceder a los otros nodos se debe acceder previamente al master. Desde este se puede hacer ssh (puerto 22) a los nodos mediante IP o mediante nombre. En ctserv07, en /usr/local/bin/ está disponible un script (activar_internet.sh) que permite activar y desactivar el acceso a internet desde los nodos a través del master. Es recomendable que ese acceso permanezca activo sólo cuando sea necesario.

Red externa

Nome Modelo IP
ctserv07 HP Proliant DL 370 G6 172.16.242.73

Red interna

Nome Modelo IP
ctserv07 HP Proliant DL 370 G6 192.168.0.1
hadoop2 HP Proliant DL 370 G6 192.168.0.2
hadoop3 HP Proliant DL 370 G6 192.168.0.3
hadoop4 HP Proliant DL 370 G6 192.168.0.4
hadoop5 HP Proliant DL 370 G6 192.168.0.5