Sommaire

Les Matériel:nœuds esclavesnœuds esclaves

Les nœuds esclaves sont tous les nœuds d’un cluster Hadoop qui ne sont pas des nœuds maîtres.

De par sa conception, Hadoop est optimisé pour fonctionner dans un cluster dans lequel les nœuds esclaves sont des serveurs de milieu de gamme (type serveur dual socket 1U ou 2U) présentant les caractéristiques suivantes :

  • Deux CPU à deux, quatre ou six cœurs (2,5 à 3 GHz).

  • De 24 à 48 Go de mémoire vive (DDR3).

  • Un contrôleur de disques SAS à 6 Go/s.

  • De huit à douze disques de 1 ou 2 To SATA à 7 200 t/mn, en configuration JBOD (Just a Bunch of Disks).

  • Un ou deux liens 1 GbE, voire 10 GbE.

Une configuration JBOD est généralement plus performante qu’une configuration basée sur des disques RAID et, par ailleurs, HDFS offre déjà la redondance des données.

Dans un cluster de plusieurs centaines ou plusieurs milliers de nœuds, des défaillances de nœuds esclaves ne sont pas rares : rappelons encore une fois que Hadoop a été conçu pour supporter de telles défaillances de manière transparente pour l’utilisateur.