Architecte des plates-formes de données modernes

Chapitre 8. Validation de la plate-forme

Cet ouvrage a été traduit à l'aide de l'IA. Tes réactions et tes commentaires sont les bienvenus : [e-mail]

Une fois que ton matériel a été installé et que le logiciel a été installé, il est temps de valider l'installation. Tu veux t'assurer que la grappe fonctionne dans une fourchette de performances raisonnable et attendue et que tous les composants fonctionnent bien les uns avec les autres. La validation peut inclure une variété de pratiques, telles que :

Test de fumée

Pour détecter le matériel défectueux et les mauvaises configurations de la plate-forme. N'importe quelle configuration peut avoir des disques qui sont morts à l'arrivée, des clés de mémoire qui ne sont pas bien placées, des adaptateurs réseau qui fonctionnent par intermittence, et bien d'autres choses encore. Les disques de stockage, en particulier, ont tendance à tomber en panne selon la courbe en baignoire.¹ Tu peux utiliser des tests de déverminage pour "enfumer" ces composants et les remplacer avant que la demande du système n'entre en jeu.

Test de référence

Pour démontrer ou prouver la dégradation des performances. Pour cela, tu as besoin de preuves, pas d'attentes. Si tu exerces ton système à intervalles réguliers pendant que tu configures le matériel, le système d'exploitation et les composants Hadoop, tu peux établir une corrélation entre les changements récents et une modification de l'efficacité du système. Tu peux identifier les régressions ...