Yarn : Le gestionnaire de cluster intégré à Hadoop

Présenter YARN
Vidéo non disponible ! Réessayez plus tard
Cette vidéo fait partie de la formation
Apprendre les fondamentaux d'Hadoop
Revoir le teaser Je m'abonne
3,0
Transcription

69,00€ Je commande

Formation incluse dans l'abonnement Elephorm Je m'abonne à Elephorm

DescriptionProgrammeAvis
3,0
69,00€ Je commande

Formation incluse dans l'abonnement Elephorm Je m'abonne à Elephorm

L'objectif de cette vidéo est d'expliquer le rôle de Yarn dans le cadre de Hadoop, de présenter ses composants clés et de démontrer comment il alloue des ressources de manière dynamique pour les applications.

Yarn est le cluster manager intégré à Hadoop. Son rôle est d'allouer les ressources aux applications de façon dynamique.

Yarn, introduit en 2013, est le gestionnaire de clusters intégré à Hadoop. Avant son intégration, Hadoop ne pouvait exécuter que des applications MapReduce. Yarn dynamise la gestion des ressources, permettant ainsi une allocation optimale en fonction des besoins des applications.

Les composants essentiels de Yarn sont le Resource Manager, qui accepte les tâches soumises, les programme et répartit les ressources. Chaque nœud du cluster possède un Node Manager, lequel accède aux ressources de la machine et communique avec le Resource Manager pour équilibrer la charge. Lorsqu'un job est soumis, une Application de Master est créée pour négocier les ressources avec le Resource Manager et gérer conjointement les containers. Enfin, le Container est une ressource qui contient la RAM et les vCores nécessaires aux traitements. Il exécute les tâches et transmet les informations à l'Application de Master.

Voir plus
Questions réponses
Quel est le rôle principal de Yarn dans Hadoop?
Le rôle principal de Yarn dans Hadoop est d'allouer des ressources de manière dynamique aux applications en fonction de leurs besoins.
Quels sont les composants clés de Yarn?
Les composants clés de Yarn incluent le Resource Manager, le Node Manager, l'Application de Master, et les Containers.
Avant l'intégration de Yarn, quelles applications Hadoop pouvait-il exécuter?
Avant l'intégration de Yarn, Hadoop pouvait uniquement exécuter des applications MapReduce.
1 commentaire
3,0
1 vote
5
4
3
2
1
F0BCE18F-B4CF-4428-B3BF-711FC7AA03D6@cyberlibris.studi.fr
Il y a 1 year
Commentaire
super