CATALOGUE Code & Data Apprendre les fondamentaux d'Hadoop Guide pour la Création et la Gestion de Dossiers sur HDFS

Guide pour la Création et la Gestion de Dossiers sur HDFS

Démo : Créer un dossier sur HDFS

Vidéo non disponible ! Réessayez plus tard

25min

30 leçons

3,0

Transcription

69,00€ Je commande

Formation incluse dans l'abonnement Elephorm Je m'abonne à Elephorm

PRO : J'en fait profiter mon équipe

DescriptionProgrammeAvis

25min

30 leçons

3,0

69,00€ Je commande

Formation incluse dans l'abonnement Elephorm Je m'abonne à Elephorm

PRO : J'en fait profiter mon équipe

Création d'un Dossier sur HDFS

Objectifs

Les objectifs de cette vidéo sont de :

Comprendre la création de dossiers sur HDFS
Utiliser les commandes adéquates pour gérer les répertoires
Naviguer et vérifier les répertoires créés via l'interface HDFS

Résumé

Apprenez les étapes pour créer et gérer des dossiers sur HDFS.

Description

Dans cette leçon, nous vous guiderons à travers le processus de création et de gestion de dossiers sur HDFS. Vous apprendrez à utiliser la commande hdfs dfs -mkdir pour créer des répertoires, et à naviguer dans l'interface HDFS pour vérifier vos créations. Nous commencerons par créer un répertoire utilisateur, suivi d'un répertoire spécifique aux besoins de l'utilisateur. Cette étape est cruciale pour organiser vos fichiers de manière structurée dans un environnement Big Data.

Vous verrez comment vérifier la création de répertoires sur HDFS grâce à l'interface graphique, en vous dirigeant vers la section Utilities et en utilisant l'option Browse the file system. Une fois cette vérification faite, le dossier créé sera visible, démontrant ainsi l'exécution correcte des commandes.

Questions - réponses

Quelle commande est utilisée pour créer un répertoire sur HDFS ?

La commande utilisée est hdfs dfs -mkdir.

Quels sont les deux répertoires créés dans la leçon ?

Les deux répertoires créés sont user et alexi.

Comment vérifier la création des répertoires en utilisant l'interface HDFS ?

La vérification se fait en naviguant vers Utilities puis Browse the file system dans l'interface HDFS.

Programme détaillé

Accueil de la formation

Module 1 - Introduction

Paradigme Big Data 02:11

Historique d'Hadoop et présentation rapide des principaux composants 00:21

Module 2 - Installation d'Hadoop

Installer Java 00:35

Installer Hadoop 00:19

Configurer HDFS 01:37

Configuration 00:31

Initialiser un cluster Hadoop 00:11

Lancer un cluster Hadoop 00:23

Configurer YARN 00:59

Lancer YARN 00:22

Vérifier l'installation 00:08

Stopper un cluster Hadoop 00:52

Module 3 - HDFS

Présenter HDFS 00:37

Présenter l'architecture HDFS 00:48

Présenter de la réplication sur HDFS 00:34

Démo : Créer un dossier sur HDFS 00:59

Démo : Envoyer un fichier sur HDFS 00:39

Démo : Lister les fichiers présents sur HDFS et afficher leur contenu 00:37

Démo : récupérer un fichier depuis HDFS 00:39

Démo : supprimer un fichier sur HDFS 00:22

Module 4 - MapReduce

Présenter MapReduce 00:34

WordCount avec MapReduce 00:10

Fonction Map 00:44

Fonction Reduce 00:46

Démo : développer un job MapReduce 04:27

Module 5 - Yarn

Présenter YARN 00:59

Exemple 00:21

Présenter l'interface de YARN 02:08

Module 6 - Ecosystème Hadoop

Présentation rapide des autres composants de l'écosystème Hadoop (HBase, Hive, Zookeeper, Sqoop, Pig, Oozie, Kafka, Spark) 00:56

Un mot sur les distributions Hadoop (Cloudera ...) 00:48

1 commentaire

3,0

1 vote

F0BCE18F-B4CF-4428-B3BF-711FC7AA03D6@cyberlibris.studi.fr

Il y a 1 year

Commentaire

super