Formation Hadoop, architecture et administration

• Présentation générale d’Hadoop
• Exemples d’utilisations d’Hadoop
• Principales Distributions d’Hadoop
• Planification

Architecture et composants de la plateforme Hadoop

• Approche conceptuelle d’Hadoop
• HDFS : NameNode / DataNode
• Paradigme MapReduce et YARN
• Les technologies émergentes

Installation d’une plateforme Hadoop

• Définir l’architecture
• Installation d’Hadoop / HDFS
• Installation des principaux composants : Hive, Pig, etc.
• Mise en œuvre : installation d’Hadoop et de quelques composants

Configuration de l’environnement Hadoop

• Étude des fichiers de configuration
• modes de configurations : ligne de commandes, API Rest, serveur http intégré, APIS natives
• Configuration des services: HDFS, YARN, Logs, etc.
• Configuration des droits d’accès

Administration et gestion des ressources

• Affecter les quotas
• Gérer les planificateurs

Administration de HDFS

• Gestion des démons Hadoop
• Ajout/Suppression des nœuds
• Gestion des données dans HDFS

Administration de MapReduce

• Gestion des taches MapReduce
• Gestion des nœuds de calcul

Planification des stratégies de sécurité et de récupération des données

Travaux pratiques

• Installation, configuration et administration pas à pas d’un cluster Hadoop