- Cours pratique
- FSE
- Informatique
Formation Hadoop - Analyse du Big Data en environnement Hadoop
Les Distributions Hadoop Data Analyst - Analyse de données en environnement Hadoop
- Durée
- 3 jours
- Niveau
- Intermédiaire
- Modalités
- Distanciel
Description de la formation Analyse donnees Hadoop
Cette formation est consacrée à l’analyse de données dans un cluster Hadoop. Elle aborde le fonctionnement de HDFS et de YARN, le paradigme MapReduce, l’utilisation de l’interface Hue ainsi que l’interrogation des données avec Hive et HCatalog.
Les participants découvrent également la programmation en Pig Latin, l’optimisation des traitements avec Tez, l’import de données relationnelles avec Sqoop, ainsi que l’orchestration des workflows avec Oozie.
Objectifs pédagogiques
Cette formation Big Data Analyse vous apportera les connaissances et compétences nécessaires pour:
- Comprendre le fonctionnement d'Hadoop Distributed File System (HDFS) et YARN/MapReduce
- Explorer HDFS
- Suivre l’exécution d’une application YARN
- Maitriser le fonctionnnement et l'utilisation des différents outils de manipulation de la donnée :
- Hue : Utilisation de l’interface unifiée
- Hive, Pig : Les générateurs de MapReduce
- Tez : L’optimisation des générateurs de MapReduce
- Sqoop : Comment importer les données de l’entreprise dans un cluster Hadoop?
- Oozie : Comment organiser les exécutions des différentes applications ?
Programme
Contenu du cours, module par module
8 modules
- Présentation générale d’Hadoop
- Exemples d’utilisation dans différents secteurs
- Historique et chiffres clés : Quand parle-t-on de Big Data ?
- Le système de fichier HDFS
- Le paradigme MapReduce et l’utilisation à travers YARN
- Hue : Comment fonctionne cette interface web ?
- Hive : Pourquoi Hive n’est pas une base de données ?
- Utilisation de HCatalog
- Utilisation avancée sur Hive
- Utilisation de fonctions utilisateurs
- Paramétrage de requête
- Pig : Fonctionnement de Pig
- Utilisation du mode Local
- Utilisation de fonctions utilisateurs
- Tez : Qu’est-ce que Tez ?
- Oozie : Fonctionnement de Oozie
- Manipulation des workflows
- Ajout d’éléments d’exploitation dans les workflows
- Ajout de conditions d’exécution
- Paramétrage des workflows
- Sqoop : A quoi sert Sqoop ?
- Chargement des données depuis Hadoop
- Utilisation et paramétrage avancée
- Les particularités des distributions : Impala, Hawq
- Quelles sont les bonnes pratiques d’utilisation des différents outils ?
Programme mis à jour le 20/11/2025
Public concerné
Cette formation Big Data Analyse de données en environnement Hadoop est destinée aux personnes qui devront manipuler les données dans un cluster Apache Hadoop.
Prérequis
Cecours nécessite d'avoir une expérience dans la manipulation de données. Une connaissance préliminaire d’Hadoop n’est pas exigée mais recommandée.
J’évalue mes connaissances pour vérifier que je dispose des prérequis nécessaires pour profiter pleinement de cette formation en faisant le test de prérequis.
Faire le testFinancement
Cette formation peut être prise en charge par votre entreprise, seule ou avec l’appui de son opérateur de compétences. Nous fournissons le devis et les pièces attendues par l’OPCO.
4/5
3 avis
« Mon avis sur le contenu du stage : "PAS DE POSSIBILITE DE TESTER CAR TROP DE BLOCAGE SECURITE COTE AGIRC ARRCO" Mon avis sur le formateur : "PRESENTATION AGREABLE. GRANDE CONNAISSANCE DU SUJET" Mon avis sur la salle de formation : "AGIRC ARRCO IMPOSE TROP DE RESTRICTIONS SANS POSSIBILITE DE CONTOURNEMENT" Ce que j'ai le plus apprécié : "CONNAISSANCES TECHNIQUES DE L'INTERLOCUTEUR" »
FARIA HervéAGIRC ARRCO « Mon avis sur le contenu du stage : "Stage très intéressant mais n'ayant malheureusement pas permis de manipuler certains outils compte tenu des restrictions AGIRC ARRCO" Mon avis sur le formateur : "Très bon formateur et passionné par son métier et la technique" »
FC « Mon avis sur le contenu du stage : "Pas de travaux pratiques dû à la sécurité informatique de notre société qui bloque l'accès." Mon avis sur le formateur : "L'animateur connait tres bien son sujet et sait transmettre les notions de façon explicite." »
AE
Les avis figurant ci-dessus sont issus des fiches d’évaluation que remplissent les participants à la fin de la formation. Ils sont ensuite publiés automatiquement si les personnes ont explicitement accepté que nous les diffusions.
Formations liées
- Big Data : Les techniques d'Analyse et de VisualisationRéf. OTAV4 joursFondamentalProchaine session : 7 sept.2 490 €
- Python avancé sur Databricks : notebooks, PySpark, SQL, visualisation et MLflowRéf. PYAD4 joursAvancé
- Hadoop - DéveloppementRéf. ODOP3 joursIntermédiaireProchaine session : 16 nov.2 090 €
- Spark, développer des applications pour le Big DataRéf. OSHD3 joursIntermédiaireProchaine session : 21 déc.2 090 €