Formation Hadoop, Développement
Découvrir comment Hadoop sert à concevoir des traitements data plus fluides, du socle technique aux usages concrets, pour avancer vite sur vos projets cloud.
- Référence formation :
- MOD_2023564
- Durée :
- 21 heures
- Satisfaction :
- Prix :
- 2380 € HT
Présentation de la formation
Pour faire face à un volume croissant de données à analyser, et fournir aux internautes des résultats de recherche pertinents, le framework Hadoop voit le jour au milieu des années 2000.
Devant le succès rencontré par la solution, Hadoop passera chez Cloudera qui créera alors la distribution Hadoop la plus utilisée à ce jour.
Objectifs pédagogiques
- Connaître les différents éléments de l’écosystème Hadoop et leurs rôles respectifs.
- Comprendre l’architecture des applicatifs Hadoop.
- Comprendre les apports et cas d’usage des solutions Hadoop.
Public visé
- Développeurs de logiciels,
- Administrateurs de bases de données,
- Analystes BI,
- Architectes logiciels,
- Chefs de projet.
Prérequis
- Avoir des connaissances en matière de développement d’applications d’entreprise, d’intégration de systèmes commerciaux et/ou de conception, d’interrogation et de rapports de bases de données.
Architecture Hadoop
- Histoire de Hadoop – Facebook, Dynamo, Yahoo, Google
- Le noyau Hadoop
- Architecture YARN, Hadoop 2.0
Système de fichiers distribués Hadoop (HDFS)
- Clusters HDFS – NameNodes, DataNodes et clients
- Métadonnées
- Administration en ligne
MapReduce
- Traitement et génération de grands ensembles de données
- Fonctions Map
- Programmation de MapReduce à l’aide de SQL / Bash / Python
- Traitement parallèle
- Failover
Entreposage de données avec Hive
- Synthétisation des données
- Requêtes ad-hoc
- Analyser de grands ensembles de données
- HiveQL (langage de requête de type SQL)
- Intégration avec les bases de données SQL
- Analyse des n-grammes
Traitement parallèle avec Pig
- Évaluation parallèle
- Interface du langage de requête
- Algèbre relationnelle
Extraction de données avec Mahout
- Regroupement ou Clustering
- Classification
- Filtrage collaboratif par lots
Recherche avec Elastic Search
- Concepts de recherche Elastic
- Installation, importation des données
- Démonstration de l’API, exemples de requêtes
Stockage de données structurées avec HBase
- Big Data : échelle de taille d’un grand ensemble de données.
- Optimiser l’accès en lecture/écriture en temps réel
Base de données multi-master Cassandra
- Le modèle de données de Cassandra
- Cohérence éventuelle
- Quand utiliser Cassandra
Redis
- Modèle de données Redis
- Quand utiliser Redis
MongoDB
- Modèle de données MongoDB
- Installation de MongoDB
- Quand utiliser MongoDB
Kafka
- L’architecture de Kafka
- Installation
- Exemple d’utilisation
- Quand utiliser Kafka
Architecture Lambda
- Concept
- Hadoop + Intégration du traitement des flux
- Exemples d’architecture
Big Data dans le Cloud
(Si le temps le permet)
- Amazon Web Services
- Concepts : modèle de paiement à l’utilisation
- Amazone S3, EC2, EMR
- Plateforme Google Cloud
- Google Big Query
Dernière mise à jour le 7 août 2026
9 - 11 Décembre 2026
À distance
Formation Hadoop, Développement
Modalités pratiques et pédagogiques
Docaposte Institute propose plusieurs dispositifs pédagogiques adaptés aux apprenants :
- Formation en présentiel
- En groupe (inter-entreprises ou intra-entreprise)
- En individuel (monitorat)
- En journée ou en cours du soir (sur demande spécifique)
- Formation en distanciel
- Distanciel synchrone
- Distanciel asynchrone
- Alternance d’apports théoriques et de mises en pratique contextualisées.
- Progression pédagogique structurée, de la compréhension à la mise en œuvre opérationnelle.
- Pédagogie immersive favorisant une mise en application immédiate des compétences.
- Formation interactive et participative s’appuyant sur des ateliers pratiques, études de cas et échanges collectifs (+ 60 % du temps de formation.)
- Séquences pédagogiques rythmées et évaluations formatives régulières pour renforcer l’ancrage des apprentissages.
- Supports de cours, ressources documentaires et références mis à disposition par le formateur
En amont de la formation (évaluation en ligne dans l’extranet apprenant)
- Recueil des besoins et des attentes des participants.
- Auto-positionnement permettant d’évaluer le niveau initial des apprenants.
Tout au long de la formation
- Évaluations continues réalisées par le formateur travers des questions orales, exercices, QCM, études de cas et mises en situation pratiques.
À l’issue de la formation (évaluations en ligne dans l’extranet apprenant)
- Auto-positionnement afin de mesurer l’acquisition des compétences visées.
- Validation de l’acquisition des compétences par le formateur
- Questionnaire de satisfaction « à chaud » à l’issue de la formation
- Questionnaire de satisfaction « à froid », 45 jours après la formation afin d’évaluer l’ancrage des acquis et leur mise en application en situation professionnelle.
NB : dans le cadre d’une Action collective, chaque stagiaire bénéficiaire sera contacté par un prestataire choisi par l’Opco Atlas afin d’évaluer « à chaud » la qualité de la formation suivie.
Nous consulter.
Nos formations peuvent être adaptées à certaines conditions de handicap. Nous contacter pour toute information et demande spécifique.
Tarifs et financement
- Cette formation peut être prise en charge à 100% dans le cadre des Actions Collectives.
Pour en bénéficier, contactez-nous à hello.institute@docaposte.fr et complétez votre inscription sur campusAtlas.