Formation : Introduction to Hadoop Development

Ref. HDP-01

Télécharger en PDF

Durée :

3

jours

Examen :

Non certifiant

Niveau :

Fondamental

Financement :

Eligible

Home > Formations > Développement > Gestion de bases de données > Introduction to Hadoop Development

Description

Cette formation à la certification des développeurs Apache Hadoop vous aidera à vous faire une idée détaillée de Big Data et de Hadoop. Certains des sujets abordés sont une introduction à l’écosystème Hadoop, la compréhension des HDFS et de MapReduce, y compris l’abstraction de MapReduce. Apprenez à installer, mettre en œuvre les différents composants de Hadoop comme Pig, Hive, Flume, Sqoop et YARN.

Profils des Participants

Développeurs de logiciels, analystes, professionnels de la BI, de l’ETL et de data warehouse
Les développeurs, architectes et testeurs de Big Data

Objectifs

Apprendre l’architecture Hadoop
Rédiger des programmes MapReduce et déployer des clusters Hadoop
Développer des applications pour les grandes données en utilisant la technologie Hadoop
Développer des programmes YARN sur la version 2.X de Hadoop
Travaux sur l’analyse des données de grande taille à l’aide de Hive, Pig et YARN
Intégrer MapReduce et HBase pour une utilisation et une indexation avancées
Apprendre les principes fondamentaux du framework Spark et de son fonctionnement
Comprendre RDD dans Apache Spark
Apprendre les meilleures pratiques de développement
Planification des tâches à l’aide d’Oozie

Connaissances Préalables

Pas de prérequis

Contenu du Cours

Module 1 : Introduction à Big Data & l’écosystème Hadoop , Map Reduce et HDFS

Module 2 : Installation et configuration de Hadoop

Module 3 : Plongée profonde à Mapreduce

Module 4 : Résolution de problèmes de graphiques

Module 5 : Compréhension détaillée de Pig

Module 6 : Compréhension détaillée de Hive

Module 7 : (AVRO) Formats des données

Module 8 : Introduction à l’architecture Hbase

Module 9 : Mise en place du cluster et fonctionnement des Tâches Map Reduce

Module 10 : Mapreduce avancé

Documentation

Support de cours numérique inclus

Lab / Exercices

Travailler avec le HDFS
Programme d’écriture WordCount
Rédaction d’un partitionneur personnalisé
Mapreduce avec Combiner
Carte Côté Rejoindre
Réduire le nombre d’adhésions latérales
Test unitaire Mapreduce
Executer Mapreduce en mode « Local Job Runner »

Cours complémentaires

Financement Eligible

ITTA est partenaire d’un fonds de formation continue destiné aux travailleurs temporaires. Ce fonds peut subventionner cette formation, sous réserve que vous soyez assujetti(e) à la convention collective de travail (CCT) « Location de services » et que vous remplissiez certaines conditions, notamment avoir travaillé au moins 88 heures au cours des 12 derniers mois.