Ecosystème Hadoop
Prix en inter
Durée
Objectifs
Connaître les outils spécifiques au métier de Data Analyst.
Pre-requis
Une connaissance de SQL est un plus Une connaissance d’Hadoop n’est pas nécessaire|Les participants doivent connaitre les principes de la programmation et avoir de l’expérience dans le développement de logiciels
Public visé
Analystes de données – Analystes Business Intelligence – Développeurs Business Intelligence – Développeurs SAS et tous les autres analystes qui souhaitent en savoir davantage sur l’analyse du Big Data dans un cluster Hadoop
Programme
Module 1 : COMPRENDRE HADOOP 2.0
- Le Hadoop Distributed File System (HDFS)
- Introduction aux données dans HDFS
- MapReduce Framework et YARN
Module 2 : UTILISATION DE PIG
- Introduction à Pig
- Programmation Pig avancée
- Troubleshooting et optimisation avec Pig
- Résolution des problèmes avec Pig
- Journalisation
- Utiliser l’UI Web Hadoop
- Démonstration optionnelle : résolution d’un « Failed Job » avec l’UI Web
- Échantillonnage de données et débogage
- Vue d’ensemble des performances
- Comprendre le plan d’exécution
- Astuces pour améliorer la performance de votre « Pig Jobs »
Module 3 : PROGRAMMATION HIVE
- Utilisation de HCatalog
- Programmation de Hive avancée
- Étendre Hive
- Transformation de données avec des scripts personnalisés
- Fonctions définies par l’utilisateur
- Paramétrer les requêtes
- Exercices « Hands-On » : transformation de données avec Hive
- Programmation Hive avancée
- Analyse de données et statistiques
- Définition workflow avec Oozie
Modalités de déroulement
Formation présentielle ou distancielle dispensée par un formateur expérimenté. La formation alterne des exposés théoriques, des démonstrations et la mise en pratique au travers d'exercices et de cas concrets.Méthode et moyens mobilisés
Evaluation des acquis tout au long de la formation à travers des Tps, des Quizz ;
Evaluation de satisfaction de fin de formation ;
Attestation de fin de formation précisant les modules acquis et en cours d’acquisition ;
Support de cours remis en fin de session.Modalités d'accès
Vous pouvez vous inscrire pour suivre une de nos formations jusqu'à la veille de la date de démarrage si la formation est financée directement par votre entreprise ET si le nombre maximum de participants n'est pas atteint. Si la formation est financée via un OPCO, vous devez au préalable avoir obtenu un accord de ce dernier.Accessibilité aux personnes en situation de handicap