Big Data (BD) Hadoop Components

Talend fournit un environnement de développement permettant les interactions avec des sources et cibles Big Data sans besoin d'apprendre ou d'écrire du code compliqué. Talend Big Data s'exécute à 100 % nativement sur Hadoop et possède une évolutivité considérable.

La formation Talend Big Data Hadoop Components est une introduction aux composants Talend intégrés dans les produits interagissant avec les systèmes Big Data.

Durée 1 journée (environ 8 heures)
Public ciblé Toute personne souhaitant créer des Jobs à l'aide des composants Talend Big Data.
Prérequis Aucun. Avoir terminé la formation DI Basics ou posséder les connaissances équivalentes.
Objectifs de la formation
A la fin de ce cours, vous pourrez :
  • Vous connecter à un cluster Hadoop à partir d'un Job Talend
  • Stocker un fichier Web de log brut dans HDFS
  • Ecrire des fichiers de données texte dans HDFS
  • Lire des fichiers texte dans HDFS
  • Lire des données depuis une base de données SQL et les écrire dans HDFS
  • Lister le contenu d'un dossier et agir sur chaque fichier séparément
  • Déplacer, copier, écrire à la suite, supprimer et renommer des fichiers HDFS
  • Lire des attributs de fichiers sélectionnés dans des fichiers HDFS
  • Agir sur des fichiers HDFS sous certaines conditions
  • Vous connecter à une base de données Hive à partir d'un Job Talend
  • Utiliser un Job Talend pour charger des données depuis HDFS dans une table Hive
  • Utiliser un Job Talend pour lire des données d'une table Hive et les utiliser dans un Job
  • Exécuter des commandes Hive de manière itérative dans un Job Talend Job, à partir d'entrées variables
  • Développer et exécuter des Jobs Pig à l'aide de composants Talend
  • Trier, effectuer des jointures et agréger des données à l'aide de composants Pig
  • Filtrer des données de différentes manières à l'aide de composants Pig
  • Répliquer des flux de données Pig
  • Exécuter des Jobs Talend avec le gestionnaire de Jobs Apache Oozie
Programme de la formation
  • Lire et écrire des fichiers HDFS
  • Travailler avec des fichiers HDFS
  • Travailler avec Hive
  • Travailler avec Pig
  • Exécuter des Jobs Talend avec Oozie

Pour vous inscrire à une formation Big Data (BD) Hadoop Components, rendez-vous sur le site Micropole Institut, notre centre de formation certifié