Talend
Disposer d’une vision globale et instantanée de la performance des activités de l’entreprise est devenu un impératif dans un contexte aussi concurrentiel qu’instable.
Mais la richesse et la variété des données dont le traitement est nécessaire pour atteindre cet objectif rendent cet exercice particulièrement délicat et complexe… à moins de disposer d’outils adéquats.
Talend Open Studio (TOS) est une application libre de type ETL permettant d’effectuer des synchronisations massives d’informations d’une base de données vers une autre. Ce stage vous apprendra à concevoir, modéliser et développer des “jobs” TOS afin de faire face aux différentes problématiques.
40 formations
+20 années d’expérience
+800 participants
99% clients satisfaits
Contenu de la formation
OBJECTIFS
- Comprendre comment développer des workflows et Mappings en utilisant les bonnes pratiques de la méthode Velocity
- Comprendre comment exécuter et monitorer des workflows
- Savoir utiliser le debugger
- Concevoir et développer des jobs dans l’application ETL Talend
- Optimiser les jobs développés par l’utilisation de contextes et jeux de données
- Réaliser des transformations plus complexes en utilisant variables, expressions et jointures
- Exécuter et déboguer un job, tracer les statistiques d’exécution
PUBLIC
- Développeurs, chefs de projet, consultants en informatique décisionnelle, administrateurs de base de données
PRE-REQUIS
- Bonne connaissance des SGBDR et du SQL. La connaissance du langage Java est un plus.
Présentation
- L’intégration de données. Les solutions ETL.
- TOS : installation, préférences utilisateur. Documentation de référence.
- Philosophie du produit. Conception d’un job.
-
Travaux pratiques
Prise en main de l’outil. Présentation du cahier des charges du projet fil rouge.
Modéliser le besoin, concevoir un premier job
- Business Modeler. Job Designer.
- Principales connexions. Composants CSV et XML.
- Composants de transformation simples.
- Visualiser du code généré, exécuter un job.
- Exercice
Développement d’un job assurant le tri d’une source CSV, le filtrage de données et le stockage du résultat dans un fichier XML
Optimiser le développement des jobs
- Configurer des connexions réutilisables à l’aide des métadonnées.
- Mettre à jour les métadonnées et les propager sur les jobs, importer/exporter des métadonnées.
- Paramétrer les jobs par des contextes.
- Externaliser les variables de contexte dans des fichiers “.properties” et “.ini”.
- Créer et gérer ses propres variables.
- Générer des jeux de données pour des tests.
-
Exercice
Refactorer un job en utilisant métadonnées et contextes. Générer un jeu de données de test pour ce job.
Travailler avec des bases de données
- Bases de données supportées et principaux composants.
- Paramétrages des opérations sur les tables.
- Métadonnées et contexte de connexion à un schéma de base de données.
- Partage de connexions et gestion des transactions.
- Créer des requêtes à l’aide de SQLBuilder.
-
Exercice
Lecture et mise à jour d’un référentiel de données hébergé sur un serveur MySQL.
Travailler sur des données multisources
- Présentation du composant tMap.
- Configuration des flux d’entrée, créations de jointures.
- Réaliser des transformations en utilisant variables, expressions et jointures.
- Qualifier les données à l’aide de filtres.
- Générer des sorties multiples, gérer les rejets.
-
Exercice
Consolidation de données multisources et génération d’un entrepôt.
Compléments
- Décomposer un job en sous-jobs, utilisation du tRunJob. Lancer les jobs en ligne de commande. Exécution périodique.
- Débogage d’un job, tracer les statistiques d’exécution.
- Reporting tJasperOutput.
-
Exercice
Génération d’un rapport Jasper Report à partir d’un entrepôt.
Les plus de la formation
Les formateurs sont des experts techniques et business en activité travaillant pour de grands comptes sur des projets à fortes valeurs ajoutées liés au Big Data.
Des ateliers viennent compléter et illustrer les apports théoriques, fournissant ainsi aux participants une expérience concrète de la mise en oeuvre et de l’utilisation de Talend.
Les participants bénéficient de l’expertise des intervenants et tirent ainsi profit de leur expérience sur cette technologie.
Ces professionnels nous font confiance
Ils témoignent de leurs expériences
“Formation avec beaucoup d’exercice, ce qui simplifie véritablement la compréhension. Encore merci pour le café et les biscuits 🙂 ”
“Tout était clair et facile à comprendre avec beaucoup de patience du prof. La formation m’a apporté une vision d’ingénieur Bi.”
Des formations qui pourraient vous intéresser
Nous vous proposons des formations de qualité, soigneusement préparées par des professionnels.
Ce que nos clients pensent de nous
“Après de sincères et profonds remerciements, je tiens à féliciter notre intervenant et par extension tout ceux qui ont contribué à cette formation, pour l’ apport que ce soit à un niveau personnel ou professionnel.
En effet , cette formation m’a permis non seulement de revisiter certains aspects du Big Data avec une vision nouvelle et plus précise mais également d’assimiler de nombreuses connaissances . Les remarques pertinentes avec les détails pratiques ont permis de bénéficier du recul et de l’expérience de notre formateur.”
” Très bonne formation, ne surtout pas hésiter à partager ses expériences professionnels, que ce soit en terme de projets, de problèmes rencontrés dans le monde de l’entreprise ou encore de questions rencontrées en entretien.
Les plus de cette formation ont été la vision plus large qu’on peut se faire des projets de la vie réelle et des domaines qui accompagne le nôtre (data science), ainsi que de la culture pouvant aider à se démarquer lors d’un entretien. Pour finir, les supports étaient très clairs et les schémas rendaient les idées très simples à comprendre et retenir.”
Newsletter
Retrouvez l’essentiel de l’actualité du Big Data directement par mail !
Les experts de Formation-BigData décortiquent chaque mois l’actualité, les dernières innovations.