Formation Talend Open Studio, optimiser ses flux de données développement avancé


Formation Talend Open Studio, optimiser ses flux de données développement avancé

Catalogue : Business Intelligence



Introduction
• Présentation de Talend Open Studio.
• Rappel des principes des ETL.
• Installation de TOS.
Java et les routines
• Présentation des principes d'implémentation en Java.
• Consulter le code Java associé à un job.
• Les composants Talend Java.
• Création et usage de routines.
• Anatomie et création d'un composant.
Exercice
Utilisation de tMemorizeRows, tJavaFlex, tJava. Ecrire une routine et l'utiliser dans un job.
Manipulation avancée des données
• Composants de connexion - déconnexion.
• Transactions : gestion du commit et du rollback.
• Appel d'une procédure stockée.
• Mettre en oeuvre les composants ELT.
• Méthodes "Slowly Changing dimension".
• Liaison Père / Fils : partage de connexion, partage de variables et valeurs de retour.
Exercice
Mutualisation des connexions, utilisation des Rollback. Création de Job pour détecter des changements dans des sources de données
Manipulation de structures complexes
• Interagir avec des Services Web
• Manipuler des flux XML.
• Découvrir les composants JSON.
• Utiliser les expressions régulières.
Etude de cas
Utilisation de composant Web services dans un Job. Créer des fichiers XML à partir d'un fichier plat, Utiliser les composants ELT MySQL. Générer un objet JSON simple. Utiliser des expressions régulières.
Monitoring et optimisation des performances
• Debugging.
• Monitorer la performance des jobs.
• Mettre en place son propre système de journalisation.
• Optimiser la performance des jobs.
Exercice
Ajouter des composants de monitoring à un job, mettre en place son système de logs, utiliser les buffers.
Déploiement en production
• Les contextes et leur gestion.
• Lancer un job hors de TOS.
• Programmer l'exécution d'un job sous Windows.
• Programmer l'exécution d'un job sous Linux.
• Talend Enterprise et la TAC.
Exercice
Associer un groupe de contextes à un job. Exporter le premier job créé hors de TOS, planifier l'exécution du job exporté via la planificateur de tâches Windows.
Pour aller plus loin
• Bonnes pratiques de projet. Synchronisation des données.
• Présentation des ressources sur Talend.
• Valoriser son développement au sein de la communauté Talend.

 

Fiche de la formation



 Cible :

Développeurs BI, consultants BI confirmés, développeurs bases de données, ingénieurs d'études BI, consultants ETL.


 Prérequis :

Connaitre les bases de Talend Open Studio ou avoir suivi le stage "Talend Open Studio, mettre en œuvre l'intégration de données"


 Durée : 2 jours

 Type : Stage pratique


 Contactez-nous