Créer des pipelines de données avec Talend / dbt / Airflow
Version du programme : 1
Type de formation
PrésentielDurée de formation
21 heures (3 jours)Accessibilité
OuiCréer des pipelines de données avec Talend / dbt / Airflow
Cette formation permet de comprendre les enjeux du data engineering moderne à travers la création et l’orchestration de pipelines de données. En s’appuyant sur des outils comme Talend, dbt et Airflow, les participants apprendront à construire des flux robustes et automatisés pour l’alimentation des systèmes d’analyse ou d’IA.
Objectifs de la formation
- Créer des flux ETL avec Talend et dbt
- Automatiser l’orchestration de pipelines avec Apache Airflow
- Comprendre les bonnes pratiques du data engineering moderne
- Mettre en œuvre des transformations de données fiables, testables et versionnées
Profil des bénéficiaires
- Data engineers, développeurs, analystes ou architectes impliqués dans la transformation, l’intégration et l’automatisation des flux de données.
- Connaissances en bases de données, SQL, et principes fondamentaux de l’ETL/ELT. Aisance avec un environnement technique (ligne de commande, scripts).
Contenu de la formation
Jour 1 – Fondamentaux des pipelines de données
- Concepts ETL vs ELT, data lineage, data mesh
- Talend Open Studio : interface, connecteurs, jobs simples
- Atelier : pipeline d’ingestion avec Talend (fichier → base)
Jour 2 – Transformation avec dbt (data build tool)
- Architecture dbt, modèles, documentation et tests
- Versionnage de modèles, modularisation, gestion des dépendances
- Atelier : création de transformations SQL versionnées avec dbt
Jour 3 – Orchestration avec Apache Airflow
- DAGs, opérateurs, planification et exécution
- Monitoring des tâches, alertes, logs
- Atelier final : orchestrer un pipeline complet Talend + dbt via Airflow
Équipe pédagogique
Suivi de l'exécution et évaluation des résultats
- Évaluation continue par la réalisation d’un pipeline complet (ingestion, transformation, orchestration) avec tests et documentation.
Ressources techniques et pédagogiques
- Guides pratiques Talend/dbt/Airflow, jeux de données d’entraînement, scripts d’installation, modèles de pipelines reproductibles.
Accessibilité
Nous accordons une attention particulière à l'accueil des personnes en situation de handicap. Si vous êtes concerné(e) et souhaitez suivre cette formation, nous vous invitons à nous contacter dès que possible. Ensemble, nous étudierons vos besoins spécifiques et mettrons en place les adaptations nécessaires pour garantir votre accès à la formation dans les meilleures conditions.