04 - De l'ETL at scale, robuste et performant !

Détails

Accueil - 18h30
Début des talks - 19h

1 - Azure Synapse - l'ETL et Data Warehouse complètement managé

Avec Synapse Analytics, Microsoft met à disposition une solution intégrée de gestion de données élastique comprenant l’orchestration (Azure Data Factory), un lac de données, plusieurs solutions de traitements (SQLDW, Serverless sur fichiers, Notebook Jupyter…), le tout intégré avec Power BI !

Si la proposition marketing est alléchante Guillaume Vissian BI Product Manager chez Air Liquide et Sauget Charles-Henri MVP Data Platform chez Insiders.coop vous présenteront le retour terrain d’une mise en place d'architectures B.I. supportées par ces technologies.

2 - AWS EMR + Spark - Performance et astuces

3 - Tests automatisés d'ETL avec Postgres et Snowflake

Comment utiliser des techniques de software engineering (tests, container, CI) afin de rendre notre ETL fiable.
Comment nous avons migré vers un warehouse Snowflake tout en gardant cette approche.