Join us for an evening dedicated to Apache Airflow, hosted at Datadog in Paris! Expect Airflow presentations, networking, food, drinks, prizes and of course awesome swag! We look forward to seeing you there.
TALKS
Talk 1: Apache Airflow for Production-ready AI
Speaker: Vivien Saulais, Senior Sales Engineer, Astronomer
Abstract: Running AI workloads in production takes more than a model call. This talk shows how Apache Airflow's Common AI provider brings production-ready AI orchestration into your DAGs: single-turn LLM calls, multi-turn agents with tools, and building blocks for RAG, SQL generation, and file analysis. You'll also see how to productionize it all with durable execution, usage limits, and human-in-the-loop review.
Talk 2: Versionner ses DAGs par équipe et par datacenter avec un ObjectStoreDagBundle
Speaker(s): Hussein Awala, Senior Data Engineer and Airflow PMC member, Datadog | Safae Hariri, Software Engineer, Datadog
Chez Datadog, de nombreuses équipes déploient leurs DAGs Airflow dans plusieurs datacenters. Avec un déploiement classique, un nouveau commit peut modifier le code d’un DAG alors qu’un run est en cours. Les tâches d’un même run peuvent alors s’exécuter avec différentes versions du code, ce qui risque de faire échouer l’exécution si les changements sont incompatibles.
Airflow propose déjà un GitDagBundle versionné, mais son utilisation devient difficile lorsque chaque équipe dispose de son propre bundle dans chaque datacenter. Nous expliquerons pourquoi, puis nous présenterons un ObjectStoreDagBundle versionné, qui garantit qu’un run utilise la même version du code du début à la fin. Nous montrerons aussi comment nous utilisons ces versions pour lancer des DAGs à la demande depuis des branches non fusionnées et tester une nouvelle version d’un DAG en production avant de la publier. Enfin, nous aborderons les limites actuelles et les corrections en cours dans Airflow.
Talk 3: Newsroom Analytics: Airflow au cœur de la rédaction
Speaker: Quentin Barigault, Senior Data Analyst, Le Figaro
Abstract: TBD
AGENDA
• 17h30–18h00: Welcome / Networking
• 18h00–18h15: Welcome remarks
• 18h15–18h45: Talk 1 - Apache Airflow for Production-ready AI
• 18h45–19h15: Talk 2 - Versionner ses DAGs par équipe et par datacenter avec un ObjectStoreDagBundle
• 19h15–19h30: Coffee break
• 19h30–20h00: Talk 3 - Newsroom Analytics: Airflow au cœur de la rédaction
• 20h00–20h30: Raffle Prize / Networking / Buffet
