Starlake, la Data Platform Open Source !
La fusion de Fivetran et dbt Labs confirme une tendance que starlake.ai anticipait dès sa création : le chargement et la transformation des données sont indissociables. Développée par des ingénieurs en mission chez des clients, la plateforme open source Starlake répond à un besoin concret d'orchestration cohérente sans créer de complexité superflue.
L'approche de Starlake repose sur un langage déclaratif unifié en YAML pour le Load et le Transform, tout en restant composable avec l'écosystème existant. La plateforme génère automatiquement l'orchestration pour Apache Airflow, Dagster Labs et Snowflake Tasks, évitant ainsi tout enfermement propriétaire. Cette philosophie d'ouverture est renforcée par un engagement total vers l'open source.
L'innovation majeure réside dans le lineage automatique. Grâce à JSQLParser, un parseur SQL open source auquel l'équipe contribue activement, Starlake génère le graphe de dépendances directement depuis du SQL standard, sans imposer de macros ou de langages propriétaires. Les analystes peuvent copier-coller leurs requêtes existantes et bénéficier immédiatement du lignage et de l'orchestration.
La suite en live le 13 Novembre à 17h30, ...
