Dagster

L'orchestrateur de données orienté assets pour des pipelines déclaratifs, testés et observables.

Dagster est un orchestrateur open source qui raisonne en assets plutôt qu'en tâches : chaque table, fichier ou modèle est déclaré en Python comme un software-defined asset, et le graphe de dépendances, le lineage et la fraîcheur en découlent. Partitions et backfills rejouent une plage de dates, les asset checks valident la qualité à chaque matérialisation, et les intégrations dbt, Spark, Snowflake ou Airbyte s'inscrivent dans le même graphe. C'est notre choix quand une équipe data veut tester ses pipelines localement et savoir, asset par asset, ce qui est à jour.