OPENLINEAGE-SPEC

Standard lineage data inter-plateformes.

Définition

OpenLineage définit un event model avec runEvents (START/COMPLETE/FAIL), jobs (name, namespace), inputs/outputs (datasets), facets (extensions structurées). Intégrations natives : Airflow, Spark, dbt-ol, Dagster, Flink, Trino. Consommé par Marquez, Atlan, DataHub, OpenMetadata.

Origine

Projet créé par WeWork en 2020 ; donné à LF AI Foundation en 2021 ; v1.0 publié juin 2022.

Exemple en contexte

Une équipe data envoie ses runs Airflow + dbt à OpenLineage puis visualise le lineage dans Marquez.

Termes liés

• dbt — integration native.