PREFECT-EDI

Orchestrateur Python flows dynamiques modernes.

Définition

Prefect 2 (juillet 2022) puis Prefect 3 (avril 2024) abandonne le DAG préalable au profit de Python natif avec @flow et @task. Prefect Cloud (managed) propose deployments, workers, secrets, automations. Convient particulièrement pour les pipelines EDI à branchements conditionnels.

Origine

Créé par Jeremiah Lowin (ex-Airflow PMC) en 2018 ; Prefect 2 juillet 2022 ; Prefect 3 avril 2024.

Exemple en contexte

Une plateforme EDI utilise Prefect pour ingestrer 500 partenaires SFTP avec retries 4x configurables par flow.

Termes liés

• Airflow — concurrent historique.