Conférence (50min)

La guerre des orchestrateurs: Airflow VS Kestra

11:15 - 12:05 · Salle des Actes
Data Engineering

Speakers

Description

Face à l’explosion des pipelines data, l’orchestration est devenue le cœur battant des data platforms. Historiquement, Apache Airflow s’est imposé comme une référence incontournable pour planifier, monitorer et exécuter des workflows, mais une nouvelle génération d’outils émerge dont Kestra. Au cours de cette conférence, deux Data Engineers avec plus de cinq et sept ans d’expérience partageront leur retour terrain en comparant Airflow et Kestra à partir de cas d’usages concrets : conception de pipelines, gestion des dépendances, monitoring, observabilité, gestion des erreurs, extensibilité, coût opérationnel et adoption dans les équipes. Nous évoquerons également le positionnement de ces outils dans un écosystème data en pleine mutation (modern data stack, batch vs event-driven). L’objectif : donner des clés pragmatiques pour comprendre les forces et limites de chaque orchestrateur et aider les équipes à choisir celui qui répond le mieux à leurs enjeux technologiques et organisationnels.