Datapedia
Ingeniería de Datos

Dagster

Herramienta de orquestación de datos de código abierto que trata los activos de datos (tablas, archivos, modelos) como el elemento central a gestionar, en lugar de solo tareas individuales.

HerramientasOrquestación

Dagster organiza los pipelines de datos alrededor del concepto de “activos de datos” —las tablas, archivos o modelos concretos que un pipeline produce— en lugar de enfocarse únicamente en la secuencia de tareas que los generan, facilitando razonar sobre las dependencias entre los distintos datos que produce una organización.

Su propuesta frente a herramientas como Airflow

Ofrece mejor soporte nativo para pruebas locales de pipelines, tipado explícito de los datos que fluyen entre pasos, y una interfaz que muestra directamente el estado de los activos de datos producidos, en lugar de solo el estado de ejecución de tareas individuales.