Ingeniería de Datos

Airflow es una plataforma de código abierto para crear, programar y monitorear flujos de trabajo de manera programática.

Un flujo de trabajo DAG es un modelo de proceso que organiza tareas en una estructura de grafo dirigido acíclico.

Dagster es un orquestador de datos de código abierto para construir y monitorear pipelines de datos.

La ingeniería de datos implica diseñar y construir sistemas para recopilar, almacenar y analizar datos.

Una tubería de datos es una serie de procesos que mueven y transforman datos de un sistema a otro.

Delta Lake es una capa de almacenamiento de código abierto que aporta fiabilidad y rendimiento a los lagos de datos.

Flyte es una plataforma de código abierto para construir y gestionar flujos de trabajo de datos y pipelines de aprendizaje automático.

LakeFS es una herramienta de control de versiones de datos de código abierto para gestionar lagos de datos con capacidades similares a Git.

Tecton es una plataforma para gestionar y operacionalizar características de aprendizaje automático a gran escala.