KT Sparks

Оркестрация на работни потоци

Apache Airflow

Оркестрация с отворен код за пайплайни за данни.

Тип
Продукт
Зрялост
Основен стек

Общ преглед

Airflow описва пайплайните за данни като Python код, след което ги планира, рестартира при грешка и наблюдава. Използваме го за пайплайни, при които редът на зависимостите и повторната обработка на минали периоди са по-важни от визуалното платно.