cd ~/open-source/

chrille@linux:~$ apt show airflow

Airflow

Airflow är ett verktyg för orkestrering av arbetsflöden. Det passar data engineers som behöver schemalägga, övervaka och hantera beroenden mellan jobb Du definierar dataflöden som kod i Python och får en tydlig vy över vad som körs.

Projektsidan för Airflow
Projektets egen sida, som den såg ut vid importen.

Med Airflow kan du definiera dataflöden som kod i Python, schemalägga dem och få en tydlig vy över vad som körs, misslyckas eller väntar. Verktyget är öppen källkod och används för allt från ETL till maskininlärningspipelines. Du får pålitligare dataflöden och lättare felsökning när något går fel Verktyget är öppen källkod och används för allt från ETL till maskininlärningspipelines. Du får pålitligare dataflöden och lättare felsökning när något går fel, eftersom beroenden och status syns tydligt.