Dopo aver seguito questi corsi, mi sento sicuro nel creare visualizzazioni e dashboard professionali
Shoebur RahmanSpecialista degli acquisti, Giz Bangladesh
Descrizione del corso
Ora aggiornato ad Apache Airflow 3.1.6 - Consegnare dati su base programmata può essere un processo manuale. Scrivi script, aggiungi complicati task cron e provi varie soluzioni per soddisfare requisiti in continua evoluzione — e gestire tutto è ancora più difficile quando lavori in team. Apache Airflow può eliminare questo problema aggiungendo pianificazione, gestione degli errori e reportistica ai tuoi workflow. In questo corso, imparerai le basi di Apache Airflow e come implementare in produzione pipeline di data engineering complesse. Imparerai anche a usare i Directed Acyclic Graphs (DAG), ad automatizzare i workflow di data engineering e a implementare task di data engineering in modo semplice e ripetibile — aiutandoti a mantenere la sanità mentale.
Prerequisiti
Programma
Struttura del corso
1
Introduzione ad Airflow
In questo capitolo avrai una panoramica completa dei componenti di Apache Airflow e imparerai come e perché dovresti usarli.
- Introduzione ad Apache Airflow50 XP
- Contatore di Dag50 XP
- Esegui il tuo primo Dag50 XP
- DAG di Airflow50 XP
- Creare un Dag semplice100 XP
- Lavorare con i Dag e la shell di Airflow50 XP
- Esaminare i comandi di Airflow50 XP
- Testare un task in Airflow50 XP
- Interfaccia web di Airflow50 XP
- Esplorare l'interfaccia di Airflow50 XP
- Esaminare i Dag con la UI di Airflow50 XP
- Errori Dag50 XP
2
Creare DAG in Airflow
Tutto ok, DAG? È il momento di imparare le basi per implementare i DAG in Airflow. Con attività pratiche, imparerai a configurare e distribuire operatori, task e pianificazione.
3
Manutenzione e monitoraggio dei workflow Airflow
In questo capitolo vedrai come risparmiare tempo usando componenti di Airflow come sensori ed executor, mentre monitori e risolvi i problemi dei workflow Airflow.
4
Controllare la logica dei DAG
Metti tutto insieme. In questo capitolo finale, applicherai tutto ciò che hai imparato per creare un workflow di qualità produttiva in Airflow.
Introduzione ad Apache Airflow in Python
Corso
completato
