Creerò, aggiornerò airflow dags, supporto completo al progetto in configurazione docker, dags
Ingegnere dei dati: dbt, BigQuery, PySpark, Python, SQL, GCP, AWS
Livello 1
Ha soddisfatto determinati criteri di prestazione e mostra un forte potenziale nel marketplace.
Informazioni su questo servizio
Creerò, aggiornerò e ottimizzerò Apache Airflow DAGs e fornirò supporto end-to-end al progetto. Che tu abbia bisogno di nuovi pipeline, miglioramenti ai DAG esistenti o una configurazione completa di Airflow in Docker, ti aiuterò a costruire workflow scalabili, efficienti e pronti per la produzione, su misura per le tue esigenze.
Posso aiutarti con pipeline ETL/ELT, orchestrazione dei dati, automazione dei workflow, configurazione di Airflow in Docker, integrazioni API/database e ottimizzazione delle prestazioni per garantire che i tuoi pipeline funzionino più velocemente, in modo più fluido e con meno errori.
Ciò che è incluso:
- Creazione di nuovi Airflow DAGs da zero
- Aggiornamento e rifattorizzazione di DAG esistenti
- Configurazione di Airflow in Docker con impostazioni
- Progettazione di pipeline ETL/ELT end-to-end
- Integrazione di API, database e fonti di dati esterni
- Debugging, risoluzione di bug e gestione di fallimenti delle task
- Ottimizzazione delle prestazioni dei DAG per un'esecuzione più rapida
- Impostazione di pianificazioni, dipendenze e orchestrazione
- Implementazione di monitoraggio, logging e gestione degli errori
- Supporto continuo per scalare e mantenere i pipeline
Scrivimi pure un DM, ti risponderò subito per discutere delle tue esigenze di progetto.
