Costruirò pipeline di dati etl ad alte prestazioni con dbt e airflow

Ciao, sono Ted, un ingegnere senior di infrastrutture dati con vasta esperienza nella creazione di pipeline ETL ed ELT di livello produzione per ambienti dati complessi.

Mi specializzo nella progettazione, nello sviluppo e nell'ottimizzazione di pipeline dati scalabili usando Python, dbt, Airflow e Snowflake. Nel corso degli anni, ho aiutato team a passare da processi dati frammentati a sistemi affidabili, automatizzati e a basso costo.

Cosa consegno:

• Pipeline ETL/ELT personalizzate (Python + SQL) con le migliori pratiche
• Modellazione avanzata con dbt e trasformazioni
• Orchestrazione con Airflow e sviluppo di DAG robusti
• Architettura Snowflake, caricamento dati e ottimizzazione delle performance
• Caricamenti incrementali, regole di qualità dei dati, monitoraggio e gestione degli errori
• Codice pulito, ben documentato e con trasferimento di conoscenze fluido

Mi concentro sulla creazione di pipeline manutenibili, scalabili e che riducono gli sforzi di manutenzione a lungo termine. Che tu abbia bisogno di una nuova pipeline da zero, di migrare a Snowflake o di miglioramenti importanti a quelle esistenti, consegno soluzioni di alta qualità, pronte per la produzione e puntuali.

Scrivimi i dettagli del tuo progetto e ti fornirò un scope e una timeline chiari.