Costruirò e ottimizzerò i tuoi pipeline ETL e i flussi di lavoro di integrazione dei dati
Il punto di riferimento per le soluzioni di dati
Informazioni su questo servizio
I pipeline mal progettati non solo ti rallentano, ma compromettono la fiducia nei tuoi dati. Sono un senior data engineer con oltre 6 anni di esperienza nella creazione di pipeline ETL di produzione e flussi di lavoro di integrazione dei dati per startup e scale-up, tra cui Delivery Hero (Berlino).
Progetterò e costruirò il tuo pipeline end-to-end, dall'ingestione alla destinazione, in modo pulito, affidabile e facilmente manutenibile dal tuo team.
Cosa consegnerò:
- Progettazione e implementazione di pipeline ETL
- Ingestione di dati da più fonti (API, database, file flat)
- Trasformazione e validazione dei dati
- Orchestrazione dei workflow (Airflow, Kestra)
- Configurazioni native cloud (AWS: Athena, Redshift, S3 · GCP: BigQuery, Dataflow)
- Gestione degli errori, logging e monitoraggio di base
- Documentazione di consegna
Prima di iniziare, definirò chiaramente l'ambito del lavoro per evitare sorprese sui tempi o sui deliverable. Per progetti più grandi o continuativi, sono disponibili offerte personalizzate.
Strumenti: Python, SQL, Apache Airflow, Kestra, AWS (Athena, Redshift, S3), GCP (BigQuery, Dataflow), PostgreSQL, dbt
