Costruirò e ottimizzerò i tuoi pipeline ETL e i flussi di lavoro di integrazione dei dati

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Urdu, Inglese, Tedesco

4 ordini completati

Il punto di riferimento per le soluzioni di dati

Sono un senior data engineer con oltre 6 anni di esperienza nella creazione di soluzioni dati end-to-end per startup e scale-up (tra cui Delivery Hero, Berlino). Lavoro su: pipeline ETL, infrastruttu...
Informazioni su questo servizio

I pipeline mal progettati non solo ti rallentano, ma compromettono la fiducia nei tuoi dati. Sono un senior data engineer con oltre 6 anni di esperienza nella creazione di pipeline ETL di produzione e flussi di lavoro di integrazione dei dati per startup e scale-up, tra cui Delivery Hero (Berlino).

Progetterò e costruirò il tuo pipeline end-to-end, dall'ingestione alla destinazione, in modo pulito, affidabile e facilmente manutenibile dal tuo team.

Cosa consegnerò:

  • Progettazione e implementazione di pipeline ETL
  • Ingestione di dati da più fonti (API, database, file flat)
  • Trasformazione e validazione dei dati
  • Orchestrazione dei workflow (Airflow, Kestra)
  • Configurazioni native cloud (AWS: Athena, Redshift, S3 · GCP: BigQuery, Dataflow)
  • Gestione degli errori, logging e monitoraggio di base
  • Documentazione di consegna

Prima di iniziare, definirò chiaramente l'ambito del lavoro per evitare sorprese sui tempi o sui deliverable. Per progetti più grandi o continuativi, sono disponibili offerte personalizzate.

Strumenti: Python, SQL, Apache Airflow, Kestra, AWS (Athena, Redshift, S3), GCP (BigQuery, Dataflow), PostgreSQL, dbt

Lingua:

Inglese

Esperienza tecnica:

Apache Spark

hadoop

Snowflake

Amazon Redshift

Expertise:

Pipeline dati

Sviluppo ETL

Integrazione dati

Settore:

Analisi dei dati

Servizi finanziari

Legale