Costruirò la tua pipeline di dati con airflow e spark

Alcune informazioni sono state tradotte automaticamente.
Hammad H

Pakistan

Parlo Inglese, Giapponese

Ingegnere del software

Sono un ingegnere del software con 3 anni di esperienza nello sviluppo e nell'ottimizzazione di servizi backend per sistemi di elaborazione pagamenti su larga scala. Ho implementato pipeline di elabor...
Continua a leggere
Informazioni su questo servizio

Crea pipeline di dati affidabili, scalabili e pronte per il cloud.


Hai difficoltà a spostare o trasformare i tuoi dati in modo efficiente? Mi specializzo nella creazione di pipeline di dati end-to-end che automatizzano l'ingestione, la trasformazione, la validazione e il caricamento in ambienti cloud e on-premise.


Con oltre 2,5 anni di esperienza e strumenti come Spark, SQL, Python, Databricks, Snowflake, AWS e GCP, ti aiuto a trasformare dati grezzi e disordinati in insight pronti per la produzione.


Ciò che offro:

  • Pipeline ETL & ELT (batch & streaming)
  • Integrazione con API, storage cloud e database
  • Deployment nativo per il cloud: AWS Glue, Lambda, Azure ADF, Databricks, GCP Dataflow
  • Architettura in tempo reale usando Kafka, Pub/Sub o Event Hubs
  • Pulizia dei dati, controlli di qualità, audit logging


Nota: Scrivimi prima di ordinare per assicurarti che definisca perfettamente il tuo progetto!


Continua a leggere
build your data pipeline with airflow and spark
Schermo intero
build your data pipeline with airflow and spark
Schermo intero
build your data pipeline with airflow and sparkbuild your data pipeline with airflow and spark

Lingua:

Inglese

Esperienza tecnica:

dbt (Data Build Tool)

•

Apache Airflow

+3 in più

Expertise:

Pipeline dati

•

Sviluppo ETL

•

Data warehousing

+1 in più

Settore:

Audio e video

•

Analisi dei dati

•

Servizi finanziari

+1 in più

Tag correlati