Costruirò pipeline etl usando apache spark, airflow e modern data stack

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Inglese, Giapponese

Ingegnere del software

Sono un ingegnere del software con 3 anni di esperienza nello sviluppo e nell'ottimizzazione di servizi backend per sistemi di elaborazione pagamenti su larga scala. Ho implementato pipeline di elabor...
Informazioni su questo servizio

Trasforma dati disordinati in pipeline scalabili.

Costruisco pipeline ETL, data warehouse e soluzioni Apache Spark che gestiscono scale reali.

Pipeline ETL / ELT (batch e streaming)

Elaborazione Apache Spark / PySpark

Airflow DAG e automazione dei workflow

Design di data warehouse (Snowflake, BigQuery, Redshift)

Kafka e pipeline di dati in tempo reale

Architettura pulita, veloce e scalabile, pensata per la produzione, non per demo.


Scrivimi per discutere del tuo progetto o per ricevere un suggerimento rapido sull'architettura.

Lingua:

Inglese

Esperienza tecnica:

dbt (Data Build Tool)

Apache Airflow

Expertise:

Pipeline dati

Sviluppo ETL

Data warehousing

Settore:

Audio e video

Analisi dei dati

Servizi finanziari