Sarò il tuo data engineer per soluzioni databricks pyspark ETL e lakehouse

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Inglese

Ingegnere di dati cloud

Ciao, sono Soban, un Data Engineer con oltre 3 anni di esperienza pratica nella creazione e consegna di soluzioni dati end-to-end. Mi specializzo in Snowflake, Airflow, Kafka, Azure Data Factory, ADLS...
Informazioni su questo servizio

Costruirò pipeline di dati robuste e soluzioni lakehouse usando Databricks, PySpark, Apache Spark, Spark SQL e Delta Lake.

Cosa posso creare:

Pipeline ETL/ELT con Databricks

Trasformazioni dati con PySpark

Elaborazione batch dei dati

Soluzioni Delta Lake

Architettura Medallion

Livelli di dati Bronze, Silver e Gold

Elaborazione incrementale dei dati

Pulizia e convalida dei dati

SCD Tipo 1 / Tipo 2

Modellazione dei dati e dataset pronti per analisi

Posso lavorare con dati strutturati provenienti da file CSV, API, database e altre fonti supportate, trasformandoli in dataset puliti e affidabili per analisi e applicazioni downstream.

Contattami prima di ordinare così posso rivedere i tuoi requisiti e consigliarti il pacchetto più adatto.

Expertise:

Integrazione API

•

Big data

•

Estrazione dati

Tecnologia:

Apache Kafka

•

Apache Spark

•

Python

•

SQL

•

Snowflake

Il mio portfolio

Altri servizi della categoria Data engineer offerti da me