Costruirò pipeline ETL su azure usando adf databricks e pyspark

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Hindi, Urdu, Inglese

Ingegnere dei dati di Azure

Sono un Azure Data Engineer con quasi 3 anni di esperienza in Azure Data Factory, Azure Databricks, PySpark e Delta Lake. Mi specializzo nella progettazione e nello sviluppo di pipeline ETL scalabili,...
Informazioni su questo servizio

Cerchi un Data Engineer affidabile su Azure per costruire o ottimizzare i tuoi pipeline ETL?

 

Posso aiutarti a creare soluzioni di dati scalabili ed efficienti usando Azure Data Factory (ADF), Azure Databricks, PySpark e Azure Data Lake Storage Gen2.

Che tu abbia bisogno di ingestione dati, trasformazioni, orchestrazione di workflow o una soluzione ETL end-to-end, posso consegnare un'implementazione pulita e facile da mantenere, su misura per le tue esigenze.

 

Ciò che otterrai:

 

Sviluppo di pipeline Azure Data Factory (ADF)

Ingestione dati dinamica e parametrizzata

Trasformazioni Azure Databricks & PySpark

Sviluppo di pipeline ETL/ELT

Implementazione dell'architettura Medallion

Validazione della qualità dei dati

Orchestrazione e monitoraggio delle pipeline

Documentazione tecnica


Panoramica del pacchetto:

 

Base: pipeline di ingestione ADF semplice con 1 connettore

Standard: soluzione ETL ADF + Databricks con controlli di qualità dei dati e documentazione

Premium: soluzione Azure ETL end-to-end con orchestrazione, trasformazioni e documentazione completa

 

Tecnologie:

Azure Data Factory, Azure Databricks, PySpark, ADLS Gen2, Delta Lake, SQL, CSV e JSON.

 

Contattami prima di ordinare per discutere le tue esigenze e scegliere il miglior pacchetto.

Destination Platform:

Databricks Lakehouse

•

Altro

Strumenti e piattaforme:

Azure data factory

•

Altro

Il mio portfolio