Costruirò pipeline di dati expert in pyspark con databricks e delta lake

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Hindi, Inglese

Ti fornirò servizi di Data Analytics, Python e Cloud Services

Ciao, sono Zia, un Consulente Tecnico di Dynamics 365 F&O con oltre 3 anni di esperienza, specializzato in soluzioni ERP e dati basati su Azure. La mia esperienza include personalizzazioni e integraz...
Informazioni su questo servizio

Pipeline di dati scalabili con PySpark, Databricks e Delta Lake

Stanco di pipeline di dati lente, non ottimizzate o inaffidabili? Come Data Engineer professionista con oltre 3,5 anni di esperienza, mi specializzo nell'architettura di soluzioni ETL/ELT ad alte prestazioni. Aiuto le aziende a trasformare dati frammentati in set di dati puliti e pronti per la produzione usando l'architettura Lakehouse moderna.

La mia competenza tecnica:

  • PySpark & Databricks: Sviluppo di logiche di elaborazione complesse e distribuite per big data.
  • Delta Lake: Implementazione di transazioni ACID, enforcement dello schema e viaggio nel tempo per uno storage affidabile.
  • Workflow Orchestration: Automazione esperta usando Azure Data Factory (ADF), Apache Airflow e funzioni Azure Functions senza server.
  • Infrastruttura Cloud: Esperienza pratica con Azure, MinIO e ottimizzazione di SQL ad alte prestazioni.

Perché lavorare con me?

<p Mi concentro su stabilità architetturale e efficienza di calcolo. Il mio background in integrazioni ERP complesse e ricerca in data engineering garantisce che le tue pipeline siano costruite per una scalabilità a lungo termine, non solo una soluzione temporanea.

Contattami prima di effettuare un ordine. Ogni progetto di dati ha requisiti unici, e un breve allineamento tecnico è essenziale per fornire la soluzione più accurata.

Expertise:

Integrazione API

Big data

Estrazione dati

Tecnologia:

Apache Spark

Azure data factory

Excel

Python