Costruirò e ottimizzerò pipeline scalabili di databricks delta lake

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Inglese

Data Engineering, Azure, AWS, Databricks, Lakehouse, Spark, Fabric

Sono un professionista certificato Databricks e un Data Engineer certificato Microsoft con 9 anni di esperienza reale nella creazione di piattaforme dati scalabili e ad alte prestazioni. Aiuto le azie...
Informazioni su questo servizio

Microsoft & Databricks Certified Senior Data Engineer (oltre 9 anni di esperienza)

Finisci di combattere con dati disordinati. Crea un Lakehouse di livello enterprise che scala facilmente. Come esperto con doppia certificazione, progetterò e ottimizzerò piattaforme di dati pronte per la produzione su AWS, Azure e Databricks.

Cosa offro:

  • Architettura Medallion: Implementazione completa dei livelli Bronze, Silver e Gold per garantire l'integrità dei dati.
  • Pipeline scalabili: ETL/ELT batch e streaming ad alte prestazioni usando PySpark e Spark SQL.
  • Ecologia Databricks: Padronanza di Unity Catalog (Governance), Delta Live Tables (DLT) e Asset Bundles (DABs).
  • Integrazione cloud: Configurazione esperta per AWS (S3, Glue, EMR, Athena) e Azure (Fabric, ADF, Synapse, OneLake).
  • Ottimizzazione dei costi: Tuning avanzato (Z-Order, Liquid Clustering) per ridurre drasticamente le spese di cloud computing.
  • Dati pronti per l'AI: Preparazione specializzata dei dati per GenAI, chatbot RAG e Mosaic AI.

Perché lavorare con me?

  • Oltre 9 anni di esperienza: Profonda esperienza con ambienti di dati complessi e su larga scala.
  • Di livello produzione: Codice pulito, ben documentato e facilmente manutenibile.
  • Focus sulle prestazioni: Sistemi ottimizzati per query in meno di un secondo e massima efficienza.
  • Trasforma i tuoi dati grezzi in un asset strategico. Contattami oggi

Destination Platform:

Amazon Redshift

Azure Synapse Analytics

Strumenti e piattaforme:

AWS Glue DataBrew

Apache NiFi

Talend

Il mio portfolio