Progetterò una soluzione azure di data engineering cloud

Progetto e implemento soluzioni di data engineering su Azure di livello produttivo, pipeline ETL scalabili e architetture Lakehouse moderne.

Con oltre 8 anni di esperienza nel settore, aiuto le aziende a migrare, modernizzare e ottimizzare le loro piattaforme di dati cloud usando tecnologie Microsoft.

Le mie competenze principali

Azure Data Factory

• Pipeline ETL/ELT complesse
• Orchestrazione e trigger
• Caricamenti incrementali e logica CDC
• Gestione degli errori e monitoraggio

Microsoft Fabric

• Architettura analitica end-to-end
• Configurazione Lakehouse e Warehouse
• Modelli semantici
• Ottimizzazione delle performance

Azure Databricks

• Trasformazioni PySpark
• Architettura Delta Lake
• Implementazione Bronze / Silver / Gold
• Ottimizzazione di partitioning e Z-order
• Dimensionamento del cluster e ottimizzazione dei costi

SQL e modellazione dei dati

• Transformazioni SQL avanzate
• Modellazione dimensionale
• Progettazione di schema a stella
• Ottimizzazione delle query

Python

• Elaborazione dati scalabile
• Integrazioni API
• Automazione e validazione dei dati

Cosa realizzo

• Workflow di Azure Data Factory
• Architetture Lakehouse su Databricks
• Data warehouse cloud moderni
• Sistemi di ingestion basati su API
• Migrazioni da on-premise ad Azure
• Piattaforme di dati pronte per l'impresa

Risultati selezionati

• Ottimizzazione dei workload Spark, riduzione del runtime del 60%
• Progettazione di processi per piattaforme Lakehouse