Sarò il tuo data engineer per pipeline ETL e data lakehouse

Pipeline che falliscono durante la notte? Report che girano sui dati di ieri?

Creo pipeline di Azure Databricks in produzione che funzionano secondo il programma, si recuperano da soli in caso di fallimento e mantengono un audit trail completo.

Sono un Databricks Certified Professional e Azure certified Data Engineer con oltre 7 anni di esperienza nei settori assicurativo, sanitario e finanziario.

Ciò che realizzerò per te:

• Pipeline ETL/ELT in Azure Databricks, ADF e PySpark
• Architettura Medallion (Bronze, Silver, Gold) su Delta Lake
• Governance Unity Catalog e tracciamento storico SCD Tipo 2
• Allarmi di fallimento, logging di audit e riconciliazione dei dati
• Pianificazione, CI/CD e documentazione di consegna

Progetti recenti su Azure Databricks:

• Slide Insurance: passati da dati giornalieri a dati orari su oltre 900 tabelle, con recupero automatico in caso di fallimento e avvisi prima che dati errati arrivassero a Power BI
• Verto Health: creato una pipeline basata su metadata che aggiunge nuove fonti di dati ospedalieri senza modifiche al codice, con storico completo di audit in Unity Catalog

Come funziona:

1. Condividi la tua sorgente, destinazione e numero di tabelle
2. Esamino i tuoi dati e confermo l'ambito
3. Costruisco, testo e consegno una pipeline funzionante

Progetto più grande o migrazione? Contattami per un preventivo personalizzato.