Costruirò databricks delta lake lakehouse e architettura medallion


Informazioni su questo servizio
Traduzione automatica.
Stai cercando di creare un data lakehouse moderno e scalabile su Databricks? Progetterò e implementerò un Delta Lake Lakehouse pronto per la produzione con architettura Medallion (strati Bronze, Silver, Gold).
Con oltre 4 anni di esperienza in Publicis Sapient e Alcon nella costruzione di piattaforme di dati aziendali, porto una profonda competenza in Databricks, PySpark e Delta Lake.
Ciò che costruirò per te:
- Configurazione di Delta Lake con strati medallion Bronze/Silver/Gold ottimizzati
- Pipeline PySpark per ingestion, trasformazione e aggregazione
- Delta Live Tables (DLT) per pipeline dichiarative e auto-scalanti
- Unity Catalog per una governance dei dati dettagliata e controllo degli accessi <li Controlli sulla qualità dei dati, applicazione dello schema e transazioni ACID
- Integrazione del ML feature store per workflow di machine learning
- Ottimizzazione delle prestazioni: Z-ordering, partizionamento e compattazione dei file
- Workflow automatizzati usando Databricks Jobs e cluster
- Documentazione completa e consegna
Tecnologie: Databricks, PySpark, Delta Lake, Delta Live Tables, Unity Catalog, Azure Data Lake Storage, Apache Spark, SQL
Scrivimi per discutere delle tue esigenze!
Scopri di più su Jessay
Senior Data Engineer: AWS, Azure, Spark, ETL Pipelines and Data Architecture
- DaIndia
- Membro daapr 2025
- Tempo di risposta medio3 ore
- Ultima consegna6 mesi
Lingue
Malayalam, Inglese
Traduzione automatica.
Il mio portfolio
FAQ
Traduzione automatica.
Quali piattaforme cloud supporti per Delta Lake?
Lavoro principalmente con Azure Databricks e Azure Data Lake Storage (ADLS Gen2), ma supporto anche AWS (S3 + EMR/Glue) e GCP (BigQuery + Dataproc). Tutti i pacchetti includono configurazioni Delta Lake indipendenti dal cloud.
Devo avere già un workspace Databricks per iniziare?
Non necessariamente. Posso aiutarti a configurare un nuovo workspace Databricks da zero sul tuo account cloud, o lavorare all’interno del tuo ambiente esistente. Condividi pure la tua configurazione attuale quando mi contatti.
