Scriverò, ottimizzerò e debugerò pipeline ETL pyspark e databricks

Alcune informazioni sono state tradotte automaticamente.

Spagna

Parlo Spagnolo, Inglese

Ingegnere dei dati

Sono un appassionato ingegnere informatico e sviluppatore Big Data specializzato in sviluppo Back-End e processamento dati con Spark e tecnologie Cloud. Ho una vasta esperienza nella progettazione di ...
Informazioni su questo servizio

Hai query lente in BigQuery, modelli dbt rotti o job Spark non ottimizzati? 


Sono un Senior Data Engineer (Databricks Associate Certified) con oltre 5 anni di esperienza nella creazione e ottimizzazione di architetture di dati scalabili nel cloud (GCP, Databricks, BigQuery). Mi specializzo nel trasformare pipeline di dati complesse, lente e costose in flussi di lavoro veloci, efficienti e convenienti.


Ecco cosa posso fare per te:

- dbt & Data Warehousing: Costruire e rifattorizzare modelli dbt seguendo l'Architettura Medallion (Bronze, Silver, Gold), ottimizzare le query SQL e configurare esecuzioni Cloud Run / Control-M / Airflow.

- PySpark & Databricks: Debuggare, rifattorizzare e velocizzare pipeline batch ETL con Spark (Scala/Python).

- Architettura Cloud GCP: Configurare pipeline scalabili con BigQuery, Cloud Run e Airflow/Composer.

- Ottimizzazione di database e query: Ridurre i costi di elaborazione e i tempi di esecuzione di BigQuery/Snowflake.


Perché lavorare con me?

- Certificazioni: Data Engineer Certificato da Databricks & Certificato Azure.

- Codice di alta qualità: Pratiche di ingegneria dei dati pulite, modulari e manutenibili.

- Comunicazione chiara e diretta: disponibile in inglese e spagnolo.


NOTA: Contattami con le tue esigenze prima di ordinare

Destination Platform:

Google BigQuery

•

Azure Synapse Analytics

Strumenti e piattaforme:

Google Cloud Dataflow

•

Apache NiFi

•

Altro