Costruirò pipeline ETL usando pyspark, azure data factory, data bricks

Ciao!

Sono un esperto Data Engineer specializzato nelle tecnologie moderne per i dati. Con competenze pratiche in PySpark, Azure Data Factory, Databricks, Python e SQL, offro soluzioni su misura che garantiscono che i dati vengano elaborati, spostati e trasformati in modo efficiente.

Ciò che offro:

Sviluppo PySpark:

• Elaborazione, trasformazione e analisi dei dati
• Ottimizzazione dei job Spark per migliori performance

Azure Data Factory (ADF):

• Costruzione e pianificazione di pipeline di dati
• Connessione di più fonti e destinazioni di dati

Servizi Databricks:

• Gestione e ottimizzazione di cluster Spark
• Notebook interattivi per trasformazione e analisi dei dati

Scripting Python:

• Scrittura di script per automazione e manipolazione dei dati
• Integrazione di Python con workflow ADF o Spark

Esperienza SQL:

• Ottimizzazione delle query e tuning delle performance
• Progettazione di schemi di database e join complessi