Costruirò una pipeline di ingegneria dei dati
Ingegnere dei dati
Livello 2
Ha soddisfatto criteri di prestazioni elevate e ha una comprovata esperienza nel soddisfare le aspettative dei clienti.
Molto reattivo
È noto per le risposte super rapide
Informazioni su questo servizio
Sono un Senior Data Engineer con oltre 7 anni di esperienza nella progettazione di piattaforme dati su larga scala su AWS, Azure, GCP, Snowflake e Databricks.
Sono specializzato nella creazione di pipeline ETL/ELT affidabili, automatizzate e altamente scalabili che trasformano dati grezzi in intelligenza pronta per l'analisi.
Se hai bisogno di qualcuno che comprenda big data, architettura cloud e ingegneria moderna end-to-end sei nel posto giusto.
Cosa posso fare per te
- Pipeline ETL/ELT (Python, SQL, PySpark, dbt, Airflow, ADF)
- Data warehousing in cloud (Snowflake, Redshift, BigQuery, Synapse)
- Workflow Databricks & Delta Lake (Batch + Streaming)
- Streaming in tempo reale (Kafka, Spark Streaming, AWS Kinesis)
- Lakes & Lakehouse architecture
- Qualità dei dati & governance (Great Expectations, lineage, audits)
- CI/CD per pipeline di dati (GitHub Actions, Jenkins, Terraform)
- Integrazioni API & automazione
- Ottimizzazione dei costi su AWS/Azure/Databricks
- Ottimizzazione delle performance di pipeline, query e job
Perché lavorare con me
- Esperienza comprovata nella costruzione di architetture multi-terabyte
- Progettato pipeline aziendali usando Airflow, Databricks, Glue, ADF
- Esperto in Snowflake, Delta Lake e sistemi distribuiti
Scrivimi prima di effettuare l'ordine.
Tecnologia:
Apache Kafka
•
Python
•
Scala
•
SQL
•
Snowflake
•
Databricks
