Costruirò pipeline di dati scalabili e ETL con Python, SQL, Airflow e Databricks

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Inglese, Tedesco

Data e AI Engineer

Sono un Data & AI Engineer con un M.Sc. in Data Science e oltre 2 anni di esperienza in Amazon e Tata Consultancy Services. In Amazon, ho creato pipeline che processano più di 1TB di dati per oltre 10...
Informazioni su questo servizio

Hai bisogno di pipeline di dati affidabili che funzionino davvero? Sono un Data Engineer con un M.Sc. in Data Science ed esperienza nel settore presso Amazon e Tata Consultancy Services, dove ho costruito pipeline che elaborano oltre 1TB di dati per più di 100 analisti.


Ciò che posso creare per te:

  • Pipeline ETL/ELT in Python e SQL
  • Integrazione dei dati da API, database, CSV/Excel e storage cloud
  • Workflow programmati con Apache Airflow
  • Data warehouse e modelli dbt
  • Elaborazione con Databricks e PySpark per grandi dataset
  • Pulizia, convalida e controlli di qualità dei dati
  • Pipeline su AWS, GCP o Databricks


Perché lavorare con me:

  • In Amazon, ho ridotto del 30% i tempi di elaborazione delle pipeline e eliminato il 95% del lavoro manuale sui dati grazie all'automazione
  • Certificato come Data Engineer da Databricks
  • Codice pulito, documentato e testato che è completamente tuo
  • Comunicazione chiara e consegna puntuale


Come funziona:

  1. Scrivimi con le tue fonti di dati e obiettivo
  2. Confermerò l'ambito e il pacchetto giusto
  3. Riceverai codice funzionante, documentazione e una spiegazione passo passo


Non sei sicuro di quale pacchetto sia adatto? Mandami un messaggio prima di ordinare e ti risponderò rapidamente.

Expertise:

Automazioni

•

Estrazione dati

•

Flusso di dati

Tecnologia:

Amazon Redshift

•

Apache Kafka

•

Python

•

SAS

•

SQL