Costruirò pipeline ETL usando python, airflow, spark e sql

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Hindi, Inglese

Data Engineer e sviluppatore backend Python ad alte prestazioni

Ingegnere di sistemi backend specializzato in FastAPI, PostgreSQL, Redis e sviluppo di API scalabili. Costruisco sistemi backend pronti per la produzione, applicazioni distribuite e pipeline di dati a...
Informazioni su questo servizio

Hai bisogno di una pipeline dati affidabile per automatizzare l'elaborazione dei dati e eliminare il lavoro manuale?

Costruisco pipeline ETL scalabili usando Python, Apache Airflow, Apache Spark, SQL e pratiche moderne di data engineering. Che tu stia elaborando file, database, API o storage cloud, posso progettare workflow efficienti, manutenibili e pronti per la produzione.


Servizi che offro

  • Sviluppo ETL con Python
  • Apache Airflow DAGs
  • Pipeline Apache Spark
  • Trasformazione dati con SQL
  • Pulizia e validazione dei dati
  • Integrazione API e database
  • Automazione di workflow programmati
  • Caricamento incrementale dei dati
  • <li Controlli sulla qualità dei dati
  • Logging e gestione degli errori
  • Pipeline Dockerizzate
  • Supporto per documentazione e deployment

Mi concentro sulla creazione di pipeline pulite, scalabili e ben documentate, facili da manutenere e estendere. Ogni soluzione è progettata con affidabilità, performance e migliori pratiche in mente.

Se non sei sicuro di quale package sia più adatto al tuo progetto, scrivimi prima di ordinare. Ti aiuterò a scegliere la soluzione migliore in base alle tue esigenze.

Destination Platform:

Snowflake

Azure Synapse Analytics

Strumenti e piattaforme:

Azure data factory

Il mio portfolio