Costruirò pipeline di dati in tempo reale con kafka, airflow e spark

Alcune informazioni sono state tradotte automaticamente.

Turchia

Parlo Turco, Inglese

Python, Data Engineering, API e automazione AI

🚀 Problema complesso? Facciamolo semplice. Sono un Software Engineer & Technical Lead con oltre 10 anni di esperienza in Backend, Data, Cloud e DevOps. Costruisco API scalabili, pipeline di dati, s...
Informazioni su questo servizio

Hai bisogno di una pipeline di dati affidabile che possa gestire carichi di lavoro di produzione?


Costruirò pipeline di dati scalabili e facili da mantenere per elaborazioni batch o in tempo reale usando tecnologie come Python, Airflow, Kafka, Spark, SQL, PostgreSQL, AWS e GCP


Posso aiutarti con:

  • pipeline ETL / ELT
  • flussi di lavoro Apache Airflow
  • pipeline di streaming Kafka
  • elaborazione Spark / PySpark
  • integrazioni API e database
  • pulizia e trasformazione dei dati
  • validazione dei dati e gestione degli errori
  • integrazione di data warehouse / data lake
  • deployment con Docker
  • monitoraggio e miglioramenti in produzione


Ho oltre 10 anni di esperienza nello sviluppo software in Backend, Data Engineering, Cloud e DevOps, inclusi sistemi ad alto volume che elaborano grandi dataset e centinaia di migliaia di eventi al giorno.


Riceverai codice pulito, facile da mantenere, documentazione chiara e una soluzione pensata sui tuoi reali bisogni.


Hai una pipeline complessa o un problema in produzione?

Contattami prima di ordinare e ti aiuterò a scegliere l'architettura e il pacchetto giusto.

Destination Platform:

Amazon Redshift

•

ClickHouse

•

PostgreSQL

Strumenti e piattaforme:

Airbyte

•

Google Cloud Dataflow