Costruirò pipeline di dati etl elt usando airflow, spark e sql

Alcune informazioni sono state tradotte automaticamente.

Bangladesh

Parlo Inglese, Bengali, Hindi, Urdu

Data Engineer Analyst ETL SQL Python Sviluppo web

Risultati orientato a Data Engineer e Data Analyst specializzato in Data Engineering, Data Analysis, ETL/ELT Pipelines, Data Warehousing, Web Scraping e Data Mining. Esperto in Apache Airflow, Spark, ...
Informazioni su questo servizio

Se cerchi un Data Engineer professionista per costruire pipeline di dati scalabili e automatizzate, sono la persona giusta. Mi specializzo nella progettazione e nello sviluppo di soluzioni di data engineering end-to-end che trasformano dati grezzi in dataset puliti, strutturati e pronti per l'analisi. Aiuto le aziende ad automatizzare l'elaborazione dei dati, migliorare la qualità dei dati e creare flussi di lavoro affidabili.

I miei servizi includono:

  1. Sviluppo di pipeline ETL/ELT
  2. Ingestione e integrazione dei dati
  3. Automazione dei workflow con Apache Airflow
  4. Elaborazione dati con Apache Spark
  5. Sviluppo e ottimizzazione SQL
  6. Progettazione di Data Warehouse
  7. Implementazione di Apache Iceberg
  8. Pulizia e trasformazione dei dati
  9. Pipeline batch e in tempo reale
  10. Validazione della qualità dei dati

Tecnologie:

  1. Apache Airflow
  2. Apache Spark
  3. Python
  4. SQL complesso
  5. Apache Iceberg
  6. Oracle, PostgreSQL, MySQL, MSSQL
  7. Data Warehouse (DWH)

Perché scegliermi?

  • Soluzioni automatizzate e scalabili
  • Pipeline di dati affidabili
  • Performance ottimizzata
  • Comunicazione chiara
  • Consegna puntuale

Se hai bisogno di sviluppo ETL, automazione dei workflow, elaborazione Spark o di una soluzione completa di data warehouse, posso offrirti un'architettura robusta e scalabile su misura per le tue esigenze di business.

Destination Platform:

PostgreSQL

MySQL

Amazon S3

Strumenti e piattaforme:

Google Cloud Dataflow

Kafka Connect

Il mio portfolio