Creerò pipeline di dati sul cloud usando spark sql

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Bengali, Inglese

Trasformare i dati in insight: Guidare l'innovazione

Senior Data Engineer con oltre 5 anni di esperienza nella creazione di soluzioni di dati scalabili. Mi specializzo in pipeline batch e in tempo reale usando Apache Spark, Kafka e tecnologie cloud (AWS...
Informazioni su questo servizio

Crea pipeline di dati affidabili e scalabili che trasformano il tuo business.


Hai problemi con l'ingestione, la trasformazione o l'elaborazione dei dati? Vuoi migrare al Cloud? Creo pipeline end-to-end usando Apache Spark, Python e servizi cloud (AWS/Azure) che automatizzano i flussi di lavoro e forniscono insight di livello produzione.


Ciò che offro:


  • pipeline ETL & ELT (batch e streaming in tempo reale)
  • Deployment su cloud: AWS Glue, Lambda, EMR, Azure Data Factory, Databricks, Snowflake
  • Elaborazione in tempo reale: Kafka, Kinesis, Event Hubs
  • Architettura data lake: Apache Iceberg, Apache Hudi
  • Integrazione API con S3, Aurora PostgreSQL, MySQL, DynamoDB
  • Migrazione di database (senza downtime)
  • <li Controlli e validazioni della qualità dei dati
  • Pannelli di monitoraggio personalizzati
  • Ottimizzazione delle performance (miglioramento del 20% o più)
  • Integrazione con strumenti BI (Power BI, Tableau)


Perché scegliermi:


  • Certificato AWS & Databricks
  • Oltre 5 anni di esperienza in produzione
  • Milioni di record elaborati ogni giorno
  • Esperienza con clienti enterprise
  • Comunicazione rapida & codice pulito
  • Supporto di 30 giorni dopo la consegna


Tecnologie: Python, SQL, Spark, Kafka, AWS, Azure, Databricks, Snowflake, PostgreSQL, MySQL


Scrivimi prima di ordinare per una definizione perfetta del progetto!

Lingua:

Bengali

Inglese

Hindi

Esperienza tecnica:

dbt (Data Build Tool)

Apache Spark

Expertise:

Pipeline dati

Sviluppo ETL

Integrazione dati

Settore:

Analisi dei dati

Il mio portfolio

Altri servizi della categoria Data engineer offerti da me