Sarò il tuo data engineer usando python e pyspark su AWS, GCP e Azure

Alcune informazioni sono state tradotte automaticamente.

Kenya

Parlo Inglese, Tedesco, Francese

1 ordine completato

Ingegnere dei dati

Mi specializzo in data engineering end-to-end, includendo architettura dei dati, pipeline ETL/ELT, elaborazione di big data e streaming in tempo reale. Costruisco soluzioni native per il cloud su AWS,...
Informazioni su questo servizio

Sono un Data Engineer con oltre 10 anni di esperienza nella creazione di piattaforme dati di livello produzione su cloud e sistemi distribuiti. Possiedo una laurea magistrale in Cloud Computing e Sistemi Distribuiti e ho lavorato con clienti che vanno da startup a Fortune 500, offrendo architetture ad alte prestazioni che elaborano milioni di eventi con bassa latenza e alta affidabilità.

Aiuto le organizzazioni a trasformare i dati grezzi in sistemi scalabili e pronti per l'analisi progettando e implementando soluzioni di data engineering end-to-end.

Competenze principali

  • Architettura e strategia dei dati Architetture scalabili e sicure in linea con le esigenze di business e conformità
  • Pipeline batch e streaming ETL/ELT usando Spark, PySpark, Flink, Kafka
  • Data engineering su cloud AWS, GCP, Azure, inclusi Databricks, Data Factory, Dataflow, S3, BigQuery
  • Integrazione dati e API Ingestione API in data lake, data warehouse e database
  • Abilitazione all'analisi Pipeline per Power BI, Tableau, Qlik e dashboard
  • Databricks e PySpark Sviluppo di workflow e pipeline
  • Database SQL ottimizzazione e warehousing; NoSQL (MongoDB, Cassandra)
  • Automazione e orchestrazione Airflow, NiFi
  • Abilitazione ML Piattaforme dati ottimizzate per il machine learning

Lingua:

Inglese

Francese

Tedesco

Esperienza tecnica:

Apache Airflow

Databricks

Snowflake

Expertise:

Pipeline dati

Sviluppo ETL

Data warehousing

Settore:

Crypto e blockchain

Sicurezza informatica