Progetterò e implementerò pipeline di data engineering scalabili

Alcune informazioni sono state tradotte automaticamente.

Marocco

Parlo Francese, Arabo, Inglese

Data Scientist, Big Data e AI Engineer, soluzioni end to end

Ciao, sono Anass - Data Scientist e Big Data AI Engineer attualmente impegnato nel mio dottorato in Informatica. Guidato dalla passione per tutto ciò che riguarda i dati. Ho contribuito a progetti im...
Informazioni su questo servizio

Perché lavorare con me?


Hai bisogno di pipeline di dati affidabili e a bassa latenza e di una piattaforma di dati pulita e interrogabile? Aiuto persone e piccoli team a trasformare flussi e file disordinati in dati pronti per la produzione che alimentano dashboard, modelli ML e report aziendali. Ho un MSc in Data Science & Intelligent Systems e un background in ingegneria. Progetto pipeline che riducono il lavoro manuale, risparmiano sui costi cloud e consegnano dati freschi e affidabili. Anche se devi progettare architetture in batch o in tempo reale, sono qui per aiutarti a realizzare le tue idee.


Nota : Se vuoi vedere il mio portfolio dettagliato, scrivimi per inviarti il link.


Servizi che offro ?


  • Pipeline ETL/ELT end-to-end (batch & streaming)
  • Architettura di streaming in tempo reale (Kafka, Spark Structured Streaming)
  • Progettazione di data lake / Lakehouse (livelli bronze/silver/gold medallion)
  • Integrazione dati: API, database, S3/GCS, message broker
  • <li Controlli di qualità dei dati automatizzati, monitoraggio e allarmi
  • Partizionamento dati, compattazione e ottimizzazione di costi/latency


Strumenti & Tecnologie ?


Python, Apache Spark, Kafka, Delta Lake, Databricks, Airflow, AWS (S3), GCP, PostgreSQL, MongoDB, Parquet/Avro, Docker, basi di CI/CD

Expertise:

Integrazione API

Automazioni

Big data

Estrazione dati

Tecnologia:

Apache Cassandra

Apache Hadoop

Apache Kafka

Il mio portfolio