Costruirò una pipeline ETL scalabile usando apache airflow, bigquery o snowflake

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Urdu, Inglese, Tedesco

AI e MLOps, compiti di NLP con deployment cloud end-to-end

Ciao, sono Hamza — uno specialista di MLOps e Data Engineering che crea sistemi di intelligenza artificiale che funzionano davvero in produzione. Dalle pipeline ML containerizzate con Docker ai chatbo...
Informazioni su questo servizio

Hai bisogno di dati puliti e automatizzati che fluiscono nel tuo data warehouse? Progetterò e costruirò una pipeline ETL robusta, su misura per le tue fonti di dati e piattaforma cloud.


Ciò che consegno:

Progettazione e orchestrazione DAG di Apache Airflow

Schema a stella / Architettura Medallion (Bronzo / Argento / Oro)

Ingestione da API, database, S3 o file flat

BigQuery o Snowflake come data warehouse

Partizionamento e clustering per query più economiche

Documentazione completa e consegna


Ho costruito una pipeline che gestisce oltre 2.400 transazioni al giorno con BigQuery, riducendo i costi delle query del 40% grazie a strategie di partizionamento intelligenti. Vincitore di Hackfest 2025 per una pipeline end-to-end su AWS S3, Airflow, Snowflake e Power BI.

Destination Platform:

Snowflake

Amazon Redshift

Strumenti e piattaforme:

AWS Glue DataBrew

Il mio portfolio