Costruirò pipeline di dati python, etl e automatizzerò i flussi di lavoro dei dati

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Inglese, Hindi

Ingegnere dei dati

Ciao, sono Aman, un Data Engineer specializzato in Python, SQL e pipeline di dati. Aiuto le aziende ad automatizzare i workflow, integrare API con database, pulire e trasformare i dati, e costruire so...
Informazioni su questo servizio

Stai cercando pipeline di dati ETL/ELT robuste, scalabili e automatizzate? Aiuto le aziende ad estrarre, pulire, trasformare e caricare i loro dati senza problemi in database moderni e data warehouse cloud.


Con oltre 2 anni di esperienza pratica in Data Engineering, mi specializzo nella creazione di flussi di lavoro di dati affidabili e fault-tolerant usando Python, SQL e AWS.


Cosa posso fare per te:

Pipeline ETL/ELT personalizzate: ingestione automatica da REST API, webhook, database o file flat (CSV/JSON/Parquet).

Data warehouse cloud: progettazione schema, modellazione e caricamento in Snowflake, AWS

Ottimizzazione e tuning delle query: velocizzare query SQL lente e risolvere colli di bottiglia delle prestazioni.

Orchestrazione dei workflow: pianificazione, mappatura delle dipendenze e alert automatici usando Apache Airflow.

Streaming di dati in tempo reale: pipeline quasi in tempo reale usando Apache Kafka.

Qualità dei dati e test automatizzati: implementazione di controlli di validazione e test unitari pytest per prevenire corruzioni dei dati.


Stack tecnologico e strumenti:

Lingue: Python, SQL

Database e data warehouse: Snowflake, MySQL

Cloud e Big Data: AWS (S3), Kafka, Airflow


Contattami con il formato dei tuoi dati e i requisiti del progetto prima di effettuare un ordine!


Destination Platform:

Snowflake

Amazon S3

Strumenti e piattaforme:

Altro