Costruirò pipeline ETL affidabili con airflow in python

Alcune informazioni sono state tradotte automaticamente.

Vietnam

Parlo Vietnamita, Inglese

Data Engineer per Airflow, Python e PostgreSQL

Data Engineer che costruisce pipeline di dati affidabili e automatizzate e data warehouse con Apache Airflow, Python e PostgreSQL. Progetto modelli dati puliti, programma i caricamenti giornalieri con...
Informazioni su questo servizio

Stanco di script rotti, importazioni manuali di CSV o codice generato dall’AI che nessuno sa spiegare? Sono un Data Engineer in attività che costruisce daily pipeline di dati per un grande cliente nel retail.


Costruirò pipeline Apache Airflow in Python che estraggono, puliscono e caricano i tuoi dati in PostgreSQL o Microsoft SQL Server, in esecuzione automatica secondo un programma.


COSA OTTIENI

- DAG Airflow con struttura chiara, retry e avvisi di errore

- Codice Python pulito e testato

- Controlli di qualità dei dati per evitare che dati cattivi finiscano nei tuoi report

- Codice consegnato nel tuo repository Git (GitHub o Bitbucket) con README

- Un walkthrough video personale di come funziona tutto

- Correzioni di bug gratuite per 7 giorni dopo la consegna


ABBINEZIONE

- Dati di e-commerce e retail (ordini, inventario, vendite)

- Caricamento di CSV, Excel o dati API in un database secondo programma

- Spostare dati tra PostgreSQL e SQL Server

- Riparare DAG Airflow che continuano a fallire


NON INCLUSO

- Streaming in tempo reale (Kafka, ecc.)


Per favore inviami un messaggio PRIMA di ordinare con le tue fonti dati e il database di destinazione, così posso confermare scope e timeline.

Destination Platform:

ClickHouse

•

PostgreSQL

•

MySQL

Strumenti e piattaforme:

Fivetran

•

Airbyte

•

Kafka Connect

•

Debezium

Il mio portfolio