Costruirò pipeline ETL in Python usando Airflow e dbt

Alcune informazioni sono state tradotte automaticamente.

Armenia

Parlo Persiano, Inglese, Tedesco, Russo

Sviluppatore di AI, dati e software, app, agenti e automazione

Creo applicazioni personalizzate, agenti AI e sistemi di dati che funzionano nel mondo reale — non solo demo. Più di 7 anni di esperienza in software e data engineering. Co-fondatore di DataLayer, un...
Informazioni su questo servizio

Hai bisogno di automatizzare la raccolta, la trasformazione e il caricamento dei dati?

Costruirò pipeline ETL basate su Python per spostare i dati dalle tue API, dai database, dai fogli di calcolo e da altre fonti verso la destinazione che preferisci.

Cosa posso costruire:

  • estrazione dati API
  • in ingestione CSV ed Excel
  • integrazioni PostgreSQL e MySQL
  • trasformazione dati usando Python e SQL
  • dag Apache Airflow e pianificazione
  • modelli dbt e test dei dati
  • caricamento dati in BigQuery e PostgreSQL
  • gestione degli errori, logging e documentazione
  • ambienti di sviluppo basati su Docker

Sono un data e software engineer con oltre 7 anni di esperienza nella costruzione di sistemi backend, applicazioni analitiche e flussi di dati automatizzati.

Il mio focus è su pipeline affidabili, manutenibili, testabili e facili da gestire.

Per favore mandami un messaggio prima di ordinare così confermiamo fonti dati, destinazione, volumes e requisiti di scheduling.

Destination Platform:

Google BigQuery

•

Databricks Lakehouse

Strumenti e piattaforme:

AWS Glue DataBrew

Il mio portfolio