Costruirò pipeline ETL e data warehouse usando python, AWS, airflow

Alcune informazioni sono state tradotte automaticamente.

Bangladesh

Parlo Inglese

85 ordini completati

Ingegnere di prodotto con velocità alimentata dall'AI

Il mio obiettivo è semplice: massimo ROI senza debiti tecnici. 👋 🔹 Gestisci l'intero processo: dalla progettazione iniziale del sistema alla distribuzione. 🔹 Codici facili da mantenere e ben docum...
Informazioni su questo servizio

Non affidarti più a script fragili. Se alimenti dati in dashboard di analisi o modelli AI personalizzati, hai bisogno di un'architettura resiliente e auto-riparante.

Come Senior Engineer, creo pipeline ETL/ELT di livello produzione che garantiscono integrità dei dati e scalabilità senza intervento manuale.


Cosa consegno:

  • Orchestrazione intelligente: Apache Airflow per elaborazioni batch pesanti, o n8n per flussi agili e basati su eventi.
  • Architettura Medallion: livelli Raw, Staging e Production usando AWS S3 e PostgreSQL.
  • Pipeline pronte per AI: chunking e vettorializzazione dei dati (PGVector) per integrazione istantanea con LLM/RAG.
  • Calcolo serverless: AWS Lambda per trasformazioni economiche e scalabili.
  • Osservabilità: avvisi automatici di errore su Slack o Discord.


Stack tecnologico: Python, SQL, AWS (S3/Lambda), Airflow, n8n, PostgreSQL, Supabase.


Contattami prima di ordinare per discutere le tue fonti di dati e le esigenze infrastrutturali specifiche!

Destination Platform:

Snowflake

Google BigQuery

Amazon Redshift

Strumenti e piattaforme:

Fivetran

AWS Glue DataBrew

Il mio portfolio