Progetterò pipeline ETL personalizzate in python e sql
Fondatore
Informazioni su questo servizio
Benvenuto! Sono un Data Engineer specializzato nella creazione di pipeline ETL/ELT robuste e automatizzate usando Python e SQL.
Se hai bisogno di estrarre dati da API complesse o di costruire un'infrastruttura di database pulita, sono qui per aiutarti.
Ciò che posso fare per te:
- Ingestione di API e file: estrai dati da REST API, Webhook, CSV o fonti JSON.
- Architettura Medallion: organizza i tuoi dati in livelli Bronze (Raw), Silver (Puliti) e Gold (Pronti per il business).
- Pipeline ETL personalizzate: trasformazioni avanzate dei dati, validazione dello schema e gestione degli errori in Python.
- Ottimizzazione del database: progettazione e ottimizzazione di PostgreSQL, SQLite o MySQL per alte prestazioni.
- Automazione: configura script automatizzati e cron job per eseguire le pipeline senza intervento manuale.
Il mio stack tecnologico:
- Linguaggio: Python (Pandas, Requests, SQLAlchemy)
- Database: PostgreSQL, SQLite, MySQL
- Architettura: Medallion, Schema Star/Snowflake
Perché lavorare con me?
Progetto workflow di dati puliti, manutenibili e ben documentati. Ogni progetto include documentazione del codice e un diagramma architetturale chiaro.
Contattami prima di effettuare un ordine così possiamo discutere delle tue esigenze specifiche di dati!
Tecnologia:
Excel
•
Python
•
SQL
•
Apache Airflow
•
Altro
Il mio portfolio
FAQ
Traduzione automatica.
Con quali database lavori?
Mi specializzo nella progettazione e ottimizzazione di database relazionali usando PostgreSQL, MySQL e SQLite. Assicuro che il tuo database sia strutturato in modo efficiente per query veloci e archiviazione pulita dei dati.
Puoi costruire una pipeline ETL per qualsiasi API?
Sì! Finché l'API è ben documentata o puoi fornire le chiavi di accesso/endpoints, posso scrivere script Python personalizzati per estrarre, pulire e ingestare i dati in modo sicuro nel tuo file o database di destinazione.
Fornisci documentazione o spiegazioni sul codice?
Assolutamente. Ogni script che consegno è commentato in modo chiaro e fornisco una documentazione di base in markdown insieme a un diagramma dell'architettura, così tu o il tuo team potete mantenere facilmente la pipeline.

