Costruirò pipeline di ETL automatizzati usando Python, Airflow e SQL
Ingegnere dei dati
Informazioni su questo servizio
Costruisco pipeline ETL automatizzate che raccolgono, elaborano e memorizzano i dati in modo efficiente.
Estrazione dati da API, file o fonti web, trasformazione in formati strutturati e puliti, e caricamento nei database per analisi. Automatizzo i flussi di lavoro così i tuoi dati si aggiornano senza sforzo manuale.
Ciò che posso fare:
- Costruire pipeline ETL end-to-end
- Estrazione dati da API, CSV, Excel o siti web
- Pulizia e trasformazione di dati grezzi usando Python
- Caricare i dati in MySQL, PostgreSQL o MongoDB
- Automatizzare i flussi di lavoro usando cron o Airflow
- Ottimizzare le prestazioni per grandi dataset
Strumenti:
Python, Pandas, FastAPI, Airflow, Apache Kafka, MySQL, PostgreSQL, AWS
Perché scegliere me:
- Codice pulito e affidabile
- Soluzioni scalabili
- Comunicazione chiara
Contattami prima di ordinare.
Strumenti e piattaforme:
Airbyte
•
AWS Glue DataBrew
•
Apache NiFi
Il mio portfolio
FAQ
Traduzione automatica.
Di cosa hai bisogno per iniziare?
Ho bisogno dei dettagli della tua fonte di dati, requisiti e formato di output previsto.
Puoi automatizzare la pipeline?
Sì. Posso programmare lavori ETL usando cron o Airflow.
Quali fonti di dati puoi gestire?
API, CSV, Excel, database e dati web.
Quali database supportate?
MySQL, PostgreSQL, MongoDB e altri se necessario.
Riesci a gestire set di dati di grandi dimensioni?
Sì. Ottimizzo le pipeline per prestazioni e scalabilità.
Fornite revisioni?
Sì. Le revisioni dipendono dal pacchetto che scegli.
