Aiuterò nei progetti di data engineering, big data e etl
Data Engineer, Python, AWS, Apache Airflow, web scraping
Informazioni su questo servizio
Trasforma dati grezzi in pipeline affidabili e automatizzate
Hai problemi con script rotti, query lente o dati non strutturati? Costruisco pipeline di dati robuste, pronte per la produzione e architetture di database su misura per le tue esigenze di business.
️ Cosa posso creare per te:
- ETL / ELT Pipelines: Flusso di dati automatizzato da API, fonti web o file verso i magazzini dati.
- Estrazione dati & Automazione web: Web scraping ad alte prestazioni e integrazioni API usando Python (Playwright, Selenium, BeautifulSoup).
- Architettura di database & Ottimizzazione: Progettazione di schema, ottimizzazione di query SQL e indicizzazione (PostgreSQL, MySQL, SQL Server).
- Orchestrazione dei workflow: Esecuzione programmata e monitoraggio automatizzato delle pipeline.
Stack tecnologico & strumenti:
- Lingue: Python, SQL
- Database: PostgreSQL, MySQL, MongoDB
- Pipeline & Automazione: n8n, Apache Airflow, dbt, Pandas, PySpark
- Ambienti cloud: AWS (S3, Lambda, RDS), GCP, Azure
Perché lavorare con me?
- Codice pulito e documentato: Script ben strutturati, facili da mantenere o consegnare al tuo team.
- Focus sulla scalabilità: Progettato per gestire volumi di dati crescenti senza problemi.
- Comunicazione chiara: Aggiornamenti regolari sui progressi durante lo sviluppo.
FAQ
Traduzione automatica.
D: Cosa devo fornire per iniziare?
A: Fornisci dettagli sulle tue fonti di dati target (endpoint API, credenziali o siti web di destinazione), la destinazione preferita (tipo di database o file flat) e eventuali regole di trasformazione specifiche necessarie.
Q: Puoi lavorare con database e ambienti server già esistenti?
A: Sì. Posso connettermi in modo sicuro alla tua infrastruttura cloud esistente (AWS, GCP, Azure o server locali) tramite chiavi SSH, chiavi API o credenziali temporanee.
Q: Fornisci manutenzione a lungo termine o monitoraggio delle pipeline?
A: Sì! Opzioni di manutenzione personalizzate possono essere configurate tramite offerte personalizzate su Fiverr per garantire la salute e il monitoraggio continuo delle pipeline.

