Progetterò pipeline ETL scalabili, flussi di lavoro dati e automazione in python

Le tue pipeline di dati si rompono, sono lente o sono tenute insieme con nastro adesivo? Costruisco sistemi ETL pronti per la produzione che scalano davvero, da un singolo scraper a più di 2 milioni di pipeline di prodotto.

Sono un Data Engineer specializzato in Python con oltre 6 anni di esperienza nella creazione di pipeline ETL, sistemi di automazione dei dati e infrastrutture di backend per clienti nel settore e-commerce, logistica e finanza. Ho un Master in Business Intelligence e sono un Fiverr Vetted Pro.

Ciò che posso costruire per te:

• Pipeline ETL da qualsiasi fonte (API, database, file, siti web, FTP)
• Workflow di pulizia, trasformazione e arricchimento dei dati
• Automazione programmata con Apache Airflow, cron o scheduler cloud
• Caricamento in data warehouse (BigQuery, Snowflake, PostgreSQL, MySQL)
• Deployment sul tuo server o cloud con monitoraggio e avvisi

Stack tecnologico:

• Lingue: Python
• Elaborazione dati: Pandas, PySpark
• Web scraping: Scrapy, Selenium, Playwright
• API & framework: FastAPI
• Orchestrazione & streaming: Airflow, Kafka
• DevOps & infrastrutture: Docker
• Piattaforme cloud: GCP, AWS, Azure
• Database: BigQuery, Snowflake, PostgreSQL, MySQL, MongoDB

Non sei sicuro di quale pacchetto sia adatto? Scrivimi e ti farò un preventivo gratuito.