Costruirò una pipeline di dati, uno scraper web, con python, sql, etl, elt, dbt

Sono un Database Engineer con comprovata esperienza nella creazione di strumenti di automazione robusti usando Python e Node.js. Mi specializzo nell'estrazione di dati strutturati e non strutturati da API, endpoint interni e siti web dinamici, trasformandoli in formati utilizzabili come Excel, CSV e JSON. I miei strumenti sfruttano Cheerio, Axios, ExcelJS, Puppeteer, BeautifulSoup e Pandas, progettati per gestire null, throttling delle richieste e recuperare da problemi di rete, mantenendo sempre precisione e coerenza dei dati.

Oltre allo scraping, progetto data pipeline end-to-end che automatizzano la raccolta, la trasformazione e l'archiviazione dei dati per output pronti all'analisi. I miei ambienti Dockerizzati garantiscono portabilità tra sistemi, e il mio lavoro con parsing HTML, interazione con API e flussi ETL strutturati prepara i team a scalare in modo efficiente. Se hai bisogno di automatizzare la raccolta manuale dei dati, analizzare feed API o costruire un sistema di scraping che alimenta il tuo workflow di dati, sono pronto a dare vita ai tuoi dati.