Costruirò script di web scraping automatizzati usando Scrapy e Selenium

Alcune informazioni sono state tradotte automaticamente.

Nigeria

Parlo Inglese

19 ordini completati

Sviluppo web full stack, data engineering, automazione Python

Sono uno sviluppatore full-stack e data engineer specializzato in sistemi dati end-to-end e nello sviluppo web moderno. Competenze e servizi: • Data pipelines e database: ETL automatizzato via Altery...

Livello 1

Ha soddisfatto determinati criteri di prestazione e mostra un forte potenziale nel marketplace.

Informazioni su questo servizio
Ti chiede se protezioni anti-bot, pagine dinamiche con JavaScript o scraper rotti rallentano le tue operazioni sui dati? Costruisco soluzioni Python di web scraping resilienti e pronte per la produzione, usando Scrapy e Selenium, per estrarre dati puliti e strutturati su larga scala senza intervento manuale. Cosa costruisco: Automated Web Scrapers: ragni ad alta velocità (Scrapy) e automazione di browser headless (Selenium) su misura per siti dinamici JS/React/Vue. Resilienza anti-bot: throttling intelligente delle richieste, rotazione dell'user-agent e esecuzione headless per evitare blocchi. Navigazione avanzata: paginazione su più livelli, scroll infinito, invio di moduli e gestione dell'autenticazione. Consegna pulita e strutturata: dataset deduplicati e formattati, consegnati in CSV, Excel, JSON o caricati direttamente in database SQL (PostgreSQL, MySQL, SQLite). Standard di codice di produzione: script .py modulari e completamente documentati o notebook Jupyter pronti per eseguire in locale o schedularli in produzione. Tech Stack: Scrapy (web scraping asincrono ad alta velocità) Selenium & Playwright (interazione dinamica del DOM e rendering JavaScript) BeautifulSoup & Requests ( parsing statico leggero) Pandas & NumPy (igiene dei dati, trasformazione dello schema)

Tecnologia:

Python

•

Excel

•

scrapy

•

selenium

•

Beautiful soup

Tipo di informazioni:

Ricerca competitor

Tecnica:

Automatizzato