Estirò qualsiasi sito web e consegnerò dati puliti in un foglio o un database
Sviluppatore software, automazioni e integrazioni AI
Informazioni su questo servizio
Hai bisogno dei dati che si trovano su una pagina, in un formato che puoi effettivamente usare.
Scrivo lo scraper. Naviga le pagine che indichi, estrae i campi che elenchi, pulisce i dati ottenuti e li scrive in un foglio di calcolo, un database o un endpoint di tua proprietà. Prezzi, annunci, profili, recensioni, cataloghi, qualsiasi cosa mostri la pagina.
Se un sito rifiuta le richieste ordinarie, utilizzo una sessione di browser reale. Questo metodo è più lento ed è onesto su cosa fa, e funziona su pagine che bloccano tutto il resto. Se è necessario il login, puoi mantenere le credenziali e inserirle tu stesso.
Recentemente ho lavorato su un monitor che traccia 177 domini e segnala cosa cambia, e su un raccoglitore che raccoglie account pubblici su decine di siti nazionali.
Inviami la pagina e i campi di cui hai bisogno. Ti dirò se è possibile estrarli e quanto costa prima di ordinare.
Tecnologia:
Python
•
scrapy
•
selenium
•
Beautiful soup
•
Playwright
Tecnica:
Automatizzato
Il mio portfolio
FAQ
Traduzione automatica.
Cosa succede se il sito blocca gli scraper
Allora automatizzo una sessione di browser reale, che carica la pagina nello stesso modo in cui fai tu. Più lento, ma funziona dove le richieste semplici falliscono.
In quale formato ricevo
Di default in CSV. Su richiesta Google Sheets, Excel, JSON, SQLite o una tabella Postgres.
Può essere eseguito ogni giorno
Dalla tier Standard in poi, sì. Si avvia secondo una pianificazione e ti invia un'email quando qualcosa si interrompe.
Lo scraping è legale?
Dipende dal sito e dalla tua giurisdizione. Lavoro su dati pubblici e su account di tua proprietà, e lo dirò se una richiesta sembra oltrepassare un limite.

