Costruirò un web scraper in python per data mining e estrazione
Ingegnere AI e ML, sviluppatore MERN Stack e Python
Informazioni su questo servizio
Tecnologia:
Python
•
scrapy
•
selenium
•
Beautiful soup
•
Pandas
Tecnica:
Automatizzato
Il mio portfolio
FAQ
Traduzione automatica.
Questo è un servizio manuale di "copia-incolla"?
Assolutamente no. Sono un programmatore. Uso librerie Python avanzate come Scrapy e Selenium per creare scraper personalizzati e automatizzati. È più veloce, più preciso e può gestire migliaia di pagine, cosa impossibile da fare manualmente.
Puoi estrarre dati da qualsiasi sito web?
Posso fare scraping della maggior parte dei siti pubblici. Tuttavia, alcuni hanno misure anti-bot molto avanzate. Per questo motivo, devi inviarmi prima l'URL così posso analizzarne la fattibilità. Non faccio scraping di dati personali o privati da social media o siti che richiedono login a pagamento.
In quale formato riceverò i dati?
La tua scelta! I formati più comuni sono Excel, CSV e JSON. Fammi sapere cosa ti serve.
Qual è la differenza tra il tuo servizio di annotazione e scraping?
Lo scraping consiste nella raccolta di dati grezzi (ad esempio, salvare 1.000 immagini di prodotti). L'annotazione è l'etichettatura di quei dati per l'AI (ad esempio, disegnare una scatola intorno alla "scarpa" in ciascuna di quelle 1.000 immagini). Posso fare entrambi o uno solo!
Puoi gestire progetti grandi e continuativi?
Sì. Posso creare scraper che funzionano secondo un programma (ad esempio, monitoraggio quotidiano dei prezzi) e consegnano i dati automaticamente. Contattami per un'offerta personalizzata.
Riesci a pulire o rimuovere voci duplicate dai dati?
Sì. La pulizia dei dati e la de-duplication possono essere incluse quando condividi i campi e l’output atteso. Confermerò l’ambito prima che inizi l’ordine.
Riesci a fornire annotazioni su immagini o testo?
Sì. Posso aiutare con compiti di annotazione concordati per immagini, testo o video. Invia un campione, le istruzioni di etichettatura e il formato di output in modo che possa confermare l’ambito e il prezzo.

