Sfoglia categorie
Esplora
Fiverr Pro
Italiano
$
USD
Costruirò bot di web scraping in Python e pipeline di estrazione dati AI
Ingegnere LLM e Data Scientist: NLP, GenAI, ML che genera risultati
Senior AI Engineer con 8 anni di esperienza nella creazione di sistemi di AI che funzionano in produzione per clienti nel settore sanitario, conformità, finanza e publishing su quattro continenti. Ho ...
Informazioni su questo servizio
Costruisco scraper e pipeline di dati che continuano a funzionare anche dopo la prima esecuzione.
8 anni in data engineering e AI. Lavori passati:
- Ho creato crawler distribuiti su Facebook, Instagram, TikTok, Twitter, motori di ricerca e siti di e-commerce, alimentando dashboard BI per i dirigenti
- Ho sviluppato una pipeline ETL che ha normalizzato oltre 10 milioni di record di libri da Amazon, Ingram e Goodreads, risolvendo automaticamente il 50% di dati duplicati e in conflitto
- Ho realizzato crawler che alimentavano dati grezzi in un prodotto AI interno
Le cose che posso fare:
- dati di prodotto, prezzo e recensioni da negozi di e-commerce
- elenco di attività e directory per la ricerca di lead
- immobili, offerte di lavoro, notizie e eventi
- siti con molto JavaScript, scroll infinito e pagine di login a cui hai accesso
- estrazione AI: trasformare pagine disordinate e PDF in campi strutturati puliti con LLMs
- esecuzioni programmate che inviano dati freschi a Google Sheets, un database o alla tua API
Strumenti: Python, Scrapy, Playwright, Selenium, BeautifulSoup, Pandas, PostgreSQL, MongoDB, AWS
Ogni consegna è pulita, deduplicata e verificata prima di arrivare a te.
Scrape solo dati pubblicamente disponibili. Inviami il link del sito prima di ordinare così posso confermare che sia possibile.
Tecnologia:
Python
•
scrapy
•
selenium
•
Apollo
•
Estrattore di email
Tecnica:
Automatizzato
FAQ
Traduzione automatica.
Puoi raschiare qualsiasi sito web?
La maggior parte dei siti pubblici, sì. Alcuni siti bloccano pesantemente lo scraping o lo vietano nei loro termini. Inviami il link prima di ordinare e ti confermerò cosa è possibile e quanto tempo ci vorrà.
Consegni il codice o solo i dati?
Data Pull consegna solo i dati. Scraper + Codice e Pipeline automatizzata includono il codice sorgente Python completo che puoi eseguire di nuovo da solo.
Puoi programmare lo scraping in modo ricorrente?
Sì. La Pipeline automatizzata funziona quotidianamente, settimanalmente o a qualsiasi intervallo, con avvisi se un sito cambia e lo scraper necessita di aggiornamenti.
In quali formati posso ricevere i dati?
CSV, Excel, JSON, Google Sheets o direttamente nel tuo database PostgreSQL, MySQL o MongoDB. Posso anche esporlo tramite una semplice API.
Come usi l'AI nello scraping?
Per pagine senza struttura chiara, come PDF, elenchi o descrizioni in testo libero, uso LLMs per estrarre campi come nomi, prezzi e specifiche in una tabella coerente.
Scrapi dati personali o dietro login?
Scrapo solo dati pubblici, e pagine dietro login solo se possiedi l'account e hai il permesso di accedere a quei dati. Non raccolgo informazioni personali private.
