Costruirò una pipeline di dati automatizzata con scraper python, ETL e database

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Pashtu, Urdu, Inglese

74 ordini completati

Web scraping con Python, pipeline di dati e automazione AI

Sviluppatore Python senior (oltre 6 anni) che crea web scraper, pipeline di dati e automazioni AI che funzionano in produzione. • Raccogli dati da qualsiasi sito, anche JavaScript, login e siti prote...

Livello 2

Ha soddisfatto criteri di prestazioni elevate e ha una comprovata esperienza nel soddisfare le aspettative dei clienti.

Informazioni su questo servizio

Script che si rompono ogni settimana costano più di quello che risparmiano. Costruisco pipeline di dati di produzione che raccolgono, puliscono e consegnano i tuoi dati secondo i tempi stabiliti, e continuano a funzionare.

Ciò che costruisco:

  • Scraper programmati e raccoglitori API per qualsiasi numero di fonti
  • ETL: pulizia, deduplicazione, convalida e arricchimento AI
  • Caricamento su PostgreSQL, MySQL, Google Sheets o la tua API
  • Monitoraggio e avvisi, così sai quando qualcosa fallisce
  • Deployment sul tuo server o cloud (AWS, GCP, DigitalOcean) con Docker

Dimostrato su larga scala:

  • Una pipeline che estrae oltre 1 milione di record immobiliari ogni settimana
  • Un sistema che raccoglie permessi di costruzione da oltre 100 giurisdizioni negli Stati Uniti e 13 tipi di portali
  • Un CRM immobiliare con dati live da 5 fonti in più di 30 contee

Ottieni codice sorgente pulito e documentazione. Scrivimi con le tue fonti e destinazione, e ti proporrò un'architettura e un prezzo fisso.

Destination Platform:

PostgreSQL

•

MySQL

•

Amazon S3

Strumenti e piattaforme:

Altro

Il mio portfolio