Realizzerò una pipeline ETL di dati in postgresql dai tuoi dati
Consulente di sistemi di AI, automazione e dati
Informazioni su questo servizio
Trasporto i tuoi dati da fogli di calcolo sparsi, app ed esportazioni in un database pulito che puoi effettivamente interrogare.
IL PROBLEMA CHE RISOLVO I tuoi numeri sono sparsi in sei posti. Qualcuno ricostruisce lo stesso report a mano ogni mese. Nessuno si fida dei totali perché due sistemi non concordano. Ogni progetto di dashboard si blocca perché i dati di base sono un disastro.
COSA COSTRUISCO Estrazione da API, database, fogli di calcolo, esportazioni CSV, moduli Pulizia e trasformazione, con le regole scritte e non nascoste nella testa di qualcuno Caricamento in PostgreSQL di uno schema di magazzino reale, non un deposito temporaneo Aggiornamenti programmati per mantenerlo aggiornato da solo Controlli sulla qualità dei dati che segnalano problemi invece di passarli silenziosamente
COSA OTTIENI Una pipeline funzionante, uno schema documentato e istruzioni chiare. Stack open-source senza licenze da rinnovare e niente legato a me.
PERCHÉ ME Gestisco magazzini di produzione Postgres e PostGIS che alimentano dashboard live. Ho costruito pipeline per dati raccolti in condizioni di campo davvero difficili, il che è un ottimo allenamento per input disordinati.
Dimmi le tue fonti e ti dirò cosa è realistico.
Tecnologia:
Excel
•
Python
•
R
•
SQL
Il mio portfolio
FAQ
Traduzione automatica.
Perché PostgreSQL e non Snowflake o BigQuery?
Perché per la maggior parte delle aziende è più che sufficiente, costa una frazione e non ti addebita per query. Se i tuoi volumi necessitano davvero di un magazzino cloud, te lo dirò — ma è più raro di quanto i venditori suggeriscano.
I miei dati sono un disastro. È un problema?
No, è il punto di partenza normale. I dati disordinati sono la maggior parte del lavoro e sono già inclusi nel prezzo. Invia un esempio e ti dirò onestamente quanto è brutto prima di ordinare.
Dove si trova il database?
Sul tuo server, sul tuo account cloud, oppure posso ospitarlo io — vedi gli extra. Preferirei che fosse in un'infrastruttura che controlli tu, così non sei mai legato a me.
