Sfoglia categorie
Esplora
Fiverr Pro
Italiano
$
USD
Revisionerò il tuo data warehouse BigQuery e risolverò costi, performance e architettura
Ingegnere dati senior
Sono un Senior Data Engineer presso Gelato. Ho progettato pipeline di dati native cloud su GCP e AWS, elaborando oltre 10 milioni di eventi al giorno e terabyte di dati. Ho innovato con monitoraggio a...
Informazioni su questo servizio
Il tuo conto BigQuery aumenta ogni mese? I tuoi dashboard sono lenti e i modelli dbt sono un groviglio di debito tecnico? Farò una revisione approfondita di tutto il tuo data warehouse e ti fornirò un piano d'azione concreto e prioritario per ridurre i costi e velocizzare tutto.
Lavoro con BigQuery ogni giorno progettando pipeline incrementali, ottimizzando strategie di partizionamento e clustering, sbrogliando DAG di Airflow e assicurandomi che Looker e Metabase non effettuino mai full table scan. Puoi usufruire della stessa competenza, applicata direttamente al tuo stack.
Cosa audito?
- Analisi dei costi delle query. Query con spese maggiori, scansioni complete, utilizzo degli slot
- Design dello storage delle tabelle. Partizionamento, clustering, politiche di scadenza
- Revisione dei modelli dbt. Strategia incrementale, ridondanza, test
- Audit di orchestrazione/DAG DBT. Scheduling, retry, problemi di backfill
- Performance del layer BI. Query lente e caching di Looker / Metabase
- Roadmap dell'architettura. Correzioni prioritarie con risparmi stimati
Warehouse Platform:
BigQuery
Tipo di progetto:
Ottimizzazione
FAQ
Traduzione automatica.
Di quale accesso hai bisogno?
Accesso in sola lettura a BigQuery (INFORMATION_SCHEMA + storico delle query), il tuo repo dbt su GitHub/GitLab e accesso in visualizzazione ai tuoi file DBT o DAG. Non è richiesto accesso in scrittura per l'audit.
Quanto posso risparmiare realisticamente?
Dipende dalla configurazione, ma la maggior parte dei team vede riduzioni dei costi dal 30 al 60% dopo aver risolto i problemi di scansione delle tabelle, passando a modelli incrementali e aggiungendo un partizionamento adeguato. Ti darò una stima prima di iniziare.
Usiamo già dbt — puoi comunque aiutare?
Assolutamente. La maggior parte del mio lavoro riguarda progetti dbt esistenti — revisionando strategie di materializzazione dei modelli, logica incrementale, copertura dei test e come i modelli interagiscono con lo storage di BigQuery.
Firmi un NDA?
Sì, sono felice di firmare un accordo prima di condividere qualsiasi accesso. La riservatezza dei dati è una priorità in ogni incarico.
