Costruirò una pipeline di produzione GCP dati con BigQuery e Dataflow

Alcune informazioni sono state tradotte automaticamente.

Pakistan

Parlo Urdu, Hindi, Inglese

63 ordini completati

ingegnere dataops

Ciao! Sono Muhammad Touseef, un professionista esperto in sicurezza cloud, Linux, AWS, DevOps, SEO, sviluppo web e digital marketing. Con oltre 5 anni di esperienza, mi specializzo nel creare strategi...
Informazioni su questo servizio
Il tuo pipeline dei dati è lento, costoso o si interrompe silenziosamente e sei stanco di debuggare a mezzanotte.\n\nCostruisco pipeline GCP di livello produzione che elaborano oltre 10TB al giorno senza sudare.\n\nQUELLO CHE HO COSTRUITO:\ncluster ClickHouse da 26TB (136 miliardi di righe, query da 14ms)\nIngestione real-time Kafka Go ClickHouse\npipeline GCP: Cloud Function Pub/Sub Dataflow BigQuery\nOttimizzazione partizioni e cluster BigQuery (riduzione costi dell'80%)\n\nQUELLO CHE OTTieni:\nPipeline GCP end-to-end (Cloud Storage Dataflow BigQuery)\nCompute serverless (Cloud Run / Cloud Functions)\nCodice di produzione Python + SQL\nMonitoraggio, gestione errori, DLQ\nDocumentazione + chiamata di passaggio di 30 minuti\n\nPERCHÉ IO:\nNon scrivo solo codice, garantisco affidabilità\nEsperienza in produzione, non solo tutorial\nTi dirò anche cosa NON fare (ti farà risparmiare)\n\nCostruiamo una pipeline che funziona davvero. Mandami un messaggio prima di ordinare.

Tecnologia:

Amazon Redshift

•

Apache Cassandra

•

Apache Kafka

Expertise:

Integrazione API

•

clustering

•

Estrazione dati