Costruirò pipeline di dati apache beam usando google cloud dataflow
Ingegnere dati senior
Informazioni su questo servizio
Hai bisogno di una pipeline Apache Beam o Google Cloud Dataflow affidabile?
Costruirò una pipeline di dati basata su Python usando Apache Beam e Google Cloud Dataflow secondo le tue esigenze.
In cosa posso aiutarti:
Sviluppo di pipeline Apache Beam
Pipeline Google Cloud Dataflow
Elaborazione batch dei dati
Elaborazione dati in tempo reale/streaming
Integrazione con Google Cloud Storage
Integrazione con BigQuery
Trasformazione e convalida dei dati
Sviluppo ETL in Python
Debug e troubleshooting delle pipeline
Test unitari e documentazione
Ho esperienza professionale nello sviluppo di pipeline ETL scalabili usando Python e Apache Beam su Google Cloud Platform, lavorando con servizi come Dataflow, BigQuery, Pub/Sub e Cloud Storage. Ho anche lavorato su elaborazione batch e in tempo reale, testing e deployment in produzione.
Prima capirò le tue esigenze di sorgente, destinazione e trasformazione, poi implementerò una soluzione pulita e manutenibile.
Contattami prima di effettuare un ordine così posso rivedere le tue esigenze e confermare il scope.
Destination Platform:
Google BigQuery
•
Google Cloud Storage
Strumenti e piattaforme:
Google Cloud Dataflow
•
Altro

