Eseguirò lavori sui big data utilizzando i servizi Spark, Hive, Kafka e Cloud
Informazioni su questo servizio
Senior Data Engineer presso Amazon con oltre 6 anni di esperienza in big data e ha lavorato su diverse piattaforme cloud come AWS, GCP, Azure. Ha sviluppato e pianificato pipeline ETL di produzione altamente efficienti in grado di gestire terabyte di dati.
Competenze di programmazione
- Python
- Scala
- SQL
Competenze in Big Data
- Apache Spark (DataFrame e Datasets)
- Apache Hive
- Apache Airflow
- Hadoop
- PySpark
- Apache Kafka
- Delta lake
- Databricks
- HDFS
- Spark streaming
Competenze cloud
- AWS Redshift
- AWS S3
- AWS Lambda
- EMR
- EC2
- Kinesis
- RDS
- GCP Compute cloud
- Big query
Altre competenze
- Pandas (python-Pandas)
- MySql
- Postgres
- RestAPI
Se cerchi qualcuno che costruisca pipeline da zero o migliori le performance di quelle esistenti, sei a un semplice ping di distanza dal realizzarlo.
Expertise:
Big data
•
Flusso di dati
•
etl
•
Trasformazione
•
SQL
•
NoSQL
Altri servizi della categoria Data engineer offerti da me
FAQ
Traduzione automatica.
Puoi fornire una presentazione video?
Sì, posso fornirlo
Puoi fornire documentazione tecnica?
Sì, posso fornire documentazione tecnica
Puoi aiutarmi a completare il lavoro di tesi di laurea o master?
Sì, posso aiutarti. Inviami il documento di valutazione e le tue esigenze
Puoi aiutarmi a installare i software e le librerie necessarie?
Sì, posso offrire supporto anche dopo la consegna del progetto
