Progetterò e implementerò soluzioni scalabili di piattaforma dati microsoft fabric su misura

Alcune informazioni sono state tradotte automaticamente.

India

Parlo Inglese

Ingegnere dati senior

Sono un Senior Data Engineer presso Arif Pasha Company con diversi anni di esperienza nella progettazione, costruzione e ottimizzazione di piattaforme di dati di grandi dimensioni. Il mio lavoro si co...
Informazioni su questo servizio


  • Configurare l'ingestione dei dati con Apache SQOOP e FLUME nel target HDFS.
  • Avere una buona esposizione alla versione Hadoop-2.0 e Cloudera manager CDH3.
  • Esperienza di implementazione su AWS Cloud su EC2, EMR, S3 e altri servizi Spark SQL con sorgente MySQL (JDBC) PySpark RDD Actions & Transformations e Dataframe API.
  • Architettura e componenti di Spark: Spark Core & PySpark SQL con Data frames Tecnologie Big Data: Hadoop (Distribuzione CDH), framework MapReduce & ecosistema Spark.
  • Linguaggi di alto livello Hadoop: Hive 0.8.0. Analisi dei dati usando Spark Core & Spark SQL & Spark Streaming.
  • Ho conseguito progetti di analisi dei dati utilizzando strumenti basati su Hadoop e lo stack di data science in Python. Interagire con i clienti, gestire le loro richieste e risolvere i problemi.
  • Conoscenza del flusso di lavoro end to end del progetto.

Destination Platform:

Snowflake

Google BigQuery

Amazon Redshift

Strumenti e piattaforme:

Fivetran

Airbyte

Google Cloud Dataflow

Il mio portfolio

Tag correlati