Aiuterò i compiti e i compiti relativi ai big data

Sono un ingegnere dei dati con esperienza. Ho una profonda conoscenza nella creazione di piattaforme di dati e nello sviluppo di servizi per esporre i dati in vari formati.

La mia principale competenza riguarda: Big Data :

Core Hadoop, Hive, Spark, HBase, Elasticsearch, Ranger, Atlas, HDInsight, Ambari, Kafka Soluzione AWS: AWS Lambda, EMR, Kinesis, API Gateway, Cognito, Dynamo DB, RDS Soluzione Azure: Event Hub, CosmosDB, HDInsight, Data Factory API: Flask Deployment: Ansible, Docker

Gli strumenti e le tecnologie con cui sono molto familiare

1. Apache Hadoop
2. Apache Spark
3. Apache Kafka per lo streaming di dati
4. Apache Flink per l'elaborazione in streaming
5. Elasticsearch per l'indicizzazione dei dati
6. MongoDB per l'archiviazione NoSQL
7. Apache Cassandra per database distribuiti
8. Apache Hive per data warehousing
9. Apache Pig per analisi dei dati
10. Apache Beam per l'elaborazione dei dati
11. TensorFlow per machine learning con big data
12. PySpark per l'elaborazione di big data con Python
13. Apache NiFi per la gestione del flusso di dati
14. Presto per query SQL distribuite
15. Apache Sqoop per import/export di dati
16. Apache Airflow per la gestione dei workflow
17. Grafana per la visualizzazione dei dati
18. Tableau per analisi dati interattive
19. Jupyter Notebook per esplorazione dei dati
20. Zeppelin per analisi dati interattive