Поддерживается ли Hive on Spark кластером MapR?

Я хотел бы выполнять запросы улья на Spark. В настоящее время мы используем mapreduce в качестве механизма выполнения. пожалуйста, дайте мне знать, есть ли поддержка Spark для выполнения запросов куста в кластере MapR ?.

ранее я выполнял запросы улья на Spark Engine с Cloudera. Но насчет MapR не уверен.


apache-spark hadoop hive mapr
person Srinivas Thammanaboina    schedule 27.09.2016    source источник

Ответы (1)


arrow_upward
0
arrow_downward

Вы можете использовать акулу, проверьте ссылку ниже. https://www.mapr.com/products/product-overview/shark

Вы можете вызывать запросы кустов из Spark-SQL, что намного быстрее. Пожалуйста, следуйте приведенной ниже документации по Spark 2.0,

http://spark.apache.org/docs/latest/sql-programming-guide.html#hive-tables

person Arunakiran Nulu    schedule 27.09.2016
comment
Я думаю, что саммит Spark объявил о завершении разработки Shark и сосредоточился на Spark SQL. Поэтому я хочу использовать искру SQL, а не акулу. Есть ли у вас какие-либо идеи / опыт работы с Hive on Spark на кластере Mapr? - person Srinivas Thammanaboina; 28.09.2016