Установка Apache Kylin без песочницы

Мне было интересно, есть ли какие-либо ресурсы, касающиеся установки Apache Kylin без поддержки песочницы (например, cloudera, hortonworks). Мне удалось сделать следующее:

  1. Установите Хадуп 2.6
  2. Установить улей
  3. Установить HBase

Затем я использовал двоичный файл с сайта kylin и до сих пор смог его запустить. Проблема начинается, когда я пытаюсь построить куб, задание по уменьшению карты застревает на шаге 2. Я думаю, если оно все еще находится в режиме песочницы и вообще не отправляет задание в хауоп (нет записи в джобтрекере хауп ).

Итак, мне нужно решение относительно двух: 1. Возможная конфигурация kylin в чистой настройке Hadoop (без песочницы) 2. каким-то образом включить настройку kylin для отправки задания в hadoop.


hadoop kylin
person dumb_terminal    schedule 25.08.2015    source источник

Ответы (2)


arrow_upward
3
arrow_downward

В Kylin нет такой конфигурации песочницы или не-песочницы. Просто убедитесь, что машина, на которой работает Kylin, правильно настроена для Hadoop, и все будет в порядке.

Под сценой kylin.sh использует hbase classpath и hive -e set | grep 'env:CLASSPATH' для определения настроек Hadoop. Дважды проверьте, работают ли эти команды должным образом, если вы не уверены, к какому кластеру подключается Kylin.

Если у Kylin возникают проблемы с отправкой заданий MR, проверьте два места. Во-первых, это менеджер ресурсов Hadoop, посмотрите, действительно ли задание было отправлено или нет. Иногда он просто работает медленно. Вторая проверка kylin.log, посмотрите, нет ли каких-либо исключений. Отправьте журнал в список рассылки kylin dev, и кто-то сможет помочь.

person Li Yang    schedule 24.11.2015

arrow_upward
0
arrow_downward

Вы можете установить hadoop-2.6 , hive-0.14 ,hbase-0.98.8-hadoop2 со встроенным Zookeeper или внешним zookeeper-3.5 Теперь вы можете запустить на нем kylin-v1.1-release Если вы все еще сталкиваетесь с проблемами, вставьте журнал сюда

person vipin    schedule 11.11.2015