Вопросы по теме 'cloudera-manager'

CDH4 - Смешайте 64-битную и 32-битную машину
У меня есть небольшой кластер с 6 64-битными машинами с установленным cloudera manager (CM), который отлично работает. Я хочу добавить в этот кластер набор 32-битных машин в качестве узла данных. Согласно документу CM невозможно установить 32-битные...
175 просмотров
schedule 18.10.2021

Безопасность CDH с использованием Kerberos и Microsoft Active Directory
Я пытаюсь защитить свой кластер CDH с помощью Kerberos, но хочу использовать информацию о пользователе, которая есть у меня в Microsoft Active Directory. Есть ли способ использовать MS AD в качестве источника поиска пользователей Kerberos?
74 просмотров

Недостатки Посылки в cloudera
Я должен различать процесс рассылки Cloudera и написание кулинарной книги или рецепта шеф-повара для установки пакетов в кластере. Итак, я ищу преимущества и недостатки между Parcel над Chef или наоборот.
1395 просмотров
schedule 18.11.2021

Как остановить задание `` куст на искре '' после выполнения запроса hivesql в оттенке
Я использую Cloudera Manager 6.1.1 и HUE. Мой улей искровый двигатель. Когда я выполняю hivesql in hue query, всегда запускается hive on spark job и не останавливается.
388 просмотров
schedule 23.02.2022

Ошибка установки Cloudera
Я пытаюсь установить Cloudera на Centos7, когда я устанавливаю его с помощью команды sudo ./cloudera-manager-installer.bin , появляется сообщение о том, что Cloudera Manager 5 уже установлен. пожалуйста, удалите его (запустив...
380 просмотров
schedule 18.05.2022

Файл журнала dncp_block_verification увеличивает размер в HDFS
Мы используем Cloudera CDH 5.3. Я столкнулся с проблемой, когда размер "/dfs/dn/current/Bp-12345-IpAddress-123456789/dncp-block-verification.log.curr" и "dncp-vlock-verification.log.prev" продолжает увеличиваться до ТБ в течение нескольких часов. Я...
829 просмотров

Не удалось запустить агент менеджера облачной эры
Привет, я устанавливаю кластер из 6 узлов с помощью диспетчера облачной эры 4.6. Я не могу добавить хосты в кластер. Я запускаю сервер диспетчера облачной эры из системы с IP-адресом 192.168.xx. Я хотел бы добавить этот узел в свой кластер. .Но когда...
3139 просмотров
schedule 24.09.2022

SparkException: локальный класс несовместим
Я пытаюсь отправить искровое задание от клиента в кластер cloudera. В кластере мы используем CDH-5.3.2, его искровая версия — 1.2.0 , а версия Hadoop — 2.5.0 . Итак, чтобы протестировать наш кластер, мы отправляем образец подсчета слов, взятый с...
4550 просмотров

Керберос | Клаудера | KrbException: тип шифрования AES256, режим CTS с HMAC SHA1-96.
Я пытался настроить Kerberos для CDH 4.5, который был настроен с помощью установщика Cloudera Manager. Инструкции взяты по следующей ссылке:...
6806 просмотров

Ошибка памяти контейнера: Hadoop
Может кто-нибудь сказать мне, что мне нужно изменить в конфигурации YARN. Я продолжаю получать эту ошибку, когда пытаюсь выполнить задание MR потоковой передачи Hadoop (скрипт python). : Container is running beyond physical memory limits. Current...
1038 просмотров

CDH4 Восстановление Cloudera Manager в существующем кластере
Наш производственный узел Cloudera Manager (4.7) вышел из строя, поэтому мы установили на этот узел новую ОС. Мы пытаемся восстановить Cloudera Manager из имеющихся у нас резервных копий (встроенной) базы данных postgresql. Мы надеемся, что с...
309 просмотров

билайн не может подключиться к hiveserver2
У меня есть экземпляр CDH 5.3. Я запускаю hive-server2, сначала запуская hive-metastore, а затем hive-server из командной строки. После этого я использую билайн для подключения к моему hive-server2, но, видимо, он не может этого сделать. Could...
43006 просмотров
schedule 16.12.2022

Cloudera Manager API для обновления конфигурации роли
Я пытаюсь автоматизировать некоторые работы по развертыванию кластера Hadoop с помощью API менеджера облака (cm_api). Пока я могу добавить новый хост в диспетчер облачных вычислений, добавить в кластер и применить к нему шаблон, используя этот...
942 просмотров
schedule 27.02.2023

Невозможно добавить новую службу с помощью Cloudera Manager в Cloudera Quickstart VM 5.3.0
Я использую Cloudera Quickstart VM 5.3.0 (работает в Virtual Box 4.3 в Windows 7) и хотел изучить Spark (на YARN). Я запустил Cloudera Manager. В сайдбаре вижу все сервисы, есть Spark но в автономном режиме. Поэтому я нажимаю «Добавить новую...
766 просмотров

Проблема с ключом репозитория Cloudera Manager Ubuntu 12.04
Я пытаюсь установить менеджер Cloudera на Ubuntu 12.04. Используя путь B, как описано в введите ссылку описание здесь Я создал файл cloudera-manager.list в /etc/apt/sources.list.d/ . При запуске sudo apt-get update я получаю это в конце:...
531 просмотров

Где проверить, сколько заданий в настоящее время выполняется в кластере YARN с помощью Cloudera Manager?
Я хотел бы проверить количество заданий, которые в настоящее время выполняются в кластере YARN, с помощью Cloudera Manager. Есть ли у Cloudera Manager какая-либо панель управления для количества заданий, запущенных в кластере?
265 просмотров
schedule 26.06.2023

Как получить импала запросы
Мне нужно контролировать и статистические запросы истории impala. Пользовательский интерфейс менеджера Cloudera может получать запросы истории impala. Есть ли у Impala какой-либо спокойный API для получения запросов истории?
3763 просмотров
schedule 03.07.2023

Процессоры Apache NiFi Hive с Hive 1.1 (CDH 5.7.1)
Я работаю с Cloudera Manager CDH 5.7.1, который поддерживает только Hive 1.1.0. NiFi 1.0.0-BETA использует Hive 1.2.1. Когда я пытаюсь использовать процессор SelectHiveQL, я получаю следующую ошибку: Required field 'client_protocol' is unset! ,...
1435 просмотров

Менеджер Cloudera не показывает завершенные запросы impala
Мы используем предварительно созданную облачную среду, работающую на Azure, и, хотя кажется, что она работает достаточно хорошо, есть одна странность, которую мы еще не выяснили. Если вы войдете в менеджер cloudera и нажмете на службу Impala, а...
245 просмотров
schedule 11.06.2023

Конфигурация Oozie HA с балансировщиком нагрузки HAProxy
Я пытаюсь включить Oozie HA с помощью Cloudera Manager 5. Процесс довольно прост. Все, что мне нужно сделать, это указать имя хоста: порт для настроенного балансировщика нагрузки, и Cloudera Manager создаст дополнительный сервер Oozie. У меня уже...
532 просмотров