Вопросы по теме 'cloudera-manager'
CDH4 - Смешайте 64-битную и 32-битную машину
У меня есть небольшой кластер с 6 64-битными машинами с установленным cloudera manager (CM), который отлично работает. Я хочу добавить в этот кластер набор 32-битных машин в качестве узла данных. Согласно документу CM невозможно установить 32-битные...
175 просмотров
schedule
18.10.2021
Безопасность CDH с использованием Kerberos и Microsoft Active Directory
Я пытаюсь защитить свой кластер CDH с помощью Kerberos, но хочу использовать информацию о пользователе, которая есть у меня в Microsoft Active Directory. Есть ли способ использовать MS AD в качестве источника поиска пользователей Kerberos?
74 просмотров
schedule
01.12.2021
Недостатки Посылки в cloudera
Я должен различать процесс рассылки Cloudera и написание кулинарной книги или рецепта шеф-повара для установки пакетов в кластере.
Итак, я ищу преимущества и недостатки между Parcel над Chef или наоборот.
1395 просмотров
schedule
18.11.2021
Как остановить задание `` куст на искре '' после выполнения запроса hivesql в оттенке
Я использую Cloudera Manager 6.1.1 и HUE. Мой улей искровый двигатель. Когда я выполняю hivesql in hue query, всегда запускается hive on spark job и не останавливается.
388 просмотров
schedule
23.02.2022
Ошибка установки Cloudera
Я пытаюсь установить Cloudera на Centos7, когда я устанавливаю его с помощью команды sudo ./cloudera-manager-installer.bin , появляется сообщение о том, что
Cloudera Manager 5 уже установлен. пожалуйста, удалите его (запустив...
380 просмотров
schedule
18.05.2022
Файл журнала dncp_block_verification увеличивает размер в HDFS
Мы используем Cloudera CDH 5.3. Я столкнулся с проблемой, когда размер "/dfs/dn/current/Bp-12345-IpAddress-123456789/dncp-block-verification.log.curr" и "dncp-vlock-verification.log.prev" продолжает увеличиваться до ТБ в течение нескольких часов. Я...
829 просмотров
schedule
13.06.2022
Не удалось запустить агент менеджера облачной эры
Привет, я устанавливаю кластер из 6 узлов с помощью диспетчера облачной эры 4.6. Я не могу добавить хосты в кластер. Я запускаю сервер диспетчера облачной эры из системы с IP-адресом 192.168.xx. Я хотел бы добавить этот узел в свой кластер. .Но когда...
3139 просмотров
schedule
24.09.2022
SparkException: локальный класс несовместим
Я пытаюсь отправить искровое задание от клиента в кластер cloudera. В кластере мы используем CDH-5.3.2, его искровая версия — 1.2.0 , а версия Hadoop — 2.5.0 . Итак, чтобы протестировать наш кластер, мы отправляем образец подсчета слов, взятый с...
4550 просмотров
schedule
26.09.2022
Керберос | Клаудера | KrbException: тип шифрования AES256, режим CTS с HMAC SHA1-96.
Я пытался настроить Kerberos для CDH 4.5, который был настроен с помощью установщика Cloudera Manager.
Инструкции взяты по следующей ссылке:...
6806 просмотров
schedule
29.07.2023
Ошибка памяти контейнера: Hadoop
Может кто-нибудь сказать мне, что мне нужно изменить в конфигурации YARN. Я продолжаю получать эту ошибку, когда пытаюсь выполнить задание MR потоковой передачи Hadoop (скрипт python). : Container is running beyond physical memory limits. Current...
1038 просмотров
schedule
02.06.2023
CDH4 Восстановление Cloudera Manager в существующем кластере
Наш производственный узел Cloudera Manager (4.7) вышел из строя, поэтому мы установили на этот узел новую ОС. Мы пытаемся восстановить Cloudera Manager из имеющихся у нас резервных копий (встроенной) базы данных postgresql. Мы надеемся, что с...
309 просмотров
schedule
08.01.2023
билайн не может подключиться к hiveserver2
У меня есть экземпляр CDH 5.3. Я запускаю hive-server2, сначала запуская hive-metastore, а затем hive-server из командной строки. После этого я использую билайн для подключения к моему hive-server2, но, видимо, он не может этого сделать.
Could...
43006 просмотров
schedule
16.12.2022
Cloudera Manager API для обновления конфигурации роли
Я пытаюсь автоматизировать некоторые работы по развертыванию кластера Hadoop с помощью API менеджера облака (cm_api). Пока я могу добавить новый хост в диспетчер облачных вычислений, добавить в кластер и применить к нему шаблон, используя этот...
942 просмотров
schedule
27.02.2023
Невозможно добавить новую службу с помощью Cloudera Manager в Cloudera Quickstart VM 5.3.0
Я использую Cloudera Quickstart VM 5.3.0 (работает в Virtual Box 4.3 в Windows 7) и хотел изучить Spark (на YARN).
Я запустил Cloudera Manager. В сайдбаре вижу все сервисы, есть Spark но в автономном режиме. Поэтому я нажимаю «Добавить новую...
766 просмотров
schedule
06.01.2023
Проблема с ключом репозитория Cloudera Manager Ubuntu 12.04
Я пытаюсь установить менеджер Cloudera на Ubuntu 12.04. Используя путь B, как описано в введите ссылку описание здесь
Я создал файл cloudera-manager.list в /etc/apt/sources.list.d/ . При запуске sudo apt-get update я получаю это в конце:...
531 просмотров
schedule
16.01.2023
Где проверить, сколько заданий в настоящее время выполняется в кластере YARN с помощью Cloudera Manager?
Я хотел бы проверить количество заданий, которые в настоящее время выполняются в кластере YARN, с помощью Cloudera Manager.
Есть ли у Cloudera Manager какая-либо панель управления для количества заданий, запущенных в кластере?
265 просмотров
schedule
26.06.2023
Как получить импала запросы
Мне нужно контролировать и статистические запросы истории impala.
Пользовательский интерфейс менеджера Cloudera может получать запросы истории impala.
Есть ли у Impala какой-либо спокойный API для получения запросов истории?
3763 просмотров
schedule
03.07.2023
Процессоры Apache NiFi Hive с Hive 1.1 (CDH 5.7.1)
Я работаю с Cloudera Manager CDH 5.7.1, который поддерживает только Hive 1.1.0. NiFi 1.0.0-BETA использует Hive 1.2.1.
Когда я пытаюсь использовать процессор SelectHiveQL, я получаю следующую ошибку: Required field 'client_protocol' is unset! ,...
1435 просмотров
schedule
02.06.2023
Менеджер Cloudera не показывает завершенные запросы impala
Мы используем предварительно созданную облачную среду, работающую на Azure, и, хотя кажется, что она работает достаточно хорошо, есть одна странность, которую мы еще не выяснили.
Если вы войдете в менеджер cloudera и нажмете на службу Impala, а...
245 просмотров
schedule
11.06.2023
Конфигурация Oozie HA с балансировщиком нагрузки HAProxy
Я пытаюсь включить Oozie HA с помощью Cloudera Manager 5. Процесс довольно прост. Все, что мне нужно сделать, это указать имя хоста: порт для настроенного балансировщика нагрузки, и Cloudera Manager создаст дополнительный сервер Oozie. У меня уже...
532 просмотров
schedule
01.01.2023