Вопросы по теме 'cloudera-quickstart-vm'
Сервер Hive в Cloudera: краткое руководство
Я пытаюсь создать форму и использовать сервлеты для подключения к таблицам улья. Но у меня есть некоторые сомнения:
Установлен ли сервер Hive в cloudera quickstart?
Для сервлета нужен другой сервер вроде Tomcat?
Обязательно ли иметь...
284 просмотров
schedule
27.11.2021
Spark-submit создает только 1 исполнителя, когда интерактивная оболочка pyspark создает 4 (оба с использованием yarn-client)
Я использую виртуальную машину Cloudera для быстрого запуска (CDH 5.10.1) с Pyspark (1.6.0) и Yarn (включая MR2) для агрегирования числовых данных в час. У меня есть 1 процессор с 4 ядрами и 32 ГБ оперативной памяти.
У меня есть файл с именем...
868 просмотров
schedule
25.06.2022
Hive не может загрузить данные - cloudera quickstart VM 5.8
Я использую cloudera quickstart VM 5.8 в качестве среды hadoop. Я пытался сделать следующее.
Создана таблица улья с использованием абсолютного uri hdfs
СОЗДАТЬ ВНЕШНЮЮ ТАБЛИЦУ, ЕСЛИ НЕ СУЩЕСТВУЕТ stocks_tb (exch STRING, symbol STRING,...
336 просмотров
schedule
11.07.2022
Cloudera Quick Start VM не имеет Spark 2.0 или более поздней версии
Для тестирования и изучения функций Spark разработчикам требуется последняя версия Spark. Поскольку API и методы, предшествующие версии 2.0, устарели и больше не работают в более новой версии. Это создает более сложную задачу, и разработчики...
402 просмотров
schedule
27.07.2022
Apache Spark GraphX с помощью Cloudera Quickstart 5.7
Я пытаюсь использовать Spark GraphX с помощью Cloudera Quickstart 5.7 с этого веб-сайта: http://kukuruku.co/hub/algorithms/social-network-analysis-spark-graphx
Шаги, которые я сделал: 1) Откройте терминал 2) Запустите spark-shell 3) Запустите...
139 просмотров
schedule
09.09.2022
Невозможно добавить новую службу с помощью Cloudera Manager в Cloudera Quickstart VM 5.3.0
Я использую Cloudera Quickstart VM 5.3.0 (работает в Virtual Box 4.3 в Windows 7) и хотел изучить Spark (на YARN).
Я запустил Cloudera Manager. В сайдбаре вижу все сервисы, есть Spark но в автономном режиме. Поэтому я нажимаю «Добавить новую...
766 просмотров
schedule
06.01.2023
Тестовый запуск HIPI завершился неудачно из-за NoclassdefinitionFound
Я пытался следовать руководству на виртуальной машине cloudera (cdh-5.4.2) но я получаю исключение при попытке запустить встроенную банку для подсчета количества пикселей.
Сама сборка прошла успешно:
[cloudera@quickstart helloWorld]$ gradle...
591 просмотров
schedule
14.10.2022
Сбой программы Hipi Average no of Pixels из-за ошибки контейнеров пряжи в cloudera quickstart vm
Я новичок в HIPI/Hadoop, поэтому я выбрал Cloudera Quickstart vm (5.4.2). Для этого я следую руководству по началу работы . Во время работы я обнаружил, что у меня есть файлы в файле hib, как показано ниже:
[cloudera@quickstart tools]$...
280 просмотров
schedule
18.01.2023
Попытка выполнить обновление или удаление с помощью диспетчера транзакций, который не поддерживает эти операции.
При попытке обновить данные в таблице Hive в Cloudera Quickstart VM я получаю эту ошибку.
Ошибка при компиляции инструкции: FAILED: SemanticException [Ошибка 10294]: попытка обновить или удалить с помощью диспетчера транзакций, который не...
35632 просмотров
schedule
22.05.2023
Сжать данные Json во внешней таблице куста, во время запроса исключения?
Я создал внешние таблицы, выполнив следующие шаги.
Hive > ADD JAR /usr/lib/hive/lib/hive-serdes-1.0-SNAPSHOT.jar;
Hive > set hive.exec.compress.output=true;
Hive > set mapred.output.compress=true;
Hive> set...
781 просмотров
schedule
13.04.2023
Eclipse аварийно завершает работу в виртуальной машине быстрого запуска Cloudera с ошибкой cairographics
Использование Eclipse (Kepler) в Cloudera Quickstart VM v5.8.0. Eclipse аварийно завершает работу в любое время во время кодирования.
Exception in thread "main" org.eclipse.swt.SWTException: Unable to load
graphics library
Выделение...
92 просмотров
schedule
30.06.2023
Использование jdbc для подключения к улью в докере cloudera
У меня в локальной сети установлен док-контейнер cloudera, также настроен порт улья, вот так docker run --hostname=quickstart.cloudera --privileged=true -t -i -p 8888:8888 -p 80:80 -p 10000:10000 --name cloudera2 cloudera/quickstart...
761 просмотров
schedule
12.02.2023
Подключение к Hive из Apache Spark
У меня есть простая программа, которую я запускаю на автономной виртуальной машине Cloudera. Я создал управляемую таблицу в Hive, которую хочу прочитать в Apache spark, но начальное подключение к улью не устанавливается. Пожалуйста, порекомендуйте....
1541 просмотров
schedule
05.07.2023
Что такое архитектура StreamSets?
Я не очень хорошо разбираюсь в архитектуре даже после прохождения руководств. Как масштабировать набор потоков в распределенной среде? Допустим, наша скорость ввода данных увеличивается от источника, тогда как гарантировать, что SDC не вызывает...
1054 просмотров
schedule
09.03.2023
Не удалось установить spark 2.2 в Cloudera Quickstart VM (5.10)
Я следил за блогом (упомянутым ниже) здесь, скачал посылку и поставил в соответствии с требованиями. Пожалуйста, дайте мне знать, если кто-то установил и шаги.
(https://www.cloudera.com/documentation/spark2/latest/topics/spark2_installing.html)...
1623 просмотров
schedule
05.04.2023
Сбой хранилища метаданных Hive на Cloudera QuickStart VM 5.12 с Cloudera Manager
Cloudera утверждает, что использует подход «Быстрый старт». Это не работает для меня, я отмечаю.
Когда я вызываю искровую оболочку, я получаю:
... WARN metastore.ObjectStore: Version information not found in metastore....
211 просмотров
schedule
03.04.2023
Входной путь не существует: hdfs://quickstart/user/hive/warehouse/products
Просматривая учебник по быстрому запуску cloudera, я столкнулся с этой ошибкой:
Входной путь не существует: hdfs://quickstart/user/hive/warehouse/products
Проблема возникла, когда я выполнял этот искровой код:
val orders =...
263 просмотров
schedule
01.02.2023
hdfs dfs -ls Нет отображения
Я установил cloudera quickstart vm на докер. В веб-интерфейсе HDFS перечислены пять папок (benchmarks, hbase, tmp, user и var), но когда я использую
hdfs dfs -ls
or
хадуп фс -ls
команды. Он отображает любой каталог. Любое...
144 просмотров
schedule
24.08.2023
Не удается остановить cloudera/быстрый запуск в Docker
Я попытался остановить запущенный контейнер cloudera/quickstart используя
docker stop [container]
но это не прекращается и продолжается вечно (ничего не происходит). То же самое произойдет, если я попытаюсь удалить его с помощью
docker...
409 просмотров
schedule
19.11.2023
Копирование данных из кластера cloudera в кластер google cloud hdfs с использованием distcp
Я использую Cloudera Quickstart vm. Вчера я начал играть с облачной платформой Google. Я пытаюсь скопировать данные в hdfs cloudera в 1. облачное хранилище google (gs://bucket_name/) 2. кластер облачных hdfs google (используя...
1218 просмотров
schedule
28.12.2023
