Вопросы по теме 'tez'
Запись слишком велика для буфера в памяти. Ошибка при работе с таблицами ORC Hive через TEZ
Мы пытаемся прочитать данные из таблицы ORC в HIVE (1.2.1) и поместить эти данные в таблицу с TextInputFormat. Некоторые записи в исходных данных слишком велики, и во время работы возникает следующая ошибка:...
1286 просмотров
schedule
02.10.2021
Hive + Tez :: Запрос соединения надолго застрял на последних 2 мапперах
У меня есть таблица представлений, объединенная с временной таблицей с намеренно включенными ниже параметрами.
hive.auto.convert.join=true;
hive.execution.engine=tez;
Фрагмент кода,
CREATE TABLE STG_CONVERSION AS
SELECT...
1076 просмотров
schedule
01.10.2022
Настройте Apache Hive для LLAP без использования ползунка
В улье появилась новая функция LLAP. В ходе расследования я обнаружил, что настроить LLAP довольно сложно, поэтому есть компонент под названием Apache Slider, который его настроит. Тем не менее я не смог найти никакой документации для ручной...
636 просмотров
schedule
31.10.2022
Предупреждение о паркете Заполнение журналов в Hive MapReduce на Amazon EMR
Я запускаю пользовательский UDAF на столе, хранящемся как паркет в Hive на Tez. Наши задания Hive выполняются на YARN, и все они настроены в Amazon EMR. Однако из-за того, что данные паркета, которые у нас есть, были сгенерированы с помощью более...
471 просмотров
schedule
29.07.2023
Сбой запроса Hive на Tez DAG не удалось из-за VERTEX_FAILURE
У меня есть базовая настройка Ambari 2.5.3 и HDP 2.6.3, и я попытался выполнить несколько простых запросов ниже. Я не понимаю, почему это не удалось. Вы можете помочь?
[root@demo demo]# beeline
Beeline version 1.2.1000.2.6.3.0-235 by Apache...
10695 просмотров
schedule
24.03.2023
Не удалось создать данные Hive Testbench.
Я клонировал Hive Testbench , чтобы попытаться запустить тест Hive на кластере Hadoop, созданном с бинарными дистрибутивами Apache. Hadoop v2.9.0, Hive 2.3.0 и Tez 0.9.0.
Мне удалось закончить сборку двух генераторов данных: TPC-H и TPC-DS....
732 просмотров
schedule
13.12.2022
ООМ в тез / улей
[После нескольких ответов и комментариев я задал новый вопрос, основанный на полученных здесь знаниях: Недостаточно памяти в Hive / tez с LATERAL VIEW json_tuple ]
Один из моих запросов постоянно выдает ошибку:
ERROR : Status: Failed
ERROR :...
1686 просмотров
schedule
17.03.2023