Вопросы по теме 'tez'

Запись слишком велика для буфера в памяти. Ошибка при работе с таблицами ORC Hive через TEZ
Мы пытаемся прочитать данные из таблицы ORC в HIVE (1.2.1) и поместить эти данные в таблицу с TextInputFormat. Некоторые записи в исходных данных слишком велики, и во время работы возникает следующая ошибка:...
1286 просмотров
schedule 02.10.2021

Hive + Tez :: Запрос соединения надолго застрял на последних 2 мапперах
У меня есть таблица представлений, объединенная с временной таблицей с намеренно включенными ниже параметрами. hive.auto.convert.join=true; hive.execution.engine=tez; Фрагмент кода, CREATE TABLE STG_CONVERSION AS SELECT...
1076 просмотров
schedule 01.10.2022

Настройте Apache Hive для LLAP без использования ползунка
В улье появилась новая функция LLAP. В ходе расследования я обнаружил, что настроить LLAP довольно сложно, поэтому есть компонент под названием Apache Slider, который его настроит. Тем не менее я не смог найти никакой документации для ручной...
636 просмотров
schedule 31.10.2022

Предупреждение о паркете Заполнение журналов в Hive MapReduce на Amazon EMR
Я запускаю пользовательский UDAF на столе, хранящемся как паркет в Hive на Tez. Наши задания Hive выполняются на YARN, и все они настроены в Amazon EMR. Однако из-за того, что данные паркета, которые у нас есть, были сгенерированы с помощью более...
471 просмотров
schedule 29.07.2023

Сбой запроса Hive на Tez DAG не удалось из-за VERTEX_FAILURE
У меня есть базовая настройка Ambari 2.5.3 и HDP 2.6.3, и я попытался выполнить несколько простых запросов ниже. Я не понимаю, почему это не удалось. Вы можете помочь? [root@demo demo]# beeline Beeline version 1.2.1000.2.6.3.0-235 by Apache...
10695 просмотров

Не удалось создать данные Hive Testbench.
Я клонировал Hive Testbench , чтобы попытаться запустить тест Hive на кластере Hadoop, созданном с бинарными дистрибутивами Apache. Hadoop v2.9.0, Hive 2.3.0 и Tez 0.9.0. Мне удалось закончить сборку двух генераторов данных: TPC-H и TPC-DS....
732 просмотров
schedule 13.12.2022

ООМ в тез / улей
[После нескольких ответов и комментариев я задал новый вопрос, основанный на полученных здесь знаниях: Недостаточно памяти в Hive / tez с LATERAL VIEW json_tuple ] Один из моих запросов постоянно выдает ошибку: ERROR : Status: Failed ERROR :...
1686 просмотров
schedule 17.03.2023