Вопросы по теме 'apache-hive'

какое ведомое устройство мы должны загрузить данные в кластер hadoop
мы настроили кластер hadoop с 2 машинами, мы пытаемся реализовать кластер в наших проектах в реальном времени, нам нужна информация в кластере с несколькими узлами о загрузке данных, предположим, если у меня есть 9 узлов данных, какой подчиненный узел...
85 просмотров
schedule 17.10.2021

Spark SQL в файлах ORC не возвращает правильную схему (имена столбцов)
У меня есть каталог, содержащий файлы ORC. Я создаю DataFrame, используя приведенный ниже код var data = sqlContext.sql("SELECT * FROM orc.`/directory/containing/orc/files`"); Он возвращает фрейм данных с этой схемой [_col0: int, _col1:...
7872 просмотров

простой анализ файла JSON в Hive-0.14 с использованием serde
Я пытаюсь выполнить команды hive в файле json, используя jsonserde, но я всегда получаю нулевые значения, а не фактические данные. Я использовал serde, предоставленный в ссылке "code.google.com/p/hive-json-serde/downloads/list". Я пробовал несколько...
335 просмотров
schedule 01.08.2022

Добавление файла в раздел улья
До версии hive 0.13 я мог добавить файл в определенный раздел таблицы куста, используя следующую команду: alter table table add partition (year=2016,month=07,day=25,file_part=1) location...
1100 просмотров
schedule 03.04.2023

Настройте Apache Hive для LLAP без использования ползунка
В улье появилась новая функция LLAP. В ходе расследования я обнаружил, что настроить LLAP довольно сложно, поэтому есть компонент под названием Apache Slider, который его настроит. Тем не менее я не смог найти никакой документации для ручной...
636 просмотров
schedule 31.10.2022

внешние таблицы в Hive
Я добавил CSV-файл в HDFS, используя R-скрипт. Я обновляю этот CSV новым CSV / добавляю в него данные Создана таблица с использованием оттенка в Hive поверх этого CSV. Изменил его на внешнюю таблицу. Теперь, если при изменении...
612 просмотров