Вопросы по теме 'apache-hive'
какое ведомое устройство мы должны загрузить данные в кластер hadoop
мы настроили кластер hadoop с 2 машинами, мы пытаемся реализовать кластер в наших проектах в реальном времени, нам нужна информация в кластере с несколькими узлами о загрузке данных, предположим, если у меня есть 9 узлов данных, какой подчиненный узел...
85 просмотров
schedule
17.10.2021
Spark SQL в файлах ORC не возвращает правильную схему (имена столбцов)
У меня есть каталог, содержащий файлы ORC. Я создаю DataFrame, используя приведенный ниже код
var data = sqlContext.sql("SELECT * FROM orc.`/directory/containing/orc/files`");
Он возвращает фрейм данных с этой схемой
[_col0: int, _col1:...
7872 просмотров
schedule
10.05.2022
простой анализ файла JSON в Hive-0.14 с использованием serde
Я пытаюсь выполнить команды hive в файле json, используя jsonserde, но я всегда получаю нулевые значения, а не фактические данные. Я использовал serde, предоставленный в ссылке "code.google.com/p/hive-json-serde/downloads/list". Я пробовал несколько...
335 просмотров
schedule
01.08.2022
Добавление файла в раздел улья
До версии hive 0.13 я мог добавить файл в определенный раздел таблицы куста, используя следующую команду:
alter table table add partition (year=2016,month=07,day=25,file_part=1) location...
1100 просмотров
schedule
03.04.2023
Настройте Apache Hive для LLAP без использования ползунка
В улье появилась новая функция LLAP. В ходе расследования я обнаружил, что настроить LLAP довольно сложно, поэтому есть компонент под названием Apache Slider, который его настроит. Тем не менее я не смог найти никакой документации для ручной...
636 просмотров
schedule
31.10.2022
внешние таблицы в Hive
Я добавил CSV-файл в HDFS, используя R-скрипт.
Я обновляю этот CSV новым CSV / добавляю в него данные
Создана таблица с использованием оттенка в Hive поверх этого CSV.
Изменил его на внешнюю таблицу.
Теперь, если при изменении...
612 просмотров
schedule
13.05.2024