Вопросы по теме 'hcatalog'
Pig не загружает данные в таблицу HCatalog - песочница HortonWorks
Я запускаю сценарий Pig на виртуальной машине HortonWorks с целью извлечения определенных частей моего набора данных XML и загрузки этих частей в столбцы таблицы HCatalog. На моем локальном компьютере я запускаю свой сценарий Pig для XML-файла и...
904 просмотров
schedule
24.09.2021
Пользовательский шаблон динамического разбиения внешней таблицы Hive 0.13
Согласно документации, вы должны иметь возможность указать собственный шаблон для раздела Создавайте разделы для внешних таблиц . Однако я не могу заставить его работать: select * from rawlog_test7 limit 10; не возвращает записей.
Это то, что я...
1918 просмотров
schedule
10.10.2021
читать параметры метаданных улья
Я новичок в улье. Я хочу получить список таблиц и связанных метаданных (например, столбцов, количества строк и т. Д.) Во всех базах данных. Я ищу какой-то сценарий, который я могу передать, и любой может запустить его и предоставить мне результат,...
908 просмотров
schedule
24.11.2021
Уведомления HCatalog в HDInsight
Я пытаюсь включить уведомления HCatalog в кластере HDInsight, чтобы отслеживать изменения метаданных.
У меня есть брокер ActiveMQ, работающий на обоих моих головных узлах. Он работает, так как я могу подписаться на него и получать уведомления,...
98 просмотров
schedule
29.09.2021
Pig Hcatalog не удалось прочитать данные из таблицы улья
grunt> table_load = load ‘test_table_one’ USING org.apache.hive.hcatalog.pig.HCatLoader();
grunt> dump table_load;
2016-10-05 17:25:43,798 [основная] ИНФОРМАЦИЯ org.apache.hadoop.conf.Configuration.deprecation — fs.default.name...
460 просмотров
schedule
20.03.2022
Проблемы с сохранением в таблицу Hive из Pig
Я использую HCatalog для чтения и записи данных в Hive из Pig Script следующим образом:
A = LOAD 'customer' USING org.apache.hcatalog.pig.HCatLoader();
B = LOAD 'address' USING org.apache.hcatalog.pig.HCatLoader();
C = JOIN A by cmr_id,B by...
1354 просмотров
schedule
26.05.2022
Hadoop + Hive — hcatalog не запускается
Я только что установил кластер Hadoop 2.2.0 с одним узлом, работающий на Ubuntu. Я попробовал пару основных примеров вычислений, и они отлично работают.
Затем я попытался настроить hive 0.12.0, который включает в себя hcatalog.
На самом деле я...
1364 просмотров
schedule
14.07.2022
простой анализ файла JSON в Hive-0.14 с использованием serde
Я пытаюсь выполнить команды hive в файле json, используя jsonserde, но я всегда получаю нулевые значения, а не фактические данные. Я использовал serde, предоставленный в ссылке "code.google.com/p/hive-json-serde/downloads/list". Я пробовал несколько...
335 просмотров
schedule
01.08.2022
Каталог конверсионных свиней типа
Я использую HCatalog версии 0.4. У меня есть таблица в улье «abc», в которой есть столбец с типом данных «отметка времени». Когда я пытаюсь запустить скрипт свиньи, подобный этому, "raw_data = load 'abc' с помощью...
2066 просмотров
schedule
02.09.2022
Где Hadoop Hcatalog хранит базы данных и таблицы?
Я новичок в Hadoop. Я выполнял следующее руководство на основе предварительно созданной виртуальной машины Hadoop, работающей в Linux.
руководство по Hadoop
Я создал таблицу Hcatalog в базе данных по умолчанию на основе файла. Я хотел бы...
1250 просмотров
schedule
07.09.2022
Как использовать Hive Metastore отдельно?
Я установил и запустил сервер Metastore отдельно, без установки Hive. Однако я не могу найти документацию об API-интерфейсе бережливой сети для связи с сервером. Мне нужно иметь возможность подключаться к серверу Metastore напрямую или через...
844 просмотров
schedule
06.10.2022
Невозможно удаленно выполнить запрос к таблице Hive в контейнере, отличном от контейнера по умолчанию в HDInsight
Я пытаюсь запустить запрос Hive из .NET, используя Linq to Hive .
Проблема в том, что запрос должен выполняться во внешней таблице, которой нет в контейнере HDInsight по умолчанию, поэтому я добавил учетные данные контейнера в core-site.xml и...
577 просмотров
schedule
21.05.2023
Есть ли способ получить доступ к таблицам хранилища метаданных куста из HCATALOG?
В моем приложении я использую хранилище метаданных hive (mysql) от JDBC. Теперь требование изменилось, и я не смогу получить учетные данные хранилища метаданных. Следовательно, я не могу использовать JDBC для доступа к метахранилищу.
Я хотел...
5792 просмотров
schedule
06.02.2023
hcatUtil не найден при настройке HP Vertica для HCatalog
Я пытаюсь настроить HP Vertica для HCatalog: Настройка HP Vertica для HCatalog
Но я не могу найти hcatUtil в своем кластере Vertica. Где взять эту утилиту?
159 просмотров
schedule
19.11.2022
HCatalog: Исключение в потоке main java.lang.IncompiledClassChangeError
Я пытаюсь читать и записывать данные с помощью HCatalog, я прочитал, что следующая ошибка, которую я получаю, связана с несоответствием версий, попытался изменить версии hive и hadoop, но пока безуспешно. Любая помощь высоко ценится.
Информация:...
168 просмотров
schedule
05.05.2023
Возникли проблемы при попытке сохранить данные в базе данных Hive с помощью HCatStorer()
Я использую PIG для хранения данных таблицы в базе данных куста с помощью HCatalog. Мне удалось загрузить и сбросить данные в оболочке PIG grunt, но когда я пытаюсь сохранить загруженные данные в таблицу HIVE, которую я создал как...
1369 просмотров
schedule
21.10.2022
Действительно ли Hive использует HCatalog?
Я видел несколько противоречивых сообщений в Интернете о том, использует ли Hive HCatalog для доступа к хранилищу метаданных, и я надеялся, что кто-нибудь сможет мне помочь?
Использует ли Hive реальный API-интерфейс HCatalog для доступа к хранилищу...
402 просмотров
schedule
06.06.2023
Использование стола-улья над паркетом в программе "Свинья"
Я пытаюсь создать таблицу Hive со схемой string, string, double в папке, содержащей два файла Parquet. Схема первого паркетного файла - это строка, строка, двойная , а схема второго файла - это строка, двойная, строка .
CREATE EXTERNAL TABLE...
854 просмотров
schedule
21.06.2023
Как вставить вывод сценария свиньи во внешние таблицы улья, используя динамически сгенерированное значение раздела?
Я написал сценарий свиньи, который будет генерировать кортежи таблицы улья. Я пытаюсь сбросить результаты в определенный раздел в HDFS, где куст хранит дату таблицы. На данный момент значение раздела, которое я использую, представляет собой...
661 просмотров
schedule
03.11.2022
Не удается загрузить таблицу Hive в Pig через HCatalog
В настоящее время я настраиваю образ разработчика Cloudera HDP, используя это руководство по CentOS 6.5, установка базы и добавление различных компонентов по мере необходимости. В настоящее время я устанавливаю/тестирую HCatalog, используя этот...
3765 просмотров
schedule
21.01.2024
