Вопросы по теме 'logstash-jdbc'

Вложенный документ в elasticsearch с использованием logstash
Привет всем, я пытаюсь проиндексировать документы с сервера MSSQL на elasticsearch с помощью logstash. Я хотел, чтобы мои документы загружались как вложенные документы, но я получаю общую ошибку исключения Здесь я размещаю весь свой код...
655 просмотров

Удалите старые документы из эластичного поиска с помощью logstash
Я использую logstash для индексации данных из postgres (плагин ввода jdbc) в elasticsearch. У меня нет информации о времени в базе данных. Пользователи таблицы Postgres для импорта имеют 2 столбца - идентификатор пользователя (уникальный), без имени...
1461 просмотров

Плагин Logstash-JDBC: импорт миллионов записей из Oracle в ElasticSearch
Сценарий . – Я пытаюсь импортировать большой набор данных из базы данных Oracle (несколько миллионов записей) в ElasticSearch. - Я могу импортировать данные с помощью плагина ввода logstash jdbc. Проблема : – Выполнение занимает очень много...
5665 просмотров

Плагин ввода Logstash JDBC: перенос данных из mysql в счетчике пакетов
У меня есть таблица данных 20 ГБ с 50 миллионами строк. Необходимо перейти на ElasticSearch с помощью подключаемого модуля ввода logstash jdbc. Я испробовал всю базовую реализацию, но мне нужна помощь в переносе данных в пакетном режиме, т.е. только...
3339 просмотров
schedule 05.08.2022

Logstash / Elasticsearch JDBC document_id vs document_type?
Итак, я пытаюсь обернуть голову вокруг document_type vs document_id при использовании импортера JDBC из logstash и экспорте в elasticsearch. Я наконец обернулся вокруг указателей. Но давайте представим, что я извлекаю из таблицы данные датчика...
548 просмотров
schedule 02.01.2023

как logstash обновляет ту же запись в эластичном поиске с тем же идентификатором
У меня есть сомнения относительно того, как logstash обновляет существующую запись в индексе эластичного поиска с тем же document_id и выполняется как запланированное задание с базой данных (ES-LS-DB). Logstash удаляет все записи в индексе и повторно...
264 просмотров
schedule 02.07.2023

Импортировать данные из MySQL в elasticsearch с помощью logstash после предварительной обработки
Я пытаюсь импортировать данные из MySQL в elasticsearch с помощью logstash, все работает нормально, и у меня все данные хорошо импортированы. Однако одно из полей в MySQL, называемое «метаданные», следует определенному шаблону, например...
161 просмотров

Преобразование многомерного массива в Logstash
Как я могу преобразовать многомерную строку SQL json в действительный объект JSON, чтобы его можно было сопоставить с типами полей шаблона индекса Elasticsearch. Пример случая: Предположим, что это мой шаблон индекса Elasticsearch. {...
193 просмотров

Как отключить предварительную проверку количества строк в наборе результатов в выводе logstash
Я пытаюсь отключить предварительный выбор logstash для определения количества строк, но ExaSol DB не поддерживает никаких ограничений ни в какой агрегации, есть ли способ отключить его в logstash? input { jdbc { jdbc_driver_library =>...
39 просмотров
schedule 02.12.2022

Формат даты Logstash Sql_Last_value кажется неуместным
Привет всем, я использую logstash для индексации документа с сервера MSSQL на elasticsearch. Я использую приведенную ниже конфигурацию для выполнения добавочной индексации, для которой я использую столбец с именемmodified_date, но у меня проблема с...
900 просмотров