Вопросы по теме 'avro-tools'

Другие места для хранения схем Apache Avro, кроме пути к классам
Возможно, кто-то уже задавал этот вопрос, но после некоторых поисков я все еще не нашел ответа. У меня есть несколько приложений Spring Boot, которые должны взаимодействовать друг с другом посредством потоковой передачи событий и вызовов REST....
123 просмотров

Схема в сообщении Avro
Я вижу, что в сообщения Avro встроена схема, а затем данные в двоичном формате. Если отправлено несколько сообщений и для каждого сообщения создаются новые файлы avro, разве схема не встраивает накладные расходы? Итак, означает ли это, что для...
1345 просмотров
schedule 03.08.2022

Maven импортирует определение avro из зависимой банки
У меня есть два проекта maven, которые используют плагин avro-maven для генерации кода. Проблема, с которой я столкнулся, заключается в том, что в одном из этих проектов есть объект avro, который использует ссылку на другой объект avro из второго...
1674 просмотров
schedule 02.08.2022

Как извлечь схему из файла avro в Java
Как вы извлекаете сначала схему, а затем данные из файла avro на Java? Идентично this вопросу, за исключением java. Я видел примеры того, как получить схему из файла avsc, но не из файла avro. В каком направлении я должен смотреть? Schema...
19310 просмотров
schedule 09.09.2022

Как использовать тип Avro в другом типе Avro, не определяя его снова?
Я определил тип Avro с именем "some.package.SourceMetadata" в файле json с именем commonSourceMetadata.avsc : { "type": "record", "name": "SourceMetadata", "namespace":...
782 просмотров
schedule 21.09.2022

Как преобразовать схему json в схему avro
Мое приложение использует схему json (org.everit.json.schema.Schema) для проверки сообщений JSON на соответствие определенному формату. Сейчас мы думаем о переходе на схему Avro. Это включает в себя преобразование ранее сохраненных файлов...
5514 просмотров
schedule 17.11.2022

Как установить тип «запись» и «нуль» одновременно в схеме Avro?
Я пытаюсь установить тип для записи и нуля одновременно. Я не знаю, возможно ли это. Вот мой ввод json { "request":{ "reqNo": null }, "dataset":{ "id":"1", "value":"sample" } } И теперь я создаю Авросхему с...
538 просмотров
schedule 15.08.2023

Проверка схемы Avro
Согласно спецификации Avro Schema (для союзов): https://avro.apache.org/docs/current/spec.html Союзы, как упоминалось выше, представляются с помощью массивов JSON. Например, [null, string] объявляет схему, которая может быть нулевой или...
31 просмотров
schedule 14.12.2022

Есть ли способ программно преобразовать JSON в схему AVRO?
Мне нужно создать файл AVRO, но для этого мне нужны 2 вещи: 1) JSON 2) Схема Авро Из этих 2 требований - у меня есть JSON: {"web-app": { "servlet": [ { "servlet-name": "cofaxCDS", "servlet-class":...
19475 просмотров
schedule 13.03.2024