Вопросы по теме 'snappy'

Мгновенная ошибка: система не может найти указанный путь
Пожалуйста, я впервые пытаюсь использовать snappy, чтобы пользователь мог загружать PDF-файл с моего сайта. Раньше я использовал DomPDF, но обнаружил, что он не подходит для текущей ситуации. Сначала я установил wkhtmltopdf, затем я установил snappy...
700 просмотров
schedule 26.02.2022

Ошибка мгновенной недоступности на EMR
Я использую Spark на EMR с одним главным и одним основным узлом, я столкнулся со следующей проблемой: java.lang.RuntimeException: native snappy library not available: this version of libhadoop was built without snappy support. Я установил...
666 просмотров

Как загрузить json snappy, сжатый в HIVE
У меня есть куча сжатых файлов json snappy в HDFS. Они быстро сжаты HADOOP (не python, см. другие вопросы SO) и имеют вложенные структуры. Не удалось найти способ загрузить их в HIVE (используя json_tuple)? Могу ли я получить некоторые ресурсы /...
570 просмотров
schedule 23.03.2022

Как распаковать файлы .Snappy в Hadoop HDFS?
У меня есть несколько быстро сжатых файлов Snappy в каталоге в HDFS. Мне нужно распаковать каждый файл и загрузить в текстовый файл. Доступны ли какие-либо команды Hadoop DFS? Я новенький здесь. Пожалуйста, помогите. Спасибо, Правин.
1802 просмотров
schedule 25.05.2022

как улей создает таблицу, используя паркет и snappy
Я знаю синтаксис для создания таблицы с использованием паркета, но я хочу знать, что это значит для создания таблиц с использованием формата паркета и сжатия с помощью snappy, и как мы это делаем? пожалуйста, помогите мне с примером синтаксиса. В...
15542 просмотров
schedule 11.07.2022

Сжатие HBase Snappy - не удалось создать таблицу, проверка сжатия выполнена успешно
Я пытался решить проводную проблему HBase, связанную с Snappy Compression. Ниже приводится подробное описание всего, что связано с этой проблемой: Описание проблемы: когда я пытался создать таблицу со сжатием Snappy в оболочке HBase: (подробный...
1628 просмотров
schedule 08.07.2022

ошибка с мгновенным запуском при импорте fastparquet в python
Я установил следующие модули на свой сервер EC2, на котором уже установлены python (3.6) и anaconda: резкий пиарроу s3fs фастпарк кроме fastparquet все остальное работает на импорт. Когда я пытаюсь импортировать fastparquet, возникает...
5491 просмотров
schedule 13.07.2022

pyspark как загрузить сжатый файл snappy
Я сжал файл с помощью python-snappy и поместил его в свой магазин hdfs. Сейчас я пытаюсь прочитать это так, но получаю следующую трассировку. Я не могу найти пример того, как прочитать файл, чтобы я мог его обработать. Я могу нормально читать...
11504 просмотров
schedule 20.07.2022

Является ли Snappy разделяемым или нет?
Согласно этому сообщению Cloudera , Snappy IS является разделяемым. Для MapReduce, если вам нужно, чтобы ваши сжатые данные были разделяемыми, форматы BZip2, LZO и Snappy являются разделяемыми, а GZip — нет. Разделяемость не имеет отношения к...
12630 просмотров
schedule 07.08.2022

Laravel Snappy PDF Как показать изображения
У меня проблема с пакетом snappy. Я пытаюсь создать PDF-файл с внешним изображением, но при этом получаю сообщение об ошибке: $pdf = PDF::loadView('admin-customer.tag.pdf-view', $product) ->setOption('page-width', '100')...
1533 просмотров
schedule 13.08.2022

Распаковка строк в строки с помощью Snappy в Java
Я пытаюсь сжать Strings , записывая их в файлы (как Strings ) и распаковывая эти файлы. Для сжатия я написал эту функцию: public static String compress(String s) throws IOException { byte[] by = Snappy.compress(s, StandardCharsets.UTF_8);...
1044 просмотров
schedule 16.09.2022

Чтение быстрого сжатого ввода в свинье
У меня есть файл, который я пытаюсь загрузить в свинью, сжатый с помощью snappy. Я установил параметры конфигурации в grunt, как описано в этой проблеме jira , но я все еще получая сжатые данные в результатах. Когда я запускаю задание, оно...
2385 просмотров
schedule 18.03.2023

Hadoop mapreduce: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy()Z
Я пытаюсь написать файл сжатой последовательности мгновенных блоков из задания уменьшения карты. Я использую hadoop 2.0.0-cdh4.5.0 и snappy-java 1.0.4.1. Вот мой код: package jinvestor.jhouse.mr; import java.io.ByteArrayOutputStream; import...
25408 просмотров
schedule 01.11.2022

Как включить поддержку кодека Snappy в кластере Spark, запущенном с помощью Google Cloud Dataproc?
При попытке прочитать сжатый файл последовательности Snappy из кластера Spark, запущенного с помощью Google Cloud Dataproc , я получаю следующее предупреждение: java.lang.RuntimeException: native snappy library not available: this version of...
1301 просмотров

symfony, knpLabs/snappy, генерировать, pdf, шрифт,
У меня есть вопрос. Я использую пакет knpLabs/snappy для создания pdf-файла из шаблона ветки в моем symfonyproject. Все работает нормально, но единственная проблема в том, что он не загружает мой google-шрифт. Можно ли использовать шрифт Google?...
641 просмотров
schedule 08.02.2023

Настройка драйвера mongodb node.js для использования мгновенного сжатия
Недавно мы обновили набор реплик MongoDB до версии 3.4.4; Я заметил, что этот выпуск теперь поддерживает сжатую сетевую связь с snappy. У меня есть установленные члены, чтобы включить это, чтобы они взаимодействовали друг с другом таким образом, и...
923 просмотров
schedule 06.12.2022

Сжатые файлы последовательностей Hadoop Python
У меня есть клиент, который отправляет мне сжатые файлы последовательности Snappy для анализа. В конечном итоге я хочу поместить эти данные в файл pandas df. Формат выглядит следующим образом >>> body_read...
1320 просмотров
schedule 25.07.2023

Snappy - неправильное преобразование из пикселей в долготу
Я использую snappy, чтобы попытаться выяснить, каковы координаты x, y, чтобы обрезать изображение. Я провел несколько тестов с использованием быстрых функций, но заметил, что с ними что-то не так. Я преобразовал X, Y из изображения в широту и...
314 просмотров

Как десериализовать файлы avro
Я хотел бы прочитать папку hdfs, содержащую файлы avro с spark. Затем я хотел бы десериализовать события avro, содержащиеся в этих файлах. Я хотел бы сделать это без библиотеки com.databrics (или любой другой, позволяющей легко это сделать)....
1497 просмотров
schedule 21.10.2022

Orient DB 3.0.18: сжатие с именем snappy отсутствует
Пытаюсь открыть базу с помощью Orient DB 3.0.18, созданную с помощью Orient DB v2.2.37, однако выдается ошибка "Сжатие с именем snappy отсутствует". Как зарегистрировать мгновенное сжатие в Orient V3? Я пробовал org.xerial.snappy в maven POM, но без...
81 просмотров
schedule 02.10.2023