Вопросы по теме 'snappy'
Мгновенная ошибка: система не может найти указанный путь
Пожалуйста, я впервые пытаюсь использовать snappy, чтобы пользователь мог загружать PDF-файл с моего сайта. Раньше я использовал DomPDF, но обнаружил, что он не подходит для текущей ситуации. Сначала я установил wkhtmltopdf, затем я установил snappy...
700 просмотров
schedule
26.02.2022
Ошибка мгновенной недоступности на EMR
Я использую Spark на EMR с одним главным и одним основным узлом, я столкнулся со следующей проблемой:
java.lang.RuntimeException: native snappy library not available: this version of libhadoop was built without snappy support.
Я установил...
666 просмотров
schedule
10.03.2022
Как загрузить json snappy, сжатый в HIVE
У меня есть куча сжатых файлов json snappy в HDFS. Они быстро сжаты HADOOP (не python, см. другие вопросы SO) и имеют вложенные структуры.
Не удалось найти способ загрузить их в HIVE (используя json_tuple)?
Могу ли я получить некоторые ресурсы /...
570 просмотров
schedule
23.03.2022
Как распаковать файлы .Snappy в Hadoop HDFS?
У меня есть несколько быстро сжатых файлов Snappy в каталоге в HDFS. Мне нужно распаковать каждый файл и загрузить в текстовый файл. Доступны ли какие-либо команды Hadoop DFS? Я новенький здесь. Пожалуйста, помогите.
Спасибо, Правин.
1802 просмотров
schedule
25.05.2022
как улей создает таблицу, используя паркет и snappy
Я знаю синтаксис для создания таблицы с использованием паркета, но я хочу знать, что это значит для создания таблиц с использованием формата паркета и сжатия с помощью snappy, и как мы это делаем? пожалуйста, помогите мне с примером синтаксиса.
В...
15542 просмотров
schedule
11.07.2022
Сжатие HBase Snappy - не удалось создать таблицу, проверка сжатия выполнена успешно
Я пытался решить проводную проблему HBase, связанную с Snappy Compression. Ниже приводится подробное описание всего, что связано с этой проблемой:
Описание проблемы: когда я пытался создать таблицу со сжатием Snappy в оболочке HBase: (подробный...
1628 просмотров
schedule
08.07.2022
ошибка с мгновенным запуском при импорте fastparquet в python
Я установил следующие модули на свой сервер EC2, на котором уже установлены python (3.6) и anaconda:
резкий
пиарроу
s3fs
фастпарк
кроме fastparquet все остальное работает на импорт. Когда я пытаюсь импортировать fastparquet, возникает...
5491 просмотров
schedule
13.07.2022
pyspark как загрузить сжатый файл snappy
Я сжал файл с помощью python-snappy и поместил его в свой магазин hdfs. Сейчас я пытаюсь прочитать это так, но получаю следующую трассировку. Я не могу найти пример того, как прочитать файл, чтобы я мог его обработать. Я могу нормально читать...
11504 просмотров
schedule
20.07.2022
Является ли Snappy разделяемым или нет?
Согласно этому сообщению Cloudera , Snappy IS является разделяемым.
Для MapReduce, если вам нужно, чтобы ваши сжатые данные были разделяемыми, форматы BZip2, LZO и Snappy являются разделяемыми, а GZip — нет. Разделяемость не имеет отношения к...
12630 просмотров
schedule
07.08.2022
Laravel Snappy PDF Как показать изображения
У меня проблема с пакетом snappy. Я пытаюсь создать PDF-файл с внешним изображением, но при этом получаю сообщение об ошибке:
$pdf = PDF::loadView('admin-customer.tag.pdf-view', $product)
->setOption('page-width', '100')...
1533 просмотров
schedule
13.08.2022
Распаковка строк в строки с помощью Snappy в Java
Я пытаюсь сжать Strings , записывая их в файлы (как Strings ) и распаковывая эти файлы. Для сжатия я написал эту функцию:
public static String compress(String s) throws IOException {
byte[] by = Snappy.compress(s, StandardCharsets.UTF_8);...
1044 просмотров
schedule
16.09.2022
Чтение быстрого сжатого ввода в свинье
У меня есть файл, который я пытаюсь загрузить в свинью, сжатый с помощью snappy. Я установил параметры конфигурации в grunt, как описано в этой проблеме jira , но я все еще получая сжатые данные в результатах.
Когда я запускаю задание, оно...
2385 просмотров
schedule
18.03.2023
Hadoop mapreduce: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy()Z
Я пытаюсь написать файл сжатой последовательности мгновенных блоков из задания уменьшения карты. Я использую hadoop 2.0.0-cdh4.5.0 и snappy-java 1.0.4.1.
Вот мой код:
package jinvestor.jhouse.mr;
import java.io.ByteArrayOutputStream;
import...
25408 просмотров
schedule
01.11.2022
Как включить поддержку кодека Snappy в кластере Spark, запущенном с помощью Google Cloud Dataproc?
При попытке прочитать сжатый файл последовательности Snappy из кластера Spark, запущенного с помощью Google Cloud Dataproc , я получаю следующее предупреждение:
java.lang.RuntimeException: native snappy library not available: this version of...
1301 просмотров
schedule
15.11.2022
symfony, knpLabs/snappy, генерировать, pdf, шрифт,
У меня есть вопрос. Я использую пакет knpLabs/snappy для создания pdf-файла из шаблона ветки в моем symfonyproject. Все работает нормально, но единственная проблема в том, что он не загружает мой google-шрифт. Можно ли использовать шрифт Google?...
641 просмотров
schedule
08.02.2023
Настройка драйвера mongodb node.js для использования мгновенного сжатия
Недавно мы обновили набор реплик MongoDB до версии 3.4.4; Я заметил, что этот выпуск теперь поддерживает сжатую сетевую связь с snappy. У меня есть установленные члены, чтобы включить это, чтобы они взаимодействовали друг с другом таким образом, и...
923 просмотров
schedule
06.12.2022
Сжатые файлы последовательностей Hadoop Python
У меня есть клиент, который отправляет мне сжатые файлы последовательности Snappy для анализа. В конечном итоге я хочу поместить эти данные в файл pandas df. Формат выглядит следующим образом
>>> body_read...
1320 просмотров
schedule
25.07.2023
Snappy - неправильное преобразование из пикселей в долготу
Я использую snappy, чтобы попытаться выяснить, каковы координаты x, y, чтобы обрезать изображение.
Я провел несколько тестов с использованием быстрых функций, но заметил, что с ними что-то не так. Я преобразовал X, Y из изображения в широту и...
314 просмотров
schedule
22.10.2022
Как десериализовать файлы avro
Я хотел бы прочитать папку hdfs, содержащую файлы avro с spark. Затем я хотел бы десериализовать события avro, содержащиеся в этих файлах. Я хотел бы сделать это без библиотеки com.databrics (или любой другой, позволяющей легко это сделать)....
1497 просмотров
schedule
21.10.2022
Orient DB 3.0.18: сжатие с именем snappy отсутствует
Пытаюсь открыть базу с помощью Orient DB 3.0.18, созданную с помощью Orient DB v2.2.37, однако выдается ошибка "Сжатие с именем snappy отсутствует". Как зарегистрировать мгновенное сжатие в Orient V3? Я пробовал org.xerial.snappy в maven POM, но без...
81 просмотров
schedule
02.10.2023