Вопросы по теме 'dill'

Травление и расстегивание в разных модулях
Я знаю, что это было затронуто рядом других вопросов ( Невозможно загрузить файлы с помощью модулей pickle и multipile ), но я не вижу, как их решения применимы к моей ситуации. Это моя структура проекта (максимально минимальная):...
1207 просмотров
schedule 14.11.2021

Загрузка маринованного (укропного) файла, содержащего словарь функций
Это продолжение вопроса, который я ранее задавал: Загрузка функций в файл pickle, который использует оболочку класса , где я хотел выделить словарь функции под оболочками классов , но модуль оболочки класса не смог загрузить. С тех пор я решил...
840 просмотров
schedule 01.12.2021

Распараллеливание программы python3 с огромными сложными объектами
вступление У меня есть довольно сложная программа на Python (скажем, более 5000 строк), написанная с помощью Python 3.6 . Эта программа анализирует огромный набор данных из более чем 5000 файлов, обрабатывает их, создавая внутреннее представление...
71 просмотров

Многопроцессорность в Python с использованием класса пула
Я хочу использовать многопроцессорность в python (в частности, класс пула) в окнах (блокнот zeppelin). Но, прочитав много, я узнал, что класс пула использует рассол в своей серверной части и может использоваться только для объектов, которые можно...
145 просмотров

Многопроцессорность Python: AttributeError: объект «Тест» не имеет атрибута «get_type»
короткая короткая версия: У меня возникают проблемы с распараллеливанием кода, использующего методы экземпляра. Большая версия: Этот код Python выдает ошибку: Error Traceback (most recent call last): File...
3149 просмотров
schedule 07.06.2022

Если файл Dill слишком велик для оперативной памяти, есть ли другой способ его загрузки
Если файл укропа слишком велик для оперативной памяти, можно ли загрузить его альтернативным способом. Например, python3 выдает ошибки памяти, когда я загружаю сериализованный объект размером около 1,2 ГБ. file = open('SerializedData.pkl', 'rb')...
567 просмотров
schedule 16.07.2022

пафосная ошибка cpickle на python 2.7.13/14 с использованием windows 10
На примере многопроцессорного использования пафоса и укропа Я наткнулся на стену ошибок cPickle. Я сделал так, как www3cam ; с небольшим дополнением.. за счет удаления пафоса, укропа, мультипроцесса и pyreadline. Затем нажмите pip install...
111 просмотров

Python TypeError при загрузке объекта с использованием Dill
Попытка отрендерить большой и (возможно, очень) неподдающийся обработке объект в файл для последующего использования. Со стороны dill.dump(file) претензий нет: In [1]: import echonest.remix.audio as audio In [2]: import dill In [3]:...
1973 просмотров
schedule 04.06.2023

Как использовать укроп для сериализации определения класса?
В ответе на Python pickle: работа с обновленными определениями классов автор пакета dill пишет: "Хорошо, я добавил эту функцию в укроп в последней версии на github. Реализовано с гораздо меньшими хитростями, чем я думал... просто сериализуйте...
17276 просмотров
schedule 03.01.2023

pickle исчерпывается до конца кадра при использовании Dill с кодом, который отлично работает с Pickle
Я работаю над игровым проектом, который использует Pickle для реализации сохраненных игр (я знаю недостатки этого - давайте не будем обсуждать это здесь). Это отлично работает: к сожалению, стандартный Pickle не может справиться с некоторыми вещами,...
1793 просмотров
schedule 19.01.2023

Python — укроп: не могу рассолить украшенный класс
У меня есть следующий код, который украшает класс: import dill from collections import namedtuple from multiprocessing import Process def proxified(to_be_proxied): b = namedtuple('d', []) class Proxy(to_be_proxied, b): pass...
888 просмотров
schedule 29.10.2022

Экземпляр класса становится непригодным для обработки (укроп), когда функция ограничения и параметры определены внутри области класса
Чтобы диагностировать проблему распаковки dill с объектами lmfit , я хотел попробовать включить определение моей ограничивающей функции в класс, экземпляр которого я позже распарслю. Однако сброс рассола dill , где функция ограничения определена...
94 просмотров
schedule 10.07.2023

Укроп Python: KeyError: 'ClassType'
Я пытаюсь засолить класс. Pickle завершается с ошибкой атрибута, поскольку конструктор класса отсутствует во время загрузки. Я понял, что модуль dill является расширением модуля pickle . Тем не менее, я все еще получаю ошибки. А именно:...
362 просмотров
schedule 01.05.2023

Ошибка рассола утверждает идентификатор (obj) не в self.memo
Сейчас я использую dill (расширенную версию pickle). Я хочу сериализовать свой объект, но получаю эту ошибку: /usr/lib/python2.7/pickle.pyc in memoize(self, obj) 242 if self.fast: 243 return --> 244 assert...
866 просмотров
schedule 05.02.2024

Получение ошибки памяти Dill при загрузке сериализованного объекта, как исправить?
Я получаю ошибку памяти укропа/рассола при загрузке сериализованного объектного файла. Я не совсем уверен, что происходит, и я не уверен, как это исправить. Когда я звоню: stat_bundle = train_batch_iterator(clf, TOTAL_TRAINED_EVENTS) Код...
251 просмотров