Контекст Я использую MarianMT von Huggingface через Python, чтобы переводить текст из источника на целевой язык. Ожидаемое поведение Я ввожу последовательность в модель MarianMT и получаю ее обратный перевод. Для этого я использую...

Используя инструмент конвейера HuggingFace, я с удивлением обнаружил, что значительная разница в выводе при использовании быстрого и медленного токенизатора. В частности, когда я запускаю конвейер маски заполнения, вероятности, присвоенные...

Я нахожусь в ситуации, когда я работаю с трансформерами huggingface и получил некоторое представление об этом. Я работаю с моделью facebook / bart-large-cnn для выполнения суммирования текста для моего проекта, и на данный момент я использую...

Я пытаюсь настроить gpt2 с помощью собственного набора данных. Я создал базовый пример с документацией из трансформаторов обнимающего лица. Я получаю указанную ошибку. Я знаю, что это означает: (в основном это обратный вызов нескалярного тензора),...

я декодировал токенизированные токены из tokenizer bert , и он выдавал [UNK] вместо символа €. но я попытался добавить токен ##€ в файл vocab.txt. но это не было отражено в прогнозе, результат был таким же, как и предыдущий, он снова давал [UNK]....

Я следую предварительно обученной модели трансформатора xlm-roberta- large-xnli пример from transformers import pipeline classifier = pipeline("zero-shot-classification",...

Я использую для своего проекта трансформатор версии 3.0.0, и у меня есть вопросы. Я хочу использовать модель Берта с замаскированной предтренингом ПМ для последовательностей белков. Чтобы получить токенизатор уровня персонажа, я получил от...

Я использую библиотеку SentenceTransformers (здесь: https://pypi.org/project/sentence-transformers/#pretrained-models ) для создания вложений предложений с использованием предварительно обученной модели bert-base-nli-mean-tokens. У меня есть...