170 похожих чатов

Я верно понимаю, что в hf (huggingface.co/docs/transformers/tasks/multiple_choice) при файнтюнинге

модели на multiple choice - модель по факту обучается на бинарную классификацию, а не на мультилейбл? То есть на каждый пример выдаёт вероятность, из которого выбирается 1. Но при этом модель не знает во время обучения, что несколько ответов относятся к одному и тому же вопросу?

Я не нашёл там какого-то особого лосса, где имеется связь между несколькими примерами или какая-то зависимость от их количества

1 ответов

4 просмотра

ну да, там по идее все прекрасно написано в документации. делаются все комбинации предложений с ответами, дальше модель тюнится по сути на классификации насколько данный ответ (или некий template с ответом) коррелирует с изначальным предложением. можно код посмотреть https://github.com/huggingface/transformers/blob/main/src/transformers/models/bert/modeling_bert.py#L1620 там тоже все без затей

Похожие вопросы

Обсуждают сегодня

Кстати, а я вот тут подумал. Допустим, у нас имеется цикл который выполняет огромное количество итераций, но мы хотим, чтобы какие-то действия исполнилось только один раз. В Я...
The Bird of Hermes
23
Доброй ночи. Вопрос знатокам. Имеется некая таблица, результат которой выведен в DBGrid на форме. И есть форма, с помощью которой можно как добавить запись, так и отредактиров...
Евгений
28
а всё почему? потому что ассемблер в отличии от яву порождает множество пагубных привычек, среди которых например можно отметить использование глобальных переменных для всего ...
Mixail Frolov
35
анрей С какой целью зашёл?
КТ315
42
я часов 15 назад начал пытаться написать хоть что-то напоминающее ос и у меня есть проблема, которую я пытаюсь решить последние часов 5: есть крч 2 исходника с минимальным код...
Al1to
17
@not_fajox С какой целью зашёл?
КТ315
9
Короче получается только кнопки не поменять А кнопки вроде тоже слетают при редактировании не?
inc.
10
Кто нибудь из участников чата пишет на ассемблере под GNU/Linux?
Spiker01
24
коллеги, добрый вечер! А никто не знает как модальная форма может себя закрыть? Ну допустим модальная форма определила, что смысла ей работать нет и хочет вернуть modalResult...
Михаил
83
Всем привет ребят! Мб кто-то сталкивался? adminСomponents .get("searchСomponents", use: searchComponents) .openAPI( summary: ...
Admin Adminov
2
Карта сайта