Коллеги,Добрый вечер. У меня следующий вопрос: я попытался создать несколько вопросов

Question

Коллеги,Добрый вечер. У меня следующий вопрос: я попытался создать несколько вопросов

к тексту,Используя вот это мануал (https://habr.com/ru/post/581932/),т.е. модель MT5

for i in range(15):
print(generate(
'ask | Haуки o пpиpoдe зapoдилиcь oчeнь дaвнo. B coчинeнияx филocoфa Дpeвнeй Гpeции Apиcтoтeля, '
'вeличaйшeгo учeнoгo, жившeгo в IV вeкe дo нaшeй эpы, и пoявилocь cлoвo «физикa» (гpeчecкoe cлoвo фюзиc oзнaчaeт пpиpoдa). '
'B pуccкий язык этo cлoвo ввeл в XVIII вeкe M. B. Лoмoнocoв, кoгдa oн издaл в пepeвoдe c нeмeцкoгo пepвый учeбник физики.',max_length=52))

вопросы создаются один в один. Почему? Как заставить создавать разные вопросы?

#nlp #programming #russian

0

10.02.2022

10 ответов

24 просмотра

Igor Shatalin

И ещё есть видео с разъяснениям по настройке генерации: https://www.youtube.com/watch?v=lM6a9e1t-mA

0

11.02.2022

Владимир Кузовкин Автор вопроса

Igor Shatalin
Подберите вручную гиперпараметры генерации, чтобы ...

Это разве не модель gpt2?

0

11.02.2022

Igor Shatalin

Это модель ruGPT3. Но метод для генерации один и тот же, и, соответственно, аргументы одинаковые. Просто нужно вручную подобрать оптимальные параметры под вашу задачу и под вашу модель. В видео и статье объясняется, какой параметр на что влияет.

0

11.02.2022

Захар Понимаш

Igor Shatalin
Это модель ruGPT3. Но метод для генерации один и т...

А rugpt3 разве не аналог gpt2?

0

11.02.2022

PuffOfSmoke

Igor Shatalin
Подберите вручную гиперпараметры генерации, чтобы ...

Качество только упадёт

0

11.02.2022

Igor Shatalin

PuffOfSmoke
Качество только упадёт

Что такое качество?)

0

11.02.2022

PuffOfSmoke

Igor Shatalin
Что такое качество?)

Параметрами генерации можно заставить модель выкручиваться, но варианты она будет выдавать в которых менее уверена Соответственно, любая адекватная метрика упадёт

0

11.02.2022

Igor Shatalin

PuffOfSmoke
Параметрами генерации можно заставить модель выкру...

Хм... Я бы с вами не согласился. "Наиболее вероятный токен" - не равно "наикачественнейший результат". (Как быть с синонимами?) Глядите, например, у меня задача: сгенерировать к тексту несколько вопросов. Есть текст: "Сегодня утром Вася пошёл на реку на рыбалку." И получил не один, а несколько вопросов: - Когда Вася пошёл на рыбалку? - Куда Вася пошёл на рыбалку? - Зачем вася пошёл на реку? Объясните мне, какой вопрос более качественный, а какой - менее?))

0

11.02.2022

PuffOfSmoke

Igor Shatalin
Хм... Я бы с вами не согласился. "Наиболее вероя...

Предположу, что крутя параметры generate в сторону креативности помимо этих вопросов, мы начнём получать вопросы: С кем Вася пошёл на рыбалку На чём Вася пошёл на рыбалку

0

11.02.2022

Igor Shatalin · Accepted Answer

Подберите вручную гиперпараметры генерации, чтобы генерирорвалось так, как вам нужно. Тут можно посмотреть какие гиперпараметры на что влияют: https://huggingface.co/blog/how-to-generate А так в блокноте можно посмотреть, какие аргументы есть у метода model.generate: ?model.generate

170 похожих чатов

Коллеги,Добрый вечер. У меня следующий вопрос: я попытался создать несколько вопросов

10 ответов

Похожие вопросы