Всем привет! Подскажите, а есть где-то словарь со словами, которые

есть в моделях вроде GPT-3/OPT-130B/Bloom и используются для генерации?

1 ответов

9 просмотров

прям в репах hf лежит словарь BPE-токенизаций

Похожие вопросы

Карта сайта