Всем привет! Подскажите, а есть где-то словарь со словами, которые

есть в моделях вроде GPT-3/OPT-130B/Bloom и используются для генерации?

1 ответов

11 просмотров

прям в репах hf лежит словарь BPE-токенизаций

Похожие вопросы

Карта сайта