текстов на РУССКОМ языке. Сейчас смотрю в сторону DeepPavlov.
Подскажите, у кого-нибудь есть еще идеи относительно фреймворков и, может, есть под рукой примеры реализации?
Есть на базе T5 от @cointegrated
ODQA - это общий вид задачи "вопросы на произвльную тему". У меня только пайплайна для решения этой задачи, который отвечает на вопрос по короткому абзацу текста. Дополнительно нужна база знаний, откуда этот абзац можно вытаскивать, и поисковая система, чтобы его там находить.
Это даже лучше - меньше мощностей будет задействовано. А поисковую систему на чем лучше реализовать? На ум приходят пока регулярки - они быстрые и бьют в лоб.
Классика - это даже не регулярки, а обратный индекс и какой-нибудь tfidf или bm25.
sphinx
Approximate Nearest Neighbors на эмбедингах?)
Стикер
Обсуждают сегодня