Коллеги, посоветуйте какими способами можно достигнуть слелующего: - Я пишу статьи

Question

Коллеги, посоветуйте какими способами можно достигнуть слелующего: - Я пишу статьи

на различные технические темы.
- Статьи содержат разного типа содержимое. Схемы, изображения, код, таблицы, файлы.
- Я бы хотел автоматически, полагаю с помощью ML, извлечь смысловые выдержки из всех статей, чтобы их отображать как краткое изложение на странице списка статей. Объёмом в параграф достаточно.

Читаю на данный момент про Abstraction-based summarization. Есть ли еще подходы для такой цели?

#nlp #programming #russian

0

16.08.2023

5 ответов

21 просмотр

kvdm.dev Автор вопроса

Alexander Fedorenko
сюда не смотрели https://huggingface.co/spaces/mte...

На Хагингфэйс ходил, спасибо за конкретную ссылку

0

17.08.2023

Bogy

Alexander Fedorenko
сюда не смотрели https://huggingface.co/spaces/mte...

А не подскажете как sbert применить к задаче суммаризации? По ссылке, как я понял, там сравнивается близость ответа модели и челвоека в датасете mteb/sumeval, т.е. оценки реферата, а не его создания

0

17.08.2023

Alexander Fedorenko

Bogy
А не подскажете как sbert применить к задаче сумма...

https://github.com/UKPLab/sentence-transformers/blob/master/examples/applications/text-summarization/text-summarization.py

0

17.08.2023

Alexander Fedorenko

Bogy
А не подскажете как sbert применить к задаче сумма...

https://pypi.org/project/bert-extractive-summarizer/

0

17.08.2023