Автоматическое реферирование

Автомати́ческое рефери́рование, анноти́рование — создание краткой версии (реферата, аннотации) текстового документа с помощью компьютерной программы.

История

править

Первая работа по автоматическому реферированию была сделана американским учёным Г. П. Луном[вд] в 1958 г. на материале английского языка.[1][2][3] Принципы экстрактивного реферирования были сформулированы Дж. Солтоном[вд] в конце 50-х — начале 60-х годов.[2][4]

В СССР первооткрывателями в области автоматического реферирования стали В. Е. Берзон, И. П. Cевбо, Э. Ф. Скороходько[вд], Д. Г. Лахути, Р. Г. Пиотровский и др.[5][2]

Подходы

править

Выделяется два основных подхода к автоматическому реферированию: извлекающий (экстрагирующий, поверхностный) и генерирующий (абстрагирующий, глубинный).[6][1][5][2]

Извлекающий (экстракция)

править

Из исходного текста выбираются наиболее важные фразы, предложения или абзацы, совокупность которых образует некоторый экстракт, квазиреферат.[5] При этом данные фрагменты не обрабатывают, а извлекают в том порядке и виде, в каком они приведены в исходном тексте.[6]

Достоинства подхода: независимость от предметной области, сравнительная простота разработки.[1] Недостатки: бессвязность результата.[1]

Генерирующий (абстракция)

править

Генерирующие методы основаны на лингвистических правилах обработки естественного языка или методах искусственного интеллекта.[6] Они содержательно обобщают исходный документ, создавая текст, явно в нём не представленный.[6]

Достоинства подхода: лучшее качество результата.[1] Недостатки: сложность практической реализации, необходимость сбора большого количества лингвистических знаний.[1]

Примечания

править
  1. 1 2 3 4 5 6 Батура Т. В., Бакиева А. М. Методы и системы автоматического реферирования текстов — Новосибирск: 2019. — 110 с. — 100 экз. — ISBN 978-5-4437-0974-1
  2. 1 2 3 4 Седова Е. П. Автоматическое реферирование научных публикаций средствами синтаксического анализа на материале современных статей по компьютерному сиСПб.: 2018. — 49 с.
  3. Luhn H. P. The Automatic Creation of Literature Abstracts (англ.) // IBM Journal of Research and Development / C. A. PickoverIBM Corporation, IEEE, 1958. — Vol. 2, Iss. 2. — P. 159—165. — ISSN 0018-8646; 2151-8556doi:10.1147/RD.22.0159
  4. Salton G. Dynamic Information and Library Processing (англ.) — 1975. — 523 p.
  5. 1 2 3 Тревгода С. А. Методы и алгоритмы автоматического реферирования текста на основе анализа функциональных отношенийСПб.: 2009. — 157 с. — 100 экз.
  6. 1 2 3 4 Осминин П. Г. Современные подходы к автоматическому реферированию и аннотированию // Вестник Южно-Уральского государственного университета — Челябинск: 2012. — вып. 25. — С. 134–135.