Фрагмент для ознакомления
2
Введение
Современное информационное общество характеризуется постоянным ростом объемов текстовой информации, представленной в цифровом виде. Автоматическая обработка текстов становится ключевым направлением развития когнитивных и семантических технологий, обеспечивающих эффективное взаимодействие между человеком и машиной. Одной из центральных задач в данной области является разработка систем понимания текстов, способных интерпретировать смысловые структуры, выявлять ключевые концепты и формировать когнитивные модели содержания.
Несмотря на значительный прогресс в области обработки естественного языка, большинство современных систем всё ещё сталкиваются с трудностями при глубоком семантическом анализе текста. Тексты часто содержат неоднозначности, контексто-зависимые значения и сложные синтаксические конструкции, которые затрудняют точную интерпретацию смысла. Проблема состоит в том, чтобы создать такие принципы и методы, которые позволят системам не просто обрабатывать текст на уровне слов и грамматических структур, но и формировать целостное когнитивное представление информации, приближенное к человеческому пониманию.
Актуальность данной темы обусловлена растущей потребностью в интеллектуальных системах, способных понимать тексты для различных прикладных задач: автоматического перевода, извлечения знаний, ведения диалога, анализа больших массивов данных, обеспечения информационной безопасности и многого другого. Разработка эффективных принципов построения таких систем требует междисциплинарного подхода, объединяющего лингвистику, когнитивную науку, искусственный интеллект и семантические технологии. Углублённое изучение методов, лежащих в основе систем понимания текстов, позволяет не только повысить их качество, но и приблизиться к созданию полноценных интеллектуальных агентов.
Целью данной работы является исследование принципов построения системы понимания текстов и методы, закладываемые в основу ее работы.
Задачи:
- Изучать принципы построения системы понимания текстов;
- Рассмотреть методы анализа текстов;
- Проанализировать принципы и методы построения системы понимания правовых текстов.
Работа состоит из трех глав, введения и заключения, в конце представлен список литературы.
1. Принципы построения системы понимания текстов
1.1 Семантическая обработка текста
Принципы построения системы понимания текстов основываются на стремлении максимально приблизить процесс машинной интерпретации текстовой информации к человеческому восприятию. Ключевым ориентиром здесь выступает идея о том, что понимание текста невозможно без создания внутреннего когнитивного представления его смысла, включающего как лингвистические, так и внеязыковые (онтологические, прагматические) компоненты.
Одним из главных принципов является семантическая направленность обработки текста: система должна опираться не просто на последовательность слов, а на значения, скрытые за ними, и на связи между этими значениями. Это требует формализации понятий и структур, составляющих смысловое наполнение текста, и создания моделей, которые позволяют распознавать эти структуры автоматически.
Семантическая обработка текста занимает центральное место в построении системы понимания, поскольку она обеспечивает переход от поверхностного уровня анализа — морфологического и синтаксического — к более глубокому уровню, отражающему смысловые отношения между единицами текста. Этот процесс включает в себя идентификацию понятий и концептов, скрытых за лексическими единицами, установление связей между ними, интерпретацию анафор, разрешение омонимии и полисемии, а также выявление логико-семантических связей (таких как причинно-следственные, временные, условные и др.). Используемые методы семантической обработки могут базироваться на правилах (rule-based подход), статистике (data-driven модели), а также на современных подходах машинного обучения, особенно нейросетевых моделях, способных распознавать сложные паттерны и семантические зависимости в больших текстовых корпусах.
Фрагмент для ознакомления
3
1. Анализ мирового опыта в регулировании использования медицинских данных для целей создания систем искусственного интеллекта на основе машинного обучения / Д. Е. Шарова, А. А. Михайлова, А. В. Гусев [и др.] // Врач и информационные технологии. – 2022. – № 4. – С. 28-39. – DOI 10.25881/18110193_2022_4_28. – EDN JKXHAO./ https://elibrary.ru/download/elibrary_50209418_31392800.pdf (дата обращения: 20.02.2024).
2. Андреева, О. Н. Перспективы использования технологии блокчейн в медицине / О. Н. Андреева // Вестник современных цифровых технологий. – 2020. – № 2. – С. 36-41. – EDN XUSFAE./ https://www.elibrary.ru/item.asp?id=42533460 (дата обращения: 20.02.2024).
3. Вдовин, В. М. Теория систем и системный анализ : учебник / В. М. Вдовин, Л. Е. Суркова, В. А. Валентинов. – 6-е изд., стер. – Москва : Дашков и К°, 2022. – 643 с. : ил., табл., схем., граф. – (Учебные издания для бакалавров). – Режим доступа: по подписке. – URL: https://biblioclub.ru/index.php?page=book&id=684426. – Библиогр. в кн. – ISBN 978-5-394- 04581-3 (дата обращения: 20.02.2024).
4. Глазков, А. В. Семантика: от слова к тексту : учебник и практикум для вузов / А. В. Глазков. — Москва : Издательство Юрайт, 2023. — 492 с. — (Высшее образование). —ISBN 978-5-534-15025-4. — Текст : электронный // Образовательная платформа Юрайт [сайт]. —URL: https://urait.ru/bcode/520029 (дата обращения: 20.02.2024).
5. Игнатьев, А. Г. Актуальные тренды регулирования Интернета: от открытого пространства безграничной свободы к региональной и страновой фрагментации / А. Г. Игнатьев, Ю. А. Линдре. – Москва : Автономная некоммерческая организация «Центр компетенций по глобальной ИТ-кооперации», 2023. – 30 с. – EDN EHZLLW./ /elibrary.ru/download/elibrary_52281008_49003884.pdf (дата обращения: 20.02.2024).
6. Колесникова, С. М. Когнитивная лингвистика : учебник для вузов / С. М. Колесникова, Е. В. Алтабаева, А. Т. Грязнова ; под редакцией С. М. Колесниковой. — Москва : Издательство Юрайт, 2023. — 192 с. — (Высшее образование). — ISBN 978-5-534-15454-2. — Текст : электронный // Образовательная платформа Юрайт [сайт]. — URL: https://urait.ru/bcode/520470.
7. Локнов, А. И. Средства и системы обработки информации : Учебное пособие / А. И. Локнов, Ю. И. Синещук, В. Н. Родин. – Санкт-Петербург : Санкт-Петербургский университет Министерства внутренних дел Российской Федерации, 2023. – 124 с. – ISBN 978-5-91837-676-8. – EDN KJLTGD. https://elibrary.ru/download/elibrary_50288517_89658791.pdf (дата обращения: 20.02.2024).
8. Шабанов, Т. Ю. Современные технологии поиска и обработки информации / Т. Ю. Шабанов. – Челябинск : Челябинский государственный университет, 2021. – 122 с. – ISBN 978-5- 7271-1719-4. – EDN XZKYRQ. https://elibrary.ru/download/elibrary_46594329_83139779.pdf (дата обращения: 20.02.2024).