Обработка естественного языка Выполнила: Колесникова Екатерина
Под обработкой ЕЯ (Natural Language Processing, NLP) понимается решение задач, связанных с пониманием, анализом, выполнением различных операций над текстами, а так же их генерацией.
Главные задачи 1) Распознавание речи 2) Анализ текста 3) Генерирование текста 4) Синтез речи Задачи анализа и синтеза в комплексе: Машинный перевод Автоматическое реферирование, аннотирован ие или упрощение текста
NLP и лингвистика Фонология (звуки речи) Морфология (структура и форма слов ЕЯ) Синтаксис (структура и функции предложений) Семантика (смысл языковых высказываний) Прагматика (значение высказываний) Социолингвистика Психолингвистика Лексикография (описание лексикона ЕЯ) Прикладная лингвистика
NLP и математика и информатика Математическая лингвистика Квантитативная лингвистика (изучение языка/речи количественными методами) Теория формальных языков и грамматик – возникла из порождающих грамматик Н. Хомского (50 -е гг. ), для анализа синтаксических структур ЕЯ Теория алгоритмов Информатика ( Computer Science )
Ключевые разработки SHRDLU LUNAR LIFER/LADDER
Современное состояние и перспективы Skype Translator.
Siri —облачный персональный помощник и вопросно-ответная система. Данное приложение использует обработку естественной речи, чтобы отвечать на вопросы и давать рекомендации. Siri приспосабливается к каждому пользователю индивидуально, изучая его предпочтения в течение долгого времени
Методы моделирования Когнитивное моделирование Формальное моделирование
Формальное моделирование Р. Шенка «Концептуальная информации» , 1980 г. обработка Пример концептуального представления предложения «Джон съел лягушку» .
Когнитивное моделирование Поиск корреляции «между лингвистическими структурами текста и структурами представлений его автора» .
Список литературы 1. Автоматическая обработка текстов на естественном языке и компьютерная лингвистика: учеб. пособие / Большакова Е. И. , Клышинский Э. С. , Ландэ Д. В. , Носков А. А. , Пескова О. В. , Ягунова Е. В. — М. : МИЭМ, 2011. — 272 с. 2. Автоматическая обработка текстов на естественном языке и анализ данных : учеб. пособие / Большакова Е. И. , Воронцов К. В. , Ефремова Н. Э. , Клышинский Э. С. , Лукашевич Н. В. , Сапин А. С. — М. : Изд-во НИУ ВШЭ, 2017. — 269 с. 3. Когаловский, М. Р. Перспективные технологии информационных систем / М. Р. Когаловский. –М. : Компания Ай. Ти, 2003. – 288 с. 4. Филологические науки. Вопросы теории и практики. Тамбов: Грамота, 2015. № 4 (46): в 2 -х ч. Ч. II. C. 199 -202. 5. https: //22 century. ru/popular-science-publications/natural-languageprocessing 6. https: //habrahabr. ru/post/271321/ 7. http: //compuling. narod. ru/referat. htm
Скачать презентацию Обработка естественного языка Выполнила Колесникова Екатерина Под
Обработка естественного языка.pptx