Поверхностный разбор

Поверхностный синтаксический анализ (также фрагментарный или легкий синтаксический анализ ) — это анализ предложения , который сначала идентифицирует составные части предложения (существительные, глаголы, прилагательные и т. д.), а затем связывает их с единицами более высокого порядка, имеющими дискретные грамматические значения ( группы существительных или фразы) . , группы глаголов и т. д.). В то время как самые элементарные алгоритмы фрагментации просто связывают составные части на основе элементарных шаблонов поиска (например, как указано в регулярных выражениях ), подходы, использующие методы машинного обучения (классификаторы, тематическое моделирование и т. д.), могут учитывать контекстную информацию и, таким образом, Составляйте фрагменты таким образом, чтобы они лучше отражали смысловые отношения между основными составляющими. То есть эти более продвинутые методы решают проблему, заключающуюся в том, что комбинации элементарных составляющих могут иметь разные значения более высокого уровня в зависимости от контекста предложения.

Это метод, широко используемый при обработке естественного языка . Это похоже на концепцию лексического анализа компьютерных языков. Под названием «гипотеза мелкой структуры» она также используется в качестве объяснения того, почему изучающие второй язык часто не могут правильно разобрать сложные предложения.

Ссылки

Источники

• «NP Chunking (современное состояние)» . Ассоциация компьютерной лингвистики . Проверено 30 января 2016 г.
• Эбни, Стивен (1991). «Разбор по частям | Анализ на основе принципов» (PDF) . www.vinartus.net . стр. 257–278.

Внешние ссылки

• Apache OpenNLP OpenNLP включает в себя блокировщик.
• Общая архитектура GATE для текстовой инженерии GATE включает в себя блокировщик.
• NLTK на фрагменты Разделение
• Иллинойс Shallow Parser Shallow Parser Демо-версия

См. также

• Парсер
• Маркировка семантических ролей
• Распознавание названного объекта