Стохастическая грамматика

Стохастическая грамматика ( статистическая грамматика ) — это грамматическая основа с вероятностным понятием грамматичности :

Стохастическая контекстно-свободная грамматика
Статистический анализ
Анализ данных, ориентированный на данные
Скрытая модель Маркова
Теория оценки

Грамматика реализуется как модель языка . Разрешенные предложения хранятся в базе данных вместе с частотой их встречаемости. ^[1] Статистическая обработка естественного языка использует стохастические , вероятностные и статистические методы, особенно для решения трудностей, которые возникают из-за того, что более длинные предложения очень неоднозначны при обработке реалистичными грамматиками, что дает тысячи или миллионы возможных анализов. Методы устранения неоднозначности часто включают использование корпусов и моделей Маркова . «Вероятностная модель состоит из невероятностной модели плюс некоторых числовых величин; неверно, что вероятностные модели по своей сути проще или менее структурны, чем невероятностные модели». ^[2]

Примеры [ править ]

Вероятностный метод обнаружения рифм реализован компанией Hirjee & Brown. ^[3] в своем исследовании 2013 года по поиску внутренних и несовершенных пар рифм в рэп-текстах. Эта концепция адаптирована на основе метода выравнивания последовательностей с использованием BLOSUM ( BLO cks SU замены матрица ). Они смогли обнаружить рифмы, необнаружимые с помощью невероятностных моделей.

См. также [ править ]

Ссылки [ править ]

^ Стив Янг; Геррит Блутхуфт (14 марта 2013 г.). Корпусные методы обработки языка и речи . Springer Science & Business Media. стр. 140–. ISBN 978-94-017-1183-8 .
^ Джон Голдсмит. 2002. « Вероятностные модели грамматики: фонология как минимизация информации ». Фонологические исследования № 5: 21–46.
^ Хирджи, Хусейн; Браун, Дэниел (2013). «Использование автоматического определения рифмы для определения стиля рифмы в рэп-музыке» (PDF) . Обзор эмпирического музыкознания .

Дальнейшее чтение [ править ]

Кристофер Д. Мэннинг, Хинрих Шютце: основы статистической обработки естественного языка , MIT Press (1999), ISBN 978-0-262-13360-9 .
Стефан Вермтер, Эллен Рилофф, Габриэле Шелер (ред.): Коннекционистский, статистический и символический подходы к обучению обработке естественного языка , Springer (1996), ISBN 978-3-540-60925-4 .
Пирани, Джанкарло, изд. Передовые алгоритмы и архитектуры для понимания речи. Том. 1. Springer Science & Business Media, 2013.

Эта грамматике статья, посвященная , незавершена . Вы можете помочь Википедии, расширив ее .

[YoungBloothooft2013-1] Стив Янг; Геррит Блутхуфт (14 марта 2013 г.). Корпусные методы обработки языка и речи . Springer Science & Business Media. стр. 140–. ISBN 978-94-017-1183-8 .

[2] Джон Голдсмит. 2002. « Вероятностные модели грамматики: фонология как минимизация информации ». Фонологические исследования № 5: 21–46.

[3] Хирджи, Хусейн; Браун, Дэниел (2013). «Использование автоматического определения рифмы для определения стиля рифмы в рэп-музыке» (PDF) . Обзор эмпирического музыкознания .

[1]

[2]

[3]