Составители:
Рубрика:
203
19.2.5 Обработка предложений естественного языка с помощью
нейронных сетей
В последнее десятилетие для обработки ЕЯ начали использовать
нейронные сети.
Нейронные сети используются для решения следующих задач [3]:
- распознавание грамматически правильных предложений ЕЯ
(используются рекуррентные нейронные сети);
- представление и распознавание смысла, заключенного в
предложении ЕЯ (семантические нейронные сети);
- кластеризация слов и фраз ЕЯ с целью поиска документов по
содержимому (модель Хэмминга, самоорганизующиеся карты
Кохонена).
В первом случае происходит обучение сети на обучающей выборке из
правильных предложений. При этом в процессе обучения нейронная сеть
формирует в своем состоянии и своей структуре грамматику языка.
Во втором случае при обучении происходит формирование нейронных
сетей, узлами которых являются слова, словосочетания и концепции, взятые
из обработанных предложений ЕЯ.
В третьем случае в процессе обучения происходит разбиение
предложений (фраз, слов) по степени их похожести в пространстве
признаков.
В основу главы 19 положен материал учебного пособия [3].
19.2.5 Обработка предложений естественного языка с помощью нейронных сетей В последнее десятилетие для обработки ЕЯ начали использовать нейронные сети. Нейронные сети используются для решения следующих задач [3]: - распознавание грамматически правильных предложений ЕЯ (используются рекуррентные нейронные сети); - представление и распознавание смысла, заключенного в предложении ЕЯ (семантические нейронные сети); - кластеризация слов и фраз ЕЯ с целью поиска документов по содержимому (модель Хэмминга, самоорганизующиеся карты Кохонена). В первом случае происходит обучение сети на обучающей выборке из правильных предложений. При этом в процессе обучения нейронная сеть формирует в своем состоянии и своей структуре грамматику языка. Во втором случае при обучении происходит формирование нейронных сетей, узлами которых являются слова, словосочетания и концепции, взятые из обработанных предложений ЕЯ. В третьем случае в процессе обучения происходит разбиение предложений (фраз, слов) по степени их похожести в пространстве признаков. В основу главы 19 положен материал учебного пособия [3]. 203