Составители:
Рубрика:
36
учителя. Обучение с подкреплением является сложным процессом,
основанным на методе проб и ошибок. Основной сферой примене-
ния данной парадигмы являются задачи, в которых необходимо
найти оптимальную последовательность действий. Такие задачи
характерны при нейросетевом управлении автономными агентами,
например, в робототехнике.
По существу, задача обучения ИНС представляет собой задачу
оптимизации, поэтому возможна еще одна классификация, кото-
рая делит все методы обучения ИНС на две группы:
• детерминированные методы обучения. Этими методами про-
цедура коррекции весов НС осуществляется шаг за шагом на осно-
вании информации о входе сети, ее текущем и желаемом выходе.
Такие методы обучения являются локальными, т. е. предполагают,
что функция ошибки унимодальная;
• стохастические методы обучения. Такой подход соответ-
ствует глобальной оптимизации, при которой предполагается, что
функция ошибки может иметь множество экстремумов (мультимо-
дальная функция). Для того чтобы попасть в окрестность глобаль-
ного экстремума, требуется совершать движения, временно ухуд-
шающие целевую функцию. С этой целью в формулу коррекции
весов вводится случайный фактор.
Таким образом, существуют две подгруппы методов обучения с
учителем. К первой подгруппе относятся методы поградиентного
спуска: метод наименьших квадратов и метод обратного распро-
странения ошибки. Оба этих подхода локальные, т. е. адекватны
при унимодальном характере функции ошибки. Ко второй под-
группе относятся стохастические методы, такие, как генетический
алгоритм, роевой алгоритм, метод отжига металла и т. д. Эти мето-
ды работают и при мультимодальном характере функции ошибки,
т. е. являются глобальными.
1.11. Предварительная обработка информации
и оценка качества работы нейросети
На вход ИНС поступает числовая информация, которая может
иметь разный смысл. С помощью кодирования можно описывать
текстовую информацию, изображения и любые параметры иссле-
дуемых объектов для ИНС.
Качественные переменные (признаки) принимают конечное
число значений.
Страницы
- « первая
- ‹ предыдущая
- …
- 34
- 35
- 36
- 37
- 38
- …
- следующая ›
- последняя »
