Научная статья Шумков Е.А., Чистик И.К. 'Использование генетических алгоритмов для обучения нейронных сетей'
// Политематический сетевой электронный научный журнал КубГАУ. №7, 2013
Ключевые слова: ГЕНЕТИЧЕСКИЕ АЛГОРИТМЫ, НЕЙРОННЫЕ СЕТИ, ОБУЧЕНИЕ НЕЙРОННОЙ СЕТИ, СТОХАСТИЧЕСКИЕ МЕТОДЫ ОБУЧЕНИЯ
В настоящее время создано большое количество архитектур нейронных сетей и методов их обучения [4]. Наиболее распространенной является связка -
многослойный персептрон (далее МП) и алгоритм обратного распространения ошибки. Для МП также применяют и другие методы, в частности для "грубого"
обучения применяют RProp, для "точного" - квазиньютоновские методы и др. [7]. Данные методы, в основном градиентные и не лишены недостатков.
Один из основных - точные значения градиента не всегда доступны и кроме того решение задачи оптимизации в условиях большой размерности требует
значительных вычислительных, а следовательно и временных затрат [4,6].
Одним из крупных классов обучения нейронных сетей являются вероятностные методы, а также принцип стохастического моделирования [4].
В частности выделяют методы стохастического моделирования: алгоритм Метрополиса, метод моделирования отжига, выборки Гиббса. Популярны и
стохастические машины при обучении нейронных сетей - машина Больцмана, сигмоидальные сети доверия и стохастическая машина Гельмгольца.
Стохастические методы обучения нейронных сетей черпают свои идеи в основном в статистической механике [4]. Данные методы обычно относятся,
за некоторыми исключениями, к классу самоорганизующихся обучаемых систем.
Полный текст статьи на сайте ej.kubagro.ru
Лекция по нейронным сетям и генетическим алгоритмам >>
Патент, реализующий обучение нейронных сетей и генетический алгоритм >>
Библиографическая ссылка на статью: Шумков Е.А., Чистик И.К. "Использование генетических алгоритмов для обучения нейронных сетей" // Политематический сетевой электронный научный журнал КубГАУ. №7, 2013
<< Предыдущая статья || Следующая статья >>
НЕЙРОННЫЕ СЕТИ, ГЕНЕТИЧЕСКИЕ АЛГОРИТМЫ, КОМБИНАЦИЯ ГЕНЕТИЧЕСКИХ АЛГОРИТМОВ И НЕЙРОННЫХ СЕТЕЙ, МНОГОСЛОЙНЫЙ ПЕРСЕПТРОН
|