Алгоритмы сокращения (pruning algorithms)

Метод штрафных функций

В целевую функцию алгоритма обучения вводятся штрафы за то, что значения синаптических весов отличны от нуля, например:

где L – количество нейронов текущего слоя; n – количество входных сигналов слоя.

Метод проекций

Синаптический вес обнуляется, если его значение попало в заданный диапазон:

Основные недостатки алгоритмов сокращения:

- Отсутствие методики определения количества избыточных нейронов, подлежащих удалению.

- Низкая скорость обучения как следствие избыточной мощности сети.

Дата добавления: 2014-01-20; Просмотров: 530; Нарушение авторских прав?; Мы поможем в написании вашей работы!