4. Многослойные ИНС

В предыдущей главе вы научились создавать и обучать простейшие искусственные нейронные сети – персептроны. Однако они рассмотренные нами персептроны в основном могут выполнять только простейшие задачи на классификацию линейно разделимых множеств.

В этой главе мы будем изучать многослойные нейронные сети, которые могут выполнять гораздо более сложные задачи, а также алгоритм их обучения – алгоритм обратного распространения ошибки.

Метод градиентного спуска

Пусть у нас есть некоторая функция. Для простоты возьмем функцию от двух переменных, так как в таком случае получим некоторую поверхность.

Математическая справка