Лекция 5. Нейронные сети
Нейронные сети на примере логистической регрессии и softmax
Архитектура нейронной сети
Прямое и обратное распространение ошибки
Функции активации
Инициализация параметров нейронной сети
Вымывание и взрыв градиента
Источники:
К.В. Воронцов. Нейронные сети: градиентные методы оптимизации:
Lecture 11 - Introduction to Neural Networks | Stanford CS229: Machine Learning:
Lecture 12 - Backprop & Improving Neural Networks | Stanford CS229: Machine Learning:
CS229 Lecture Notes. Deep Learning