Для заданного количества обучающих примеров чем больше емкость модели, тем меньше ошибка обучения. В то же время, чем больше емкость модели, тем больше разница между ошибкой проверки и ошибкой обучения. Таким образом, существует оптимальная емкость, являющаяся лучшим компромиссом между этими двумя состояниями, что дает наименьшую ошибку проверки.
Как учится машина. Революция в области нейронных сетей и глубокого обучения
·
Ян Лекун
