У тебя было 20 нейронов в слое. Ты отключил 10. Суммарная активация слоя упала вдвое по сравнению с вариантом, где весь слой работает. Если так и будешь обучать, то на тесте твоя модель охренеет от того, что суммарная активация слоя вдвое больше, чем она привыкла. Как это хэндлить? При тренировке вдвое увеличиваешь активации не выключенных нейронов
Обсуждают сегодня