215 похожих чатов

Товарищи, а имеет ли смысл инициализировать веса сети (или любого

другого алгоритма) путём случайного перебора? Ну, то есть мы абсолютно случайно составляем 1000 комбинаций весов, смотрим, на каком наборе весов метрика ближе всего к минимуму и ставим начальные весе равные этому набору. На первый взгляд, это даёт лучшее начальное приближение и градиентный спуск будет быстрее сходиться и, может даже, в лучшую точку, чем если бы мы каким-то шумом инициализировали. Что думаете об этом?

3 ответов

9 просмотров

стартовать со всех 1000 комбинаций будет лучше

А что в книге не почитаешь? Вот в этой, например - http://gen.lib.rus.ec/book/index.php?md5=900D739E4B0305A0422F4DC23E0CC76C Там в начале хорошо про НС написано.

В случае с глубокими сетями выглядит бесполезной затеей

Похожие вопросы

Обсуждают сегодня

Добрый вечер. Есть вопрос, а может и предложение. Был у меня диалог в другой группе о делфи и я задался вопросом: "А нельзя ли в делфи цвет //коментария и {комментария} сде...
Kraszx
24
Всем привет! Подскажи, пожалуйста, как передать в TComboBox сразу значение и id записи. На Delphi я делал так: ComboBox1.Items.AddObject('Какое-то значение', Pointer(id запис...
Евгений
13
Мдя, прикол, боевая сборка запускается (именно под отладчиком) после F9 примерно полторы минуты (97 секунд если быть точным). Начал копать - проблема детектится сразу - зависа...
Александр (Rouse_) Багель
38
Здравствуйте, вопрос по структурам данных. Были у вас случаи, когда пришлось писать деревья или двунаправленные списки?
/ /
50
Товарищи, кто работа с iphelper? Или может я в самой логике ошибки фигачу, не пойму.... var ifTable : PMIB_IFTABLE; size, corSize: DWORD; Buffer ...
Warfarellen
4
я так понимаю, я так подозреваю, что создание такого плагина для человека, кто умеет писать плагины для делфи потребует минут 5-10 времени. но это мое подозрение. хотелось бы ...
Kraszx
7
Коллеги, добрый вечер. Создаю коллекцию от TFPGMap, ключ - перечисление, значение - целое. Нужно отсортировать коллекцию по значению. Как это можно сделать?
Kirill Filippenok
11
Скажи а ты когда этот канал создавал ты уже дельфи не любил, или это со временем пришло?
Роман Лях (rgreat)
18
Ребята, всем привет. Подскажите, пожалуйста, можно ли как-то через бота понять, что этого бота добавили в группу\канал и выдали ему права администратора?
Artem Stormageddon
9
Привет, такой вопросик появился кажется ли вам что Rust слишком сложный/строгий для высокоуровневого программирования и слишком "безопасный"/строгий для низкоуровневого?
Крокант
10
Карта сайта