215 похожих чатов

Чем более данные за какой-то день похожи на обучающую выборку,

тем лучше - прямой путь в неприятный новый мир боли
почему?

11 ответов

11 просмотров

Ну ты как себе представляешь свою работу в такой день? Пойти переобучать модель с учётом нового - горизонтом в 1 день лол - баланса классов?)

Andrey- Автор вопроса

я представляю, что модель отработает с предсказуемым качеством, без сюрпризов. Поток сознания про переобучать с горизонтом не распарсил.

Я недавно натренил модель распознавания движений и вне зависимости от параметров она давала точность 95+ процентов. Пока не додумался сделать тест достаточно отличающийся от трейна. Мой вывод (не знаю, какой ваш) - трейн должен быть максимально похож на тест, но тест должен должен быть достаточно разнородный, вплоть до того, чтобы быть похожим на (все!) данные в проде P.s. естественно, пример притянут за уши, других в последнее время не было

Andrey- Автор вопроса
Andrey
я представляю, что модель отработает с предсказуем...

Имелось в виду, как выглядит работа дата сайнсера в день, когда баланс классов стал отличаться от прода в предположении "чем более данные за какой-то день похожи на обучающую выборку, тем лучше"

Andrey- Автор вопроса

можно получить ответ без встречных риторических вопросов и зафлуживания?

Andrey
можно получить ответ без встречных риторических во...

Исходя из твоих предыдущих сообщений ("нужно отлавливать смещение баланса классов на мониторинге", "нужно, чтобы трейн был репрезентативен продовому тесту"), я сделал предположение о том, что ты пойдёшь переобучать модель, подстроив баланс классов под новый, что делает тебя оператором моделей машинного обучения, а не дата сайнтистом Если же ты не побежишь перестраивать модель, то зачем вообще была телега про связь балансов на трейне и продовом тесте? Ну окей, будешь грустить сидеть значит, что так получилось В любом случае выходит боль

Andrey- Автор вопроса
Superhero Yakovlev
Исходя из твоих предыдущих сообщений ("нужно отлав...

Я писал про ситуацию, когда ничего не поменялось и прод 100% соответствует тесту и трейну. И хочу узнать, в чем ужас именно этой ситуации

Похожие вопросы

Обсуждают сегодня

подскажите пожалуйста, как мне освободить результат записанный в переменную result? в чем проблема подскажите если МОЖЕТЕ?
Михаил Helper
28
есть тут кто-то , кто только начал изучать си? если проходите курс на степике или как-то сами изучаете, пишите, может, скооперируемся?..
Eule
25
Коллеги, здравствуйте! А можно узнать ваше мнение относительно Wolfram Mathematica vs Julia? Просто у меня стоит выбор между тем, чтобы продолжить преподавать Wolfram Mathemat...
Илья Гаража
10
Обновленный chat тестили уже господа? Готовимся на заводы ? Простой проект на ларавель собирает за 1 ответ..
Jacov Borisov
14
А если без шуток, на чем десктоп сейчас пишут кроссплатформенный (ну чтобы с минимальным допиливанием под каждую платформу) и чтобы хорошая производительность софта была. Толь...
🐈
9
коллеги привет. уже второй день бьемся об заклад с одной ошибкой, может вы сталкивались с таки странным поведением? есть тестовый сервер, на который паблишим релизную версию W...
Magzhan
11
кому не сложно распишите пожалуйста для какой цели тут вот эти скобки и в них пихается указатель?
Михаил Helper
15
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
На одной бирже предложили обновить modx evo 1.0.1 Как думаете, стоит браться?
Artem
9
Такс, блин, таки кто-то знает, каким образом работают макросы stdin/stdout/stderr? Я влез в stdio.h, там определения нет, отладил через асмокод - вызывается функция со странны...
The Bird of Hermes
18
Карта сайта