ClickHouse не тормозит
nginx_ru
Data Science Chat
DBA - русскоговорящее соо...
Tarantool
☁️ AWS_RU
PostgreSQL + 1C + Linux
MongoDB Russian
Yandex Cloud - Официальны...
Big Data Science :: AI / ...
dbGeeks
React: русскоязычное сооб...
opencv_ru
catboost_ru
Kaggle
ScyllaDB
Всем привет. У меня вопрос. У меня модель оттока соотоветственно
с дисбалансов 1:150. Фичей 270шт. Подобрал в catboost class_weights=[1, 100] при котором f1=0.3. При этом если например ставить class_weights=[1, 150] то f1 резко падает до 0.1.
Но вопрос не про это. Когда я по feature_importance срезаю последние 50 или 100 фичей, то f1 так же падает до 0.1. Это какая-то не устойчивая модель или это норм вариант?
4 ответов
Сделайте предикты для всего набора. N раз возьмите подвыборки из K элементов через random.sample и на них посчитайте метрику. Постройте гистограмму где по иксу будут скоры, а по игрику их количество
Алексей
Автор вопроса
Сделайте предикты для всего набора. N раз возьмите...
Ещё осложняется, что у меня единиц всего 15000. Как мне кажется мало. А почему с фига фичами так? Это норм?
Ещё осложняется, что у меня единиц всего 15000. К...
Всякое может быть, особенно зависит от параметров и выбросов в тесте. 15к действительно мало, это получется train + test?
Похожие вопросы
Обсуждают сегодня