Докатился до переобучения — Товарищи! Позвольте зачитать бу | Жажда знаний
Докатился до переобучения
— Товарищи! Позвольте зачитать бумагу, которая вчера пришла из милиции. Борщев, а ты встань и выходи на сцену, чтобы все тебя видели!
Борщев нехотя поднялся по ступенькам.
— Итак. 22.05.2065 в 22:00, занимаясь обработкой данных, Борщев А. Н. допустил неподобающее переобучение модели "Полином-42С", зарегистрированной под номером 328764900/2065 в реестре Росмоделирования. Данное деяние подпадает под статью 20.1 КоАП РФ и должно быть рассмотрено на собрании комсомольской ячейки дома.
По залу пошел легкий шепот. Председатель налил воды из графина и отпил.
— И как только ты, Борщев, все успеваешь? И модели обучать, и на Kaggle развлекаться?
— Товарищи! Есть желающие высказаться? Людмила, давай, — предложил председатель.
— Борщев! Ну ты сам-то подумай! У тебя ведь не модель получилась, а попугай! Она просто выучила все значения, и все! Она же не поняла в них ничего! Как она предсказывать-то будет?
— Зато расхождений с реальными данными нет. Не то что у некоторых, — Борщев старался выглядеть невозмутимо.
— А как же простота? — взмахнула руками Людмила. — У тебя же в уравнении коэффициентов больше, чем данных! А устойчивость? Посмотри какая жуткая осцилляция! Шаг в сторону от твоих данных и модель мотает, как пьянчугу под Новый год!
— Но ошибки-то — ноль, нет ее! — Борщев показал язык.
— А шум в данных у тебя тоже безошибочно предсказывается? Ах, ну что с тобой говорить! — Людмила вышла, махнув рукой.
— Это что же делается, товарищи? — не унимался Борщев. — Недообучил — плохо. Переобучил — ещё хуже! С таким подходом у вас любой специалист сорвется!
— А ты, Афанасий, не ерничай, а кросс-валидацию проводи, — примирительно заявил председатель. — Дели, так сказать, данные на обучающие и тестовые. Спрячь от своего "Полинома" часть данных и проверяй, как он их предсказывает. По мере, так сказать, обучения.
— Ну а если у меня данных кот наплакал? Как я эти слезы делить-то буду?
— Ну тогда модель бери простую. Куда ты в 42-ю степень полез? Или регуляризацию используй. Штрафуй свою модель за сложность, так сказать, — подытожил председатель. — Как будем на Афанасия воздействовать, товарищи?
— Я предлагаю Борщева уволить, — сказал кто-то с задних рядов.
Зал ахнул и обернулся.
