Почему +0.3% к ROC‑AUC почти всегда шум, и как это проверить

16.06.2026 19:15:51 | Хабр

Хабы: Блог компании OTUS, Машинное обучение, Python, Программирование

ROC‑AUC вырос с 0,871 до 0,874 — модель стала лучше или вам просто повезло с разбиением?

Разберём, почему прирост на третьем знаке часто оказывается шумом, как измерить разброс метрики и сравнивать модели так, чтобы «улучшение» не исчезло на свежих данных.

Подробнее

Читайте также

Учёные СГУ создали компьютерную модель для синтеза искусственных белков
16.06.2026 19:15:00 | ferra.ru

ASUS выпустила ПК с 748 ГБ памяти для процессора и видеокарты
16.06.2026 18:36:51 | ferra.ru

«Шереметьево» полностью перешло на российский софт для управления багажом
16.06.2026 18:30:00 | ferra.ru

Reuters: Binance рискует потерять доступ к рынку ЕС — ей надо получить лицензию, но заявку на неё регулятор планирует отклонить
16.06.2026 18:19:09 | vc.ru

Xbox закроет студию, которая неделю назад анонсировала новую игру
16.06.2026 17:55:08 | ferra.ru

«Калашников» отгрузил очередную партию автоматов АК-12 образца 2023 года
16.06.2026 17:45:00 | ferra.ru

Выступление главы Google прервали акцией протеста из-за контракта с Израилем
16.06.2026 17:35:30 | ferra.ru

Commodore, один из первых прозводителей компьютеров, представил телефон-«раскладушку» по цене от $499 — без соцсетей, но с Uber и Spotify
16.06.2026 17:22:27 | vc.ru

Почта на @tut.by перестала работать: что произошло и как мигрировать на свой домен
16.06.2026 17:20:42 | Хабр

LLM, персональные данные и 152-ФЗ
16.06.2026 17:16:06 | Хабр

Продавцы Wildberries начали подавать иски к маркетплейсу из-за невыплаченных компенсаций по программе снижения комиссий — Shopper’s
16.06.2026 17:00:21 | vc.ru

Самозанятые в России получили доступ к бизнес-инструментам в мессенджере «Макс»
16.06.2026 17:00:00 | ferra.ru

Московский метрополитен перейдёт на российскую ОС Astra Linux за три года
16.06.2026 16:15:00 | ferra.ru

Заменит ли умная строка традиционные графические интерфейсы? История смены парадигм в интерфейсостроении
16.06.2026 15:58:49 | Хабр

ID, token, UUID и slug: в чём разница и почему их нельзя мешать
16.06.2026 15:53:36 | Хабр

[Перевод] «Чёрная дыра» в вашем сознании заставляет вас видеть уникальную версию реальности, утверждают нейробиологи
16.06.2026 15:41:09 | Хабр

Astra Server Core: платформенный подход к замещению инфраструктуры Microsoft
16.06.2026 15:38:07 | Хабр

200 Мп камера, Dimensity 9500: Vivo раскрыла характеристики складного X Fold 6
16.06.2026 15:35:31 | ferra.ru

Ограничения на продажу бензина в России: где и почему вводят лимиты и как реагируют власти
16.06.2026 15:34:54 | vc.ru

[Перевод] Новые возможности Hibernate 7.4
16.06.2026 15:22:32 | Хабр

Мультистейдж-сборка на Docker BuildX: мифы и реальность
16.06.2026 15:13:30 | Хабр

Почему портал самообслуживания не работает — и при чём тут когнитивная нагрузка
16.06.2026 15:11:48 | Хабр

Единый оркестратор инфраструктуры: что происходит под капотом Digital Q.AppServer
16.06.2026 15:04:54 | Хабр

12 лет доказываю, что мой товар легален: и всё равно зарабатываю меньше программиста
16.06.2026 15:03:16 | Хабр

Нет, собака на них не реагирует: как я делаю носки из конопли на 2 млн в месяц
16.06.2026 15:03:16 | Хабр

От сервиса к партнерству: как перестроить архитектуру продуктовой аналитики
16.06.2026 14:38:43 | Хабр

[Перевод] LLM собрала IndexedDB с нуля: 1208 тестов, SQLite и несколько неприятных сюрпризов
16.06.2026 14:33:21 | Хабр

MyDockFinder: превращаем Windows в macOS
16.06.2026 14:28:24 | Хабр

[Перевод] Banned Book Library
16.06.2026 14:27:19 | Хабр

Линия в дизайне: как направление управляет вниманием и ощущением движения
16.06.2026 14:14:47 | Хабр

Быстрое погружение или как получить максимальную эффективность
16.06.2026 13:47:11 | Хабр

Midea разыграет поездку в Китай и iPhone в новой федеральной акции
16.06.2026 13:44:05 | ferra.ru

В Google Earth появился «авиасимулятор»
16.06.2026 13:35:40 | ferra.ru

FT: чистый убыток OpenAI в 2025 году составил $39 млрд — год к году он вырос почти в восемь раз
16.06.2026 13:31:23 | vc.ru

Обзор корпуса Gamemax F36: компоновка с верхним блоком питания снова в моде?
16.06.2026 13:17:53 | Хабр

Смотреть все

НОВОСТИ

В России отреагировали на санкции Норвегии
27.07.2026 03:55:16 | Lenta.ru

Командир Легион рассказал об увеличении времени работы БПЛА-разведчиков
27.07.2026 03:52:14 | ТАСС

В Посольстве России заявили о тревоге эстонцев от появления украинских дронов
27.07.2026 03:51:00 | Life.ru

США изменят подход к радиации
27.07.2026 03:49:52 | Lenta.ru

Эксперт Коложвари спрогнозировал гонку ставок по вкладам из-за цифрового рубля
27.07.2026 03:48:32 | ТАСС

В двух районах Калмыкии тушат степные пожары
27.07.2026 03:48:30 | ТАСС

"Ведомости": Минцифры работает над мерами поддержки для цифровых двойников
27.07.2026 03:45:50 | ТАСС

Сестра Ким Чен Ына Ким Ё заявила о постоянном обновлении ядерного щита КНДР
27.07.2026 03:43:00 | Life.ru

Стало известно о планах Лерчек поехать в Белград
27.07.2026 03:38:00 | Lenta.ru

В группировке "Центр" рассказали о жалобах ВСУ на удары дронов РФ у Белицкого
27.07.2026 03:34:45 | ТАСС

В Иране сделали предупреждение «нахлебнику в Киеве»
27.07.2026 03:31:57 | Lenta.ru

В "Центре" рассказали о попытке бегства блокированных в Белицком "азовцев"
27.07.2026 03:31:56 | ТАСС

Аэропорты Калуги и Нижнего Новгорода приостановили прием и выпуск самолетов
27.07.2026 03:30:32 | ТАСС

Кузнецова назвала День памяти детей Донбасса "приговором" пособникам Киева
27.07.2026 03:30:12 | ТАСС

Порномодель нашла необычный способ потратить доход от эротического контента
27.07.2026 03:30:03 | Lenta.ru

Азизи: После атаки на иранское судно Киев пополнил список тех, кто просчитался
27.07.2026 03:29:00 | Российская Газета

Белый дом испугался публикации данных о запасах ракет-перехватчиков
27.07.2026 03:28:00 | Life.ru

Песков: власти России принимают меры для снижения опасности от атак ВСУ
27.07.2026 03:25:51 | Коммерсантъ

Раскрыто число выдворенных из России иностранцев
27.07.2026 03:23:38 | Lenta.ru

В Белгороде потушили возгорания в домах после атаки БПЛА
27.07.2026 03:22:53 | ТАСС

Назван максимальный размер первых выплат больничных самозанятым
27.07.2026 03:17:30 | ТАСС

Эксперт Балынин рассказал, как самозанятым получать больничные в 35 тыс. рублей
27.07.2026 03:17:30 | ТАСС

Спасшийся альпинист назвал неверный прогноз погоды причиной трагедии на Эльбрусе
27.07.2026 03:17:19 | Life.ru

В Краснодаре и некоторых муниципалитетах края объявили беспилотную опасность
27.07.2026 03:15:44 | ТАСС

«Смрадный русофобский плевок». Медведев высказался о словах нового главкома ВСУ про россиян
27.07.2026 03:14:36 | Lenta.ru

Иранский депутат Азизи пригрозил Украине ответом за удар по судну
27.07.2026 03:09:57 | ТАСС

Назван возраст пика профессионального выгорания в киберспорте
27.07.2026 03:07:41 | ТАСС

Эксперт рассказал, когда наступает профессиональное выгорание в киберспорте
27.07.2026 03:07:41 | ТАСС

Пленные диверсанты ВСУ выдали разведчикам РФ маршруты сослуживцев у Белицкого
27.07.2026 03:04:22 | ТАСС

Боец Апостол: пленные диверсанты выдали маршруты и координаты ВСУ у Белицкого
27.07.2026 03:04:22 | ТАСС

"Ведомости": из России за полгода выдворили почти 44 тыс. иностранцев
27.07.2026 03:03:49 | ТАСС

В Марий Эл объявили беспилотную опасность
27.07.2026 03:00:53 | ТАСС

Беспилотную опасность объявили в Марий Эл
27.07.2026 03:00:53 | ТАСС

Раскрыт простой лайфхак для быстрого засыпания
27.07.2026 03:00:08 | Lenta.ru

Не превращаем квартиру в склад: Как избежать главных ошибок при хранении сезонных вещей
27.07.2026 03:00:00 | Life.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro