Операция выполнена!

info@vsetut.pro

Стать автором

Вернуться

4 ошибки в A/B‑тестах, из‑за которых случайный шум выглядит как эффект

16.07.2026 08:20:35 | Хабр

Хабы: Блог компании OTUS, Анализ и проектирование систем, Программирование, Python, Управление продуктом

Сплиттер работает корректно, метрика посчитана, а p‑value уверенно опустился ниже 0,05 — результат кажется готовым к раскатке. Однако ошибка в оценке дисперсии способна превратить случайное различие в статистически значимое.

В этой статье разберём четыре типовых сценария, в которых тест подтверждает эффект, которого в данных нет, и посмотрим, как исправить расчёты.

Читать далее

Подробнее

Читайте также

Два фейла и одна идея за месяцПривет
16.07.2026 08:18:21 | Хабр

Книга: «Думай как аналитик. Статистика и данные с примерами на Python. 3-е изд.»
16.07.2026 08:13:19 | Хабр

Моделирование угроз безопасности информации объектов КИИ
16.07.2026 08:07:06 | Хабр

Зачем учить бинарный поиск, если платят за покраску кнопок
16.07.2026 08:00:33 | Хабр

Linux Incident Response: системный подход. Часть 2
16.07.2026 08:00:33 | Хабр

Домашние дела и когнитивная перегрузка
16.07.2026 07:56:27 | Хабр

Esp-Monitor: архитектура и развертывание self-hosted IoT-платформы для микроконтроллеров ESP
16.07.2026 07:55:31 | Хабр

Как утренний кофе: почему ИТ незаметно теряет деньги на технике
16.07.2026 07:50:43 | Хабр

Путь повышения КПД атомной электростанции втрое. Почему формула Карно не всегда верна. Путь к альтернативной энергетике
16.07.2026 07:50:42 | Хабр

«Темная фабрика» Xiaomi: как устроена роботизированная сборка смартфонов
16.07.2026 07:46:02 | Хабр

Взламываем механизм тревоги в коже
16.07.2026 07:45:14 | Хабр

Ты уже написал свой Джеймикс, только плохой
16.07.2026 07:44:48 | Хабр

[Перевод] Можно ли передавать воспоминания другим — или есть их?
16.07.2026 07:38:31 | Хабр

Российские ученые восстановили утраченные надписи на документах XIV—XV вв. еков
16.07.2026 07:13:08 | ferra.ru

Как открыть ООО, когда перерос ИП: что меняется в налогах, выводе денег и рисках
16.07.2026 07:00:27 | Хабр

Я сыграл в 10 инди хорроров и понял что мы забыли о страхе
16.07.2026 07:00:27 | Хабр

От телекома до пассажирских перевозок: два ПАК для мониторинга и удаленного управления
16.07.2026 07:00:26 | Хабр

Конец «крестного отца интеллектуальной собственности»: почему IBM добровольно отказалась от короны патентного короля
16.07.2026 06:40:38 | Хабр

Система для научного исследования в Obsidian и Zotero: база знаний из сотен источников и анализ данных
16.07.2026 06:37:25 | Хабр

[Перевод] Проектируем с нуля калькулятор на FPGA. Часть 7: микрокод для самодельного CPU
16.07.2026 06:37:02 | Хабр

Рейтинг маркетплейсов по качеству поиска. Июль 2026
16.07.2026 06:32:51 | Хабр

Google Картинки отметили 25-летие большим обновлением
16.07.2026 06:23:54 | ferra.ru

Как научить 1С за две недели или что не так со студенческой практикой и ИТ-образованием
16.07.2026 06:07:20 | Хабр

Тензор пространства для аквариумных рыбок
16.07.2026 05:58:19 | Хабр

ИИ зависимость и лекарство от prompt injection (в том числе от системного промпта провайдера)
16.07.2026 05:34:54 | Хабр

Заменит ли Джун Сеньора, если дать ему ИИ?
16.07.2026 05:21:46 | Хабр

Про музеи. Вторая серия
16.07.2026 05:21:26 | Хабр

Уберизация строительства
16.07.2026 05:05:15 | Хабр

«Норникель» сообщил о перевыполнении обязательств по проекту «Чистый воздух»
16.07.2026 00:25:08 | ferra.ru

В автобусах Москвы сохранят оплату банковской картой через валидаторы
15.07.2026 23:59:35 | ferra.ru

«Ростех» завершил строительство арктического комбината для добычи платины
15.07.2026 23:45:08 | ferra.ru

Может ли айтишник обеспечить себе уверенную пенсию: обзор стратегий
15.07.2026 23:00:51 | Хабр

В России создали наночастицы для МРТ
15.07.2026 22:36:27 | ferra.ru

Google продолжила отвязывать ИИ в смартфонах Pixel от Интернета
15.07.2026 22:23:54 | ferra.ru

Внезапный ProIT Fest 2026
15.07.2026 22:11:31 | Хабр

Смотреть все

НОВОСТИ

ВОЗ обнародовала рекомендации по эффективной профилактике рака
18.07.2026 04:25:56 | Life.ru

На Украине с января более 1,1 тыс. раз пытались вывезти военнообязанных за рубеж
18.07.2026 04:22:12 | ТАСС

Украинскому дуэту "Кролики" закрыли въезд в Латвию
18.07.2026 04:20:00 | Российская Газета

Продюсер Стивен Мао назвал невозможной отмену артистов и спортсменов России
18.07.2026 04:19:13 | ТАСС

Страна размером XL: Более 600 тысяч британцев не могут работать из-за ожирения
18.07.2026 04:15:48 | Life.ru

Беспилотники перехватили на подлете к Москве
18.07.2026 04:14:00 | Lenta.ru

Вблизи Москвы сбиты семь беспилотников
18.07.2026 04:13:58 | Коммерсантъ

В России ограничили грузоперевозки для некоторых фур
18.07.2026 04:09:56 | Lenta.ru

КСИР заявил об ударах по американским объектам в Иордании, Кувейте и Бахрейне
18.07.2026 04:09:44 | Life.ru

18 июля расчёты ПВО сбили семь дронов, летевших на Москву
18.07.2026 04:04:38 | Life.ru

Боец Пляшник: ВСУ раскрыли свои позиции, пытаясь поймать собственный дрон
18.07.2026 04:03:54 | ТАСС

Боец Пляшник: ВСУ раскрыли свои позиции, когда пытались поймать собственный дрон
18.07.2026 04:03:54 | ТАСС

Марочко сообщил о практически полном контроле Ровного ВС РФ
18.07.2026 04:01:47 | ТАСС

В США рассказали о неразрешимой проблеме Украины
18.07.2026 03:59:40 | Lenta.ru

В Госдуме высказались о «лезущей в Африку» Украине
18.07.2026 03:59:34 | Lenta.ru

Дарственная или завещание: Юрист объяснила, что выгоднее для наследников и в каком случае это оспорят
18.07.2026 03:58:44 | Life.ru

Семь дронов сбили на подлете к Москве
18.07.2026 03:56:08 | РБК

Вышел финальный релизный трейлер масштабного обновления Scrap Mechanic 1.0 под названием Drilling Thunder
18.07.2026 03:53:15 | PlayGround.ru

Украинский беспилотник попал в жилой дом во Владимире, возник пожар
18.07.2026 03:53:05 | Life.ru

Во Владимире беспилотник ударил по многоквартирному дому
18.07.2026 03:52:00 | Коммерсантъ

В ЛНР считают убийство инженера попыткой Киева дестабилизировать работу ЗАЭС
18.07.2026 03:50:37 | ТАСС

В ЛНР заявили, что Киев хотел дестабилизировать работу ЗАЭС убийством инженера
18.07.2026 03:50:37 | ТАСС

Во Владимире загорелся жилой дом после попадания беспилотника
18.07.2026 03:48:25 | РБК

Налоговая заблокировала счета компании Басты
18.07.2026 03:45:00 | Lenta.ru

Трамп оценил скандал с дисквалификацией футболиста сборной США на ЧМ
18.07.2026 03:44:01 | Lenta.ru

Армия Ирана сообщила об ударах по объектам США в Кувейте и Иордании
18.07.2026 03:43:32 | РБК

Во Владимире БПЛА попал в многоквартирный дом
18.07.2026 03:40:34 | ТАСС

Россиян предупредили по поводу продажи квартиры
18.07.2026 03:40:30 | Lenta.ru

Беспилотник попал в многоэтажный дом в российском городе
18.07.2026 03:36:00 | Lenta.ru

Боец Пляшник: солдаты ВСУ пришли на российские позиции для ротации
18.07.2026 03:35:05 | ТАСС

Взрывы прогремели в Сумах
18.07.2026 03:34:00 | Lenta.ru

Депутат Новичков: Украина по советам Запада "лезет" в дела стран Африки
18.07.2026 03:32:30 | ТАСС

Белый дом обсудит с главой ФИФА риски проведения финала ЧМ-2026 на фоне пожаров
18.07.2026 03:31:20 | Life.ru

В ООН заявили о снижении активности "Аль-Каида" в Афганистане
18.07.2026 03:31:20 | ТАСС

Пушилин: Армия России улучшила позиции на Славянском направлении
18.07.2026 03:30:48 | Life.ru

Все новости

ВСЕ НОВОСТИ

ПИШИТЕ

Техническая поддержка проекта ВсеТут

info@vsetut.pro

Copyright © 2026 - vsetut.pro