A/B-тестыЛовушки A/B-тестовMediumPremium~15 мин

Восемь метрик: одна «выстрелила»

// Условие

Тест нового каталога. Целевая метрика не изменилась, но команда смотрит в дашборде ещё 7 второстепенных — и нашла: «метрика m5 выросла, p < 0.05! Пишем в отчёт как победу». Все 8 метрик — перед тобой, агрегатами.

Что нужно
Посчитай p-value по каждой из 8 метрик. Сохрани в result — dict с ключами n_significant (сколько метрик с p < 0.05) и n_significant_bonferroni (сколько после поправки Бонферрони, порог 0.05/8).

// Данные

df: metric (m1–m8), group (A/B), users, conversions — по строке на метрику×группу
▶ Решить в A/B-тренажёре

// Решение

🔒

Решение, подсказки и автопроверка этой задачи — по подписке Premium. Вместе с ней открываются все премиум-задачи трёх тренажёров: SQL, pandas и A/B.

★ Открыть Premium

// Похожие задачи

// Разобраться в теме

→ Гайд по A/B-тестам