ИНСТРУМЕНТ

Доверительный интервал конверсии

Два вопроса, один калькулятор. Есть данные — покажет, насколько цифре можно верить. Планируешь замер — посчитает, сколько выборки набрать под нужную точность. Интервал считается по Вильсону: он не разваливается на редких событиях.

// Примеры
Наблюдений Знаменатель: у скольких была возможность
Конверсий Числитель: сколько совершили действие
Уровень доверия Стандарт — 95%
// Результат
Конверсия
1.67%
оценка
Нижняя
0.71%
граница
Верхняя
3.84%
граница
Точность
±94%
относительная
// Где может лежать истинная конверсия
0%2%4%6%8%
Данных мало.
Интервал Вильсона (рабочий)[0.71% — 3.84%]
Интервал Вальда (школьная формула)[0.22% — 3.12%]
Проверка n·p ≥ 10 и n·(1−p) ≥ 105 / 295 — не пройдена
Ширина интервала3.13 п.п.
Вальд показан для сравнения — им пользоваться не надо. Когда проверка n·p ≥ 10 не пройдена, он занижает интервал и может уйти в отрицательные значения. Подробный разбор — в статье про доверительный интервал конверсии.
// Примеры
Ожидаемая конверсия, % Из прошлого периода или бенчмарка
Уровень доверия Стандарт — 95%
Трафик в день (необязательно) Чтобы перевести выборку в дни
Как задаём точность
±20% от самой конверсии
Нужная точность, ± % Рабочий минимум для отчёта — ±20%
// Сколько нужно набрать
Наблюдений
5 655
знаменатель
Конверсий
94
числитель
Интервал
1.36—2.03%
какой получится
Срок
при твоём трафике
Задай трафик в день, чтобы увидеть срок замера.
// А если точность другая
ТочностьКонверсийНаблюденийДней
Число конверсий почти не зависит от самой конверсии — оно определяется только нужной точностью. Меняется лишь трафик, который придётся прогнать, чтобы эти конверсии набрать. Почему так — в статье.