Термин Статистика и A/B-тесты обновлено

Peeking: что это

Коротко

Peeking: многократная проверка результата по ходу теста с остановкой при первом p < α. Каждая проверка добавляет шанс случайно пересечь порог, и реальная ошибка первого рода становится в разы больше α.

Определение

Многократная проверка результата по ходу теста с остановкой при первом p < α. Каждая проверка добавляет шанс случайно пересечь порог, и реальная ошибка первого рода становится в разы больше α. Решения: одна проверка в конце или последовательный дизайн.

Запомните, а не прочитайте

В тренажёре карточка вернётся, когда начнёт забываться. А билеты по Статистика и A/B-тесты проверят, что термин понятен в деле.