HADI-цикл
Итерация «гипотеза → действие → данные → выводы» (Hypothesis, Action, Data, Insights). Вывод предыдущей итерации становится входом следующей.
Продуктовая гипотеза
Причинное предположение о том, как конкретное изменение повлияет на наблюдаемое поведение выбранной аудитории в заданных условиях.
Предсказание
Наблюдаемое следствие, которое команда ожидает увидеть, если гипотеза полезна для решения. Связывает предположение с метрикой и порогом.
Эксперимент
Заранее описанное действие и способ наблюдения, позволяющие различить варианты решения. Не каждое исследование является A/B-тестом.
Вмешательство
Конкретное изменение, воздействие или предложение, причинный эффект которого проверяет команда.
Исходное значение (baseline)
Измеренное состояние до вмешательства или подходящее значение для сравнения.
Основная метрика
Показатель, по которому принимается решение о результате. Формула, источник, период и порог задаются до запуска.
Защитная метрика
Показатель нежелательного эффекта. Улучшение основной метрики не разрешает масштабирование, если защитная вышла за допустимую границу.
Порог решения
Заранее заданная граница, связывающая наблюдение с одним из следующих действий команды.
Данные поддерживают гипотезу
Наблюдение достигло заранее заданного порога в указанной выборке и условиях. Это не означает, что гипотеза доказана для всех аудиторий и периодов.
Данные опровергают гипотезу
Наблюдение достигло заранее заданного отрицательного порога или показало несовместимое с предсказанием поведение.
Данных недостаточно
Качество, объём или устройство проверки не позволяют различить варианты решения. Это результат процесса, а не скрытое подтверждение.
Контрольная точка человека (human gate)
Место, где уполномоченный человек утверждает протокол, контакт с клиентами, расходы, изменение рабочей среды или итоговое решение.
Область применимости
Аудитория, условия, период и способ отбора, для которых собраны данные. Вывод не переносится за эту границу автоматически.