B2B Growth · Strategy · Revenue · AI Automation Маркетинг с 2008 года
Telegram WhatsApp +7 926 423-65-08
Обсудить задачу
Словарь маркетинга

Метрики эксперимента (Experiment Metrics)

Коротко
Метрики эксперимента (Experiment Metrics) — заранее определённые primary, secondary и guardrail показатели, по которым оценивается эффект тестируемого изменения.

Типы метрик

ТипРоль
PrimaryГлавный критерий успеха
SecondaryДополнительные эффекты
GuardrailЧто не должно ухудшиться
DiagnosticПомогает объяснить механизм

Primary metric должна быть одна или очень немногочисленна

Если тест объявляется успешным при любом положительном сдвиге среди десятков показателей, растёт риск cherry-picking.

Что зафиксировать до запуска

  • Definition.
  • Direction.
  • MDE.
  • Observation window.
  • Guardrail thresholds.
  • Decision rule.

Связанные понятия

Итог
Experiment Metrics превращают тест в заранее определённую проверку гипотезы, а не поиск удобного результата после данных.
2026-09-21 08:45 Данные, аналитика, измерение и эксперименты