B2B Growth · Strategy · Revenue · AI Automation Маркетинг с 2008 года
Словарь маркетинга

Загрязнение эксперимента (Experiment Contamination)

Коротко
Загрязнение эксперимента (Experiment Contamination) — нарушение разделения treatment и control, из-за которого группы частично получают одинаковое воздействие или влияют друг на друга.

Типичные причины

  • Один пользователь попадает в обе группы.
  • Сотрудники обходят randomization.
  • Участники общаются между собой.
  • Одинаковая кампания достигает control через другой канал.
  • Общий аккаунт смешивает treatment и control.

Чем опасно

Contamination обычно уменьшает наблюдаемую разницу между группами и делает causal estimate менее надёжным.

Как снижать риск

РискМера
Cross-device mixingРандомизация по стабильному ID
B2B account spilloverRandomization на уровне account
Cross-channel exposureSuppression control group
Operational overrideСтрогие assignment rules

Связанные понятия

Итог
Experiment Contamination делает контрфактическое сравнение менее чистым и требует контроля ещё на этапе дизайна.
Данные, аналитика, измерение и эксперименты