B2B-маркетинг · Стратегия · RevOps · ИИ Маркетинг с 2008 года
База знаний / Эксперименты / Эксперименты по конверсии
Experiment E001 · Conversion

Эксперименты по конверсии:
как улучшать воронку без случайных изменений

Хороший conversion experiment начинается не с идеи «поменяем кнопку». Сначала нужно определить конкретный переход, mechanism потери, primary metric и guardrail. Тогда эксперимент отвечает на вопрос, а не просто создаёт новую версию страницы, скрипта или процесса.

Conversion experiment
Stage Loss → Mechanism → Change → Primary Metric → Guardrail → Decision
Эксперимент должен менять один предполагаемый mechanism и заранее определять, какой evidence будет достаточным для Scale, Iterate или Kill.
Где экспериментировать

Шесть типов conversion problem

01 · FrictionСлишком трудно сделать следующий шагДлинная форма, сложный checkout, лишние approvals, неудобный booking или высокий commitment.
02 · RelevanceПользователь не узнаёт свою задачуMessage, offer или sales opening слишком общие для конкретного сегмента/контекста.
03 · ValueНедостаточно понятна ценностьСледующий шаг не обещает ясного результата относительно времени, денег или риска.
04 · TrustНедостаточно доказательствBuyer видит риск, но не получает case, reference, proof, гарантию или понятный process.
05 · TimingПравильный оффер появляется не вовремяКонтакт слишком ранний, поздний или не учитывает intent и buying stage.
06 · ProcessЛюди теряются между шагамиRouting, ownership, response, handoff или follow-up создают операционную потерю.
Experiment sequence

Как строится проверка conversion hypothesis

01StageГде происходит потеря.
02EvidenceКакие данные это подтверждают.
03MechanismПочему человек не идёт дальше.
04ChangeЧто именно меняем.
05MetricЧто должно измениться.
06GuardrailЧто нельзя ухудшить.
07DecisionScale / Iterate / Kill.
Conversion Experiment Builder

Сформулируйте тест так, чтобы он действительно чему-то научил

Один эксперимент — один основной mechanism. Если одновременно поменять traffic, offer, page и sales script, результат будет трудно интерпретировать.

Experiment Card

Соберите минимальный тест для одного stage conversion.

Один конкретный переход.
Не смешивайте разные contexts.
Метрики, recordings, interviews, cohorts, session data или sales notes.
Почему conversion теряется.
Одна основная метрика решения.
Конкретное intervention, связанное с mechanism.
Что нельзя ухудшить.
Критерий задаётся до запуска.
Evidence3

Насколько mechanism подтверждён?

слабосильно
Expected impact3

Насколько stage влияет на итоговый outcome?

малыйсильный
Speed to learn3

Как быстро накопится enough evidence?

долгобыстро
Isolation3

Насколько чисто можно изолировать change?

грязночисто
Experiment signalДля приоритизации, не probability
Decision stateResearch / Prepare / Run
MechanismЧто проверяем
Primary metricЧто определяет решение
Интерпретация

    Готовая карточка

    Conversion Experiment Brief

    Типовые тесты

    Примеры intervention по разным механизмам

    FrictionУменьшить commitmentСократить форму, этапы, обязательные поля или размер первого next step.
    RelevanceСегментировать messageОтдельный opening / offer / proof для конкретного ICP или use case.
    ValueИзменить framingПоказать конкретный outcome следующего шага вместо общего описания продукта.
    TrustДобавить нужный proofCase, reference, process transparency, guarantee или economic evidence в момент сомнения.
    TimingРазделить intentРазные CTA и follow-up для high-intent, research и not-now cohorts.
    ProcessУбрать handoff delayAuto-routing, ownership, response SLA или context card перед контактом.
    Measurement

    Что считать кроме primary conversion

    01Primary metricБлижайшая conversion, которую experiment должен изменить.
    02Downstream qualityСледующий stage conversion, revenue quality, retention или другой итог.
    03GuardrailQuality, margin, workload, refunds, complaints или другой protected outcome.
    04Segment effectСредний uplift может скрывать противоположный результат в разных cohorts.
    05Operational costConversion может вырасти ценой ручной работы, response time или sales effort.
    06Learning valueЧто новый результат говорит о mechanism даже при отрицательном uplift.
    Отрицательный результат не равен провалу. Если experiment хорошо изолировал mechanism, отрицательный результат уменьшил uncertainty и защитил компанию от более дорогого внедрения.
    Антипаттерны

    Что делает conversion experiment бесполезным

    Поменять всё сразуНевозможно понять, какой change создал результат и можно ли его повторить.
    Нет mechanismExperiment проверяет дизайн-вариант, но не отвечает, почему conversion должна измениться.
    Оптимизировать ближайшую метрикуLead rate растёт, но SQL quality и customer CAC ухудшаются.
    Смотреть только среднееEffect может существовать только в одном segment или source.
    Менять правила после запускаSuccess threshold и stop rule подстраиваются под желаемый результат.
    Запускать тест без baselineЕсли baseline нестабилен или неизвестен, интерпретировать effect почти невозможно.
    Принцип Growth OS

    Эксперимент по конверсии должен проверять механизм, а не просто вариант

    Начните с конкретного stage loss. Сформулируйте, почему человек или компания не идут дальше. Измените один механизм, защитите downstream quality guardrail и заранее задайте decision rule. Тогда любой результат — положительный или отрицательный — становится полезным evidence.