Shilin Digital авторский блог Михаил Шилин
Все статьи Growth

Как настроить непрерывный процесс тестирования гипотез

У тебя в компании может быть десяток хороших идей, а проверяется обычно одна. Остальные лежат в таблице, спорят за приоритет на встречах и постепенно превращаются в кладбище инициатив.

Проблема чаще не в отсутствии гипотез. Проблема в том, что твоя команда не договорилась, как выбирать следующую, кто принимает решение и что происходит после теста. В итоге маркетинг ждёт разработку, продукт ждёт аналитику, а руководитель снова выбирает задачу на глаз.

Непрерывный процесс тестирования — это не бесконечный поток экспериментов ради активности. Это понятный цикл: собрать идеи, сравнить их по единым критериям, запустить тест, разобрать результат и вернуть выводы в следующий раунд приоритизации. Дальше разберём, из чего складывается такой цикл и как выбрать метод приоритизации без долгих споров.

Из чего состоит непрерывный цикл

Удобно разделить процесс на семь шагов:

  1. собрать и описать гипотезы;
  2. проверить, что они связаны с реальной проблемой;
  3. расставить приоритеты;
  4. выбрать тест и определить метрику;
  5. провести эксперимент;
  6. принять решение по результату;
  7. сохранить вывод и обновить backlog.

Если ты пропустишь последний шаг, команда каждый месяц обсуждает те же идеи заново. Если пропустишь первый — приоритеты превращаются в соревнование самых громких голосов.

Сначала приведи гипотезы к одному формату

Гипотеза должна быть короткой и проверяемой:

Если мы сделаем X для аудитории Y, метрика Z изменится в направлении N, потому что причина проблемы — C.

Тебе не обязательно знать точное значение заранее. Но нужно понимать, что именно изменится и по каким данным ты это проверишь.

Для каждой идеи зафиксируй:

  • проблему и сегмент;
  • предлагаемое изменение;
  • целевую метрику;
  • способ проверки;
  • необходимые ресурсы;
  • ограничения и риски.

Фраза «сделать новый лендинг, чтобы стало больше продаж» пока не гипотеза. В ней нет аудитории, механики и критерия успеха. После уточнения может получиться: «если добавить на страницу калькулятор стоимости для новых посетителей из поиска, доля заявок вырастет, потому что людям сейчас не хватает понимания бюджета».

MoSCoW: когда нужно быстро договориться

MoSCoW пригодится, когда твоей команде нужно разложить идеи по срочности и обязательности:

  • Must have — без этого нельзя выполнить обязательство или запустить важный процесс;
  • Should have — значимо, но запуск можно пережить без этого;
  • Could have — полезно, если останутся ресурсы;
  • Won’t have now — сознательно не берём в текущий цикл.

Это не математическая модель и не прогноз эффекта. Метод помогает проговорить ограничения. Ошибка — назвать Must have все идеи, которые кому-то нравятся. Если в категории «обязательно» у тебя оказалось двадцать пунктов, метод не сработал: команда просто переименовала backlog.

RICE: когда есть хотя бы грубые оценки

RICE помогает сравнивать идеи по четырём параметрам:

  • Reach — сколько пользователей или операций затронет тест;
  • Impact — насколько сильным может быть эффект;
  • Confidence — насколько надёжны твои оценки;
  • Effort — сколько времени и ресурсов займёт работа.

Формула:

RICE = (Reach × Impact × Confidence) / Effort

Важно не притворяться точнее, чем ты есть на самом деле. Reach можно оценивать количеством пользователей за период, Impact — по согласованной шкале, Confidence — процентом уверенности, Effort — в человеко-неделях или другой понятной единице.

Если одна твоя команда ставит Effort в часах, а другая — в условных «сложностях», итоговая сортировка будет красивой, но бессмысленной. Сначала договоритесь о шкалах, потом считайте.

Взвешенная модель: когда критериев больше четырёх

Weighted Scoring Model подходит для сложных решений. Например, ты можешь оценивать гипотезы по:

  • потенциальному влиянию на бизнес;
  • ценности для пользователя;
  • соответствию стратегии;
  • риску;
  • стоимости и сложности;
  • скорости получения результата.

Каждому критерию присваивается вес. Затем команда ставит оценку гипотезе и считает итоговый балл.

Здесь есть две типичные ловушки. Первая — придумать слишком много критериев. Вторая — забыть, что веса отражают договорённость команды, а не объективную истину. Модель делает разговор прозрачнее, но не отменяет проверки идеи.

Метод 100 баллов: когда нужен коллективный сигнал

Каждому участнику дают фиксированный запас баллов, например 100, и предлагают распределить его между идеями. Метод показывает, что твоя команда считает важным в сумме.

Он хорошо работает как вход для обсуждения, но плохо подходит как единственный фильтр. Популярная идея может получить много баллов и при этом оказаться дорогой, рискованной или плохо измеримой.

После голосования спроси себя: почему эта гипотеза получила баллы, какой риск ты покупаешь и какой тест даст ответ быстрее всего.

User Story Mapping: не рейтинг, а карта пользовательского пути

User Story Mapping часто называют методом приоритизации, но точнее считать его способом увидеть продуктовый путь. Ты раскладываешь действия пользователя по этапам, а затем выделяешь минимальный срез, который имеет смысл проверить первым.

Это особенно полезно, когда гипотеза затрагивает несколько экранов или команд. Карта помогает не забыть важный шаг и понять, где действительно находится изменение.

Но сама карта не отвечает, какая гипотеза принесёт больше эффекта. Для этого её можно соединить с RICE или взвешенной оценкой.

Почему пирамиду Маслоу стоит использовать осторожно

Иерархия потребностей может быть полезной метафорой для разговора о мотивации пользователя. Но это не строгая формула приоритета и не замена данным.

Гипотеза, которая выглядит «базовой», не автоматически важнее той, что решает узкую, но дорогую проблему. Если ты используешь такую рамку, помечай её как качественную гипотезу и проверяй поведением пользователей.

Как выбрать метод без долгих споров

Я бы не заставлял каждую идею проходить через все шесть методов. На бумаге выглядит основательно, но на практике ты просто теряешь неделю на классификацию вместо тестов. Достаточно простого правила:

  • срочное ограничение — MoSCoW;
  • много идей и доступные оценки — RICE;
  • несколько бизнес-критериев — Weighted Scoring;
  • нужно собрать мнение команды — 100 баллов;
  • сложный пользовательский путь — Story Mapping;
  • мотивация и качественный контекст — дополнительные интервью и наблюдения.

Можно использовать два слоя: сначала быстрый фильтр MoSCoW, потом RICE для оставшихся идей. Так ты не тратишь час на расчёты для задачи, которую уже нельзя сделать в этом цикле.

Как устроить кросс-командную работу

Непрерывный процесс ломается не на формулах, а на передаче работы между командами. Поэтому заранее зафиксируй:

  • кто владеет гипотезой;
  • кто принимает решение о запуске;
  • кто выполняет изменение;
  • кто отвечает за данные;
  • кто подтверждает результат.

Один человек может совмещать несколько ролей, но ответственность должна быть видимой. «Мы все посмотрим» обычно означает, что не посмотрит никто.

Задай себе вопрос: если гипотеза застрянет между отделами, кто заметит это первым — ты, руководитель или никто вообще через месяц?

Где хранить статус гипотез

Чаты подходят для обсуждения, но не для хранения состояния. Для каждой гипотезы нужен один источник, где видно:

  • текущий статус;
  • владельца;
  • приоритет;
  • следующий шаг;
  • критерий готовности;
  • результат теста;
  • причину остановки или отказа.

Если маркетинг ведёт одну таблицу, продукт — другую, а исполнители получают задачи из третьего места, непрерывности не получится. Условно: из 30 гипотез в такой схеме до финального решения доходят 5, а остальные растворяются между таблицами. Будет только несколько независимых очередей, которые не разговаривают друг с другом.

Регулярные встречи без календарного ада

Процессу нужны три коротких ритма:

  1. приоритизация — выбрать идеи следующего цикла;
  2. статус — снять блокеры по текущим тестам;
  3. разбор результатов — принять решение: масштабировать, изменить, повторить или остановить.

Встреча должна заканчиваться не обсуждением, а записью решения. Если ты решил отложить идею, запиши почему. Через месяц это сэкономит время и не даст снова спорить с нуля.

Что происходит после теста

У каждой гипотезы должно быть одно из четырёх продолжений:

  • масштабировать — эффект подтверждён, риски под контролем;
  • доработать и повторить — результат неоднозначный или тест был слабым;
  • остановить — эффект не подтвердился или цена слишком высока;
  • собрать дополнительные данные — пока нельзя сделать честный вывод.

«Не сработало» тоже результат. Он экономит тебе ресурсы, если команда сохранила условие теста и причину решения.

Коротко о главном

Непрерывное тестирование гипотез строится не вокруг одного метода приоритизации. Оно держится на повторяемом цикле, едином статусе, понятных ролях и честной фиксации решений.

MoSCoW помогает быстро договориться, RICE — сравнить потенциальную отдачу и усилия, взвешенная модель — учесть несколько критериев, Story Mapping — увидеть путь пользователя. Ни один метод не отменяет проверки, и я бы не искал среди них один правильный на все случаи.

Если твой процесс только запускается, начни с простого. Вот что можно сделать на этой неделе:

  1. в начале недели обнови backlog;
  2. выбери одну-две гипотезы по согласованным критериям;
  3. зафиксируй владельца, метрику и условие остановки;
  4. проведи тест;
  5. в конце недели запиши результат и решение;
  6. верни вывод в backlog.

Потом можно добавлять автоматизацию, дополнительные источники данных и более сложные модели. Но автоматизировать хаос — плохая инвестиция. Когда твоя команда научится регулярно доводить гипотезы до измеримого решения, процесс начнёт ускоряться сам — не за счёт большего количества встреч, а за счёт меньшего количества повторной работы.

Продолжить разбираться

Материалы, которые помогут перейти от идеи к системе.

Growth · 9 мин Как масштабировать успешные гипотезы без потерь Growth · 7 мин Как внедрить культуру роста и тестирования в команде Growth · 7 мин Grow or die: как искать точки роста без хаоса

Консультация по маркетингу

Применить к вашему проекту

Один вопрос, 60 минут и решения, которые можно применить в вашем проекте.

9 000 ₽

Состав и стоимость

Пока не готовы обсуждать проект? Читайте короткие разборы в Telegram →