Прежде чем приступать к реализации продуктовых идей, нужно их сформулировать. В чем заключается идея? Можем ли мы уменьшить большую идею до небольшого эксперимента? Как мы измерим результат? При каких значениях результат нас устроит?
Гипотеза / Я верю, что <описание изменения>. Чтобы проверить мы <описание эксперимента> и измерим <описание метрики>. Эксперимент удачен, если <значение метрики>.
Примеры
Я верю, что наши идеи стартапов для животных найдут спрос у аудитории в фейсбуке. Чтобы проверить это, мы на каждую из идей запустим рекламную кампанию и измерим конверсию в переход на страничку стартапа и конверсию в нажатие на кнопку «Установить». Эксперимент удачен, если мы получим конверсию 1% в переход на страничку стартапа и 10% в нажатие на кнопку «Установить» с перехода хотя бы для одной из идей.
Гипотеза на уровне информирования (Awareness)
Я верю, что если на онбординге дать возможность персонализировать содержимое приложения, то приложение будет более понятно и полезно пользователю. Чтобы проверить это, мы превратим онбординг в заполнение профиля пользователя и настройку приложения, как это делают лидеры социальных сетей (Twitter, Medium, Facebook) и измерим на органической аудитории изменение количества сессий на пользователя и RR первого дня и первого месяца. Эксперимент удачен, если показатели увеличатся в среднем на 20%.
Гипотеза на уровне активации (Activation)
Я верю, что понятный доступ к истории поиска сделает приложение более полезным для аудитории. Чтобы проверить это, мы сделаем историю поиска видимой на первом экране и в историю поиска добавим, в том числе, поисковые запросы, вбитые пользователем. Мы измерим долю аудитории, которая будет использовать историю поиска по своём возвращении (событие POI Search History). Эксперимент удачен, если эта доля увеличится с 8% (за 1 квартал 2018 года) до 15% на iOS.