Хороший эксперимент, плохой эксперимент
Перевели статью из блога Reforge, которую написал Фарид Мусават — бывший директор по продуктам в Slack.
За последние 10 лет он провел сотни продуктовых экспериментов и совершил сотни ошибок, чтобы понять разницу между хорошим и плохим экспериментом. Ниже — основные отличия.
1. Хорошие — работают для улучшения продуктовой стратегии. Плохие улучшают только метрики.
2. Хорошие — строятся вокруг продукта и помогают команде более глубоко понять поведение пользователей. Плохие эксперименты рождаются в результате спонтанных брейнштормов, которые не связаны со стратегией роста.
3. Хорошие — влияют на результат, решая реальные проблемы пользователей. Плохие — меняют метрики, но не решают проблемы пользователей.
4. Хорошие эксперименты — как ставки: чем больше риск, тем больше рост. Плохие эксперименты — это бесконечные оптимизации и попытки улучшить незначительных деталей, которые в результате не способствуют кратному росту.
5. Хорошие — отвечают на вопрос: «Что нам делать с тем, что мы узнали?» Помогают понять, почему что-то сработало или нет, подтвердить или опровергнуть гипотезы, продолжать эксперимент или переключиться на другой. Плохие тесты сводятся к вопросу: «Оставить или выключить?» и быстро забываются.
6. Хорошие — инструмент покорности. Вы проверяете то, во что верите, но в чем не уверены. Плохие тесты используются, чтобы отложить принятие решений, уладить разногласия или позволить данным сказать вам, что нужно делать.
7. Хорошие эксперименты с самого начала оперируют метриками успеха. Плохие — запускаются без понимания, какие показатели нужно отслеживать, и команды смотрят на те метрики, которые улучшаются, чтобы оправдать идею, а не проверить гипотезу.
8. Хорошие — рассматривают все команды внутри компании как систему и предполагают компромиссы. Плохие — поощряют личные победы и OKR, даже если они идут в ущерб другим членам команды.
9. Хорошие эксперименты максимально подробно документируются при запуске. Плохие перезапускаются из-за нехватки данных.
10. Хорошие — обсуждаются. Они записываются, широко распространяются и документируются на будущее. Плохие запускаются, но никогда не замыкают цикл.
11. Хорошие — интегрированы в основной процесс разработки продукта. Они учитывают культурные принципы и рассчитаны на долгосрочный успех команды. Плохие порождают бесконечные споры и ведут к недоверию и отсутствию сотрудничества.
12. У хороших экспериментов есть план успеха. Успешные эксперименты становятся частью продукта и интегрируются в процесс запуска. Плохие навсегда оставляют MVP в продукте.
#рост_продуктов
Перевели статью из блога Reforge, которую написал Фарид Мусават — бывший директор по продуктам в Slack.
За последние 10 лет он провел сотни продуктовых экспериментов и совершил сотни ошибок, чтобы понять разницу между хорошим и плохим экспериментом. Ниже — основные отличия.
1. Хорошие — работают для улучшения продуктовой стратегии. Плохие улучшают только метрики.
2. Хорошие — строятся вокруг продукта и помогают команде более глубоко понять поведение пользователей. Плохие эксперименты рождаются в результате спонтанных брейнштормов, которые не связаны со стратегией роста.
3. Хорошие — влияют на результат, решая реальные проблемы пользователей. Плохие — меняют метрики, но не решают проблемы пользователей.
4. Хорошие эксперименты — как ставки: чем больше риск, тем больше рост. Плохие эксперименты — это бесконечные оптимизации и попытки улучшить незначительных деталей, которые в результате не способствуют кратному росту.
5. Хорошие — отвечают на вопрос: «Что нам делать с тем, что мы узнали?» Помогают понять, почему что-то сработало или нет, подтвердить или опровергнуть гипотезы, продолжать эксперимент или переключиться на другой. Плохие тесты сводятся к вопросу: «Оставить или выключить?» и быстро забываются.
6. Хорошие — инструмент покорности. Вы проверяете то, во что верите, но в чем не уверены. Плохие тесты используются, чтобы отложить принятие решений, уладить разногласия или позволить данным сказать вам, что нужно делать.
7. Хорошие эксперименты с самого начала оперируют метриками успеха. Плохие — запускаются без понимания, какие показатели нужно отслеживать, и команды смотрят на те метрики, которые улучшаются, чтобы оправдать идею, а не проверить гипотезу.
8. Хорошие — рассматривают все команды внутри компании как систему и предполагают компромиссы. Плохие — поощряют личные победы и OKR, даже если они идут в ущерб другим членам команды.
9. Хорошие эксперименты максимально подробно документируются при запуске. Плохие перезапускаются из-за нехватки данных.
10. Хорошие — обсуждаются. Они записываются, широко распространяются и документируются на будущее. Плохие запускаются, но никогда не замыкают цикл.
11. Хорошие — интегрированы в основной процесс разработки продукта. Они учитывают культурные принципы и рассчитаны на долгосрочный успех команды. Плохие порождают бесконечные споры и ведут к недоверию и отсутствию сотрудничества.
12. У хороших экспериментов есть план успеха. Успешные эксперименты становятся частью продукта и интегрируются в процесс запуска. Плохие навсегда оставляют MVP в продукте.
#рост_продуктов
Reforge
The Importance of Product Trial: Good vs Bad Experiments — Reforge
Fareed Mosavat outlines the 12 lessons he has learned about what sets Good Experiments apart from Bad Experiments.
1 миллион платящих подписчиков!
О таком результате написал сооснователь Flo Дмитрий Гурский в своем LinkedIn. Всего у приложения-трекера для женского здоровья 165 млн установок и 38 млн активных пользовательниц в месяц.
На данный момент только 3-4 приложения в категории Health&Fitness имеют более 1 млн активной платящей аудитории.
🔥 Хотите узнать, какие решения помогают команде Flo расти такими темпами?
7 докладов от экспертов Flo в подписке Epic+.
Андрей Михайлюк, Product Director, Commercial:
— Россыпь хаков retention на кейсах от Flo. Смотреть
— Как быстро измерить эффект новой фичи: опыт Flo. Смотреть
— Как растить выручку, управляя ценой и скидками. Смотреть
— Экстремальный engagement growth: как мы в 6 раз выросли там, где расти уже некуда. Смотреть
Гульфия Курмангалеева, Product Manager:
— Как Flo увеличило конверсию в подписки в 10 раз. Смотреть
Константин Грабарь, Data Platform Product Owner:
— Как Flo тестирует и внедряет ML гипотезы с мультикомандной инициативой ML Gatherings. Смотреть
Дима Золотухин, Head of Analytics:
— Как поддерживать постоянный рост через монетизацию уснувших пользователей. Смотреть
Оформите подписку и получите 7 дней доступа к контенту бесплатно: http://bit.ly/epicgrowth-subscribe
#рост_продуктов #epicplus
О таком результате написал сооснователь Flo Дмитрий Гурский в своем LinkedIn. Всего у приложения-трекера для женского здоровья 165 млн установок и 38 млн активных пользовательниц в месяц.
На данный момент только 3-4 приложения в категории Health&Fitness имеют более 1 млн активной платящей аудитории.
🔥 Хотите узнать, какие решения помогают команде Flo расти такими темпами?
7 докладов от экспертов Flo в подписке Epic+.
Андрей Михайлюк, Product Director, Commercial:
— Россыпь хаков retention на кейсах от Flo. Смотреть
— Как быстро измерить эффект новой фичи: опыт Flo. Смотреть
— Как растить выручку, управляя ценой и скидками. Смотреть
— Экстремальный engagement growth: как мы в 6 раз выросли там, где расти уже некуда. Смотреть
Гульфия Курмангалеева, Product Manager:
— Как Flo увеличило конверсию в подписки в 10 раз. Смотреть
Константин Грабарь, Data Platform Product Owner:
— Как Flo тестирует и внедряет ML гипотезы с мультикомандной инициативой ML Gatherings. Смотреть
Дима Золотухин, Head of Analytics:
— Как поддерживать постоянный рост через монетизацию уснувших пользователей. Смотреть
Оформите подписку и получите 7 дней доступа к контенту бесплатно: http://bit.ly/epicgrowth-subscribe
#рост_продуктов #epicplus