Lean Analytics, глава 28: Что делать без базы для сравнения

Главная мысль: для многих метрик нет понятной нормы. Тогда стройте базу сами: тестируйте и смотрите, где улучшения заканчиваются.

Нормы нет

• Для многих метрик нет «нормального» значения. Оно зависит от рынка и продукта.
• Не двигайте базу произвольно. Развивайте возможности: улучшайте то, что вы реально можете улучшить.

Убывающая отдача

• Оптимизация даёт убывающий эффект. Небольшие улучшения давать легче, чем большие.
• Когда результат выходит на плато, у вас появляется своя база. Тогда можно понять, когда пора переключиться на другое.

Пример: конверсия регистрации

• Компания начинала с конверсии 0,3%.
• По результатам тестов она выросла до 8,2%.
• Тренд показывает убывающую отдачу. Максимум около 9%.

Что делать дальше

• Даже при убывающей отдаче улучшения могут быть достаточными для бизнес-модели.
• Если для модели нужно 7%, а вы уже выше, продолжайте работать над другим.
• Если для модели нужно больше потолка, ищите другой рычаг, например больше посетителей.

Lean Analytics вне стартапов

Принципы применимы не только к стартапам. Их можно использовать в корпоративных продажах и внутри крупных компаний. Следующие две главы об этом.

Для дата-инженера

• Храните историю экспериментов и их результатов. Из неё строится своя база.
• Для каждой метрики храните версию определения. Иначе тренд нельзя сравнивать.

Вопросы для самопроверки

• Какую метрику вы оптимизируете дольше всех? Есть ли плато?
• Нужно ли вашей модели больше, чем даёт потолок?

Предыдущая: 27. Маркетплейсы: ориентиры. Следующая: 29. Продажи в корпоративном сегменте.