Вспомогательная метрика — это показатель, который помогает понять, почему изменилась главная метрика, и вовремя заметить побочные эффекты изменений. Она не является целью, но объясняет результат и защищает от ошибок.
Главная метрика, например North Star Metric, одна на продукт или эксперимент. Но по одной цифре сложно понять причину. Если выручка выросла, это может быть из-за притока новых клиентов, роста среднего чека или повышения цен. Вспомогательные метрики раскладывают общий результат на части и показывают, какая из них сработала.
Обычно различают два вида. Диагностические метрики разбивают главную на составляющие: конверсия на шагах воронки (Воронка продукта), средний чек, частота покупок. Защитные метрики (guardrail) следят, чтобы улучшение главной не ухудшило другое: скорость работы, число жалоб, возвраты, отток. Например, при тесте новой формы заказа главная метрика — конверсия, а защитные — доля ошибок и обращений в поддержку.
В A/B-тестах (A-B-тест) вспомогательные метрики задают заранее вместе с главной. Это не даёт «подогнать» вывод после теста: если выбирать метрики постфактум, всегда найдётся та, что выросла.
Пример
Сервис доставки хочет увеличить число заказов в неделю — это главная метрика. Вспомогательные: доля пользователей, дошедших до корзины, средний чек, время доставки, доля отмен. Если заказов стало больше, но время доставки выросло вдвое, рост может быть временным.
Как подобрать вспомогательные метрики
- Запишите главную метрику и разложите её на множители: для выручки это число клиентов, частота и чек.
- Выберите 2–4 показателя, которые объясняют изменения главной.
- Добавьте 1–2 защитные метрики, чтобы не пропустить побочный вред.
- Определите, как каждую метрику считать и откуда брать данные.
- Заранее решите, при каких значениях вы остановите эксперимент.
Типичные ошибки
- Следить за десятками метрик сразу и не видеть главного.
- Выбирать метрики после получения результата.
- Игнорировать защитные метрики ради красивого роста главной.
- Подменять причину и следствие, когда вспомогательная метрика ведёт себя как независимая цель.
Чем отличается от главной метрики
Главная метрика показывает, достигнута ли цель, и она одна. Вспомогательных несколько, и они отвечают на вопросы «почему» и «какой ценой». Если главная выросла, а защитная ухудшилась, результат нельзя считать успехом, пока причина не понятна.
Хороший ориентир — каждая вспомогательная метрика должна иметь владельца в команде, который понимает, как на неё влиять, и знает, что делать при резком изменении.
Частый вопрос
Сколько вспомогательных метрик нужно? Обычно хватает 3–6 на эксперимент или продукт. Если их больше, внимание размывается, а риск случайно найти «значимую» метрику растёт, поэтому каждую включают только с понятной причиной.