Собственные бенчмарки: эталонные значения из ваших собственных когорт.

Определение

Числитель, знаменатель, источник. «Доля закрытых сделок» без знаменателя — не определение.

Генеральная совокупность

Какие операции учитываются? Все запросы? Только через форму? Только новые клиенты?

Период

Начальный период когорты и дата замера. «Q1» недостаточно; «Запросы с 1 января по 31 марта, замер 30 июня» — достаточно.

Сегмент

Отрасль, размер клиента, продукт, регион, канал. Одно значение по всем сегментам обычно скрывает больше, чем показывает.

Качество данных

Полнота (у скольких записей поле заполнено?), происхождение (система или ручной ввод?), известные пробелы.

Медиана и размах

Медиана устойчива к выбросам; разброс (наименьшее и наибольшее значение или 25–75-й перцентиль) показывает, насколько широко распределение. Одно лишь среднее скрывает и то, и другое.

Сопоставимость

Два значения сопоставимы, если шесть данных выше совпадают — кроме периода. Если различается ещё хоть одно, это не сравнение, а сопоставление с оговоркой.

1. 01Определить показатель: заполните для каждого показателя лист определений — числитель, знаменатель, период, сегмент, источник, тип (активность или эффект), ответственный. Что не можете заполнить, то вы ещё не измеряете.
2. 02Сформировать когорты: выберите длину когорты (месяц или квартал) и фиксированный интервал до даты замера (например, 90 дней после конца когорты). С этого момента каждая когорта измеряется одинаково.
3. 03Сначала собирать, потом сравнивать: после трёх-четырёх когорт у вас будут первая медиана и разброс. До этого любое сравнение — шум.
4. 04Разделять сегменты, если они различаются: если два сегмента стабильно показывают разные значения, у каждого свой бенчмарк. Если нет, они остаются вместе — маленькие группы колеблются сильнее.

• →Менять определение по ходу дела и всё равно использовать старые значения.
• →Брать среднее вместо медианы и принимать один крупный заказ за тренд.
• →Измерять когорты слишком рано — до того, как приняты решения, — и сравнивать их со зрелой когортой.
• →Ставить целью внешнее значение («среднее по отрасли») без определения.
• →Не указывать качество данных: 60 % заполненных полей дают не бенчмарк, а подсказку для следующей задачи по данным.

Лист определений ниже — пустой CSV-файл со столбцами «Показатель», «Тип», «Числитель», «Знаменатель», «Период», «Сегмент», «Источник», «Качество данных», «Ответственный» и «Примечание». В нём намеренно нет заполненных значений — ваши определения принадлежат вам. Дополнительно есть бланк учёта бенчмарков, в который вы вносите измеренные значения по каждой когорте.