Полная версия
KPI против здравого смысла. 20 историй о том, как показатели управляют людьми
5. Откладывать демонстрации и подготовку предложений на вечер, когда счётчик звонков уже выполнен.
6. Считать коллег, которые проводили длинные содержательные разговоры, «медленными».
Подделывать данные не требовалось. Правила ясно показывали: ценится событие в телефонии, а не качество продвижения клиента к решению.
Диагностические данные
Руководитель выгрузил данные за две сопоставимые четырёхнедельные группы: до KPI и после. Все числа условны.
Исходящие соединения. До KPI — 4 200; После KPI — 7 900.
Уникальные контакты. До KPI — 3 500; После KPI — 4 100.
Разговоры дольше 2 минут. До KPI — 1 180; После KPI — 1 240.
Клиенты с подтверждённой задачей. До KPI — 460; После KPI — 475.
Согласованные демонстрации. До KPI — 210; После KPI — 218.
Повторные просьбы не звонить. До KPI — 44; После KPI — 103.
Подготовленные предложения в срок. До KPI — 186; После KPI — 151.
Количество соединений выросло на: (7 900 — 4 200) / 4 200 × 100% ≈ 88,1%. Число демонстраций выросло на: (218 — 210) / 210 × 100% ≈ 3,8%. Отношение демонстраций к соединениям изменилось:• до KPI: 210 / 4 200 × 100% = 5%;
• после KPI: 218 / 7 900 × 100% ≈ 2,8%.
Это не доказывает, что каждый дополнительный звонок был бесполезен. Возможно, база стала холоднее или изменился состав клиентов. Но разрыв между ростом активности и почти неизменным результатом требует проверки. Особенно важны уникальные контакты: соединения выросли на 3 700, а уникальные контакты — только на 600. Значит, существенную часть роста создали повторы.
Где произошло смещение цели
Показатель был выбран как опережающий: звонки должны были вести к содержательным разговорам и демонстрациям. После привязки к ежедневному минимуму он превратился из сигнала в самоцель. Сотрудник мог полностью выполнить KPI, не создав ни одной качественной возможности.
Активность нужна: без наблюдения часть менеджеров может избегать исходящей работы. Ошибка заключалась в жёстком индивидуальном пороге, не подкреплённом проверкой причинной цепочки.
Здесь полезно разделить три вопроса:
• Достаточно ли команда делает попыток контакта?
• Насколько хорошо выбираются и готовятся контакты?
• Приводят ли разговоры к следующему шагу?
Один счётчик не отвечает на все три.
Варианты перепроектирования
Вариант 1. Использовать звонки как диагностический диапазон
Вместо премии за точное число задать ориентир, например диапазон активности, и обсуждать отклонения. Менеджер с меньшим числом звонков, но большим количеством квалифицированных разговоров не считается автоматически слабым. Менеджер с очень низкой активностью объясняет, чем было занято время.
Плюс: снижается давление на бессмысленные соединения. Минус: руководителю нужно разбирать контекст, а не только смотреть зелёную ячейку.
Вариант 2. Измерять переходы между этапами
Воронка может включать:
• уникальный контакт; • содержательный разговор; • подтверждённую задачу; • согласованный следующий шаг; • состоявшуюся демонстрацию.Важно не платить за каждый этап отдельно. Иначе появятся новые игры с классификацией. Лучше использовать переходы для диагностики: где именно теряются подходящие клиенты.
Плюс: ближе к реальному процессу. Минус: определения этапов требуют выборочной проверки и единого обучения.
Вариант 3. Командный результат плюс ограничитель качества
Команда может отслеживать число состоявшихся демонстраций с подходящими клиентами, а ограничителями сделать просьбы прекратить контакт и долю предложений, подготовленных в согласованный срок. Индивидуальные данные используются для обучения, а не для публичного рейтинга.
Плюс: усиливается сотрудничество и передача удачных практик. Минус: вклад отдельных людей виден хуже, возможен эффект «пусть другие делают».
Вариант 4. Периодические выборки разговоров
Небольшую случайную выборку разговоров оценивают по простому чек-листу: выяснена ли задача, не дано ли неподтверждённых обещаний, понятен ли следующий шаг. Выборка служит ограниченным инструментом обучения с заранее понятными правилами доступа и не предполагает тотальной записи или постоянного наблюдения.
Плюс: проверяется качество, которое не видно в счётчике. Минус: оценка требует времени и может быть субъективной; правила приватности и доступа должны быть согласованы внутри организации.
Возможная связка показателей
Опережающий сигнал: количество уникальных целевых контактов, по которым сделана подготовленная попытка.
Запаздывающий результат: доля контактов с состоявшимся согласованным следующим шагом.
Ограничители:
• повторные просьбы прекратить контакт; • просроченные обещанные материалы; • концентрация звонков на одних и тех же номерах.Эта связка не претендует на роль готовой универсальной системы. В длинном цикле продажи демонстрация тоже ещё не означает ценность. Но она делает обходной путь «набрать сто коротких соединений» менее выгодным.
Вопросы перед запуском и на обзоре
• Какой минимальный объём активности действительно нужен, чтобы не потерять темп?
• Какие этапы менеджер контролирует, а какие зависят от качества базы и предложения?
• Как отличить содержательный разговор от формального соединения без тяжёлого контроля?
• Не станет ли классификация «подтверждённая задача» новой зоной приукрашивания?
• Как часто нужно смотреть переходы: ежедневно, еженедельно или по скользящему периоду?
• Что произойдёт с подготовкой предложений, если активность снова вырастет?
• Какие причины отказа полезно анализировать отдельно, не превращая их в обвинение менеджера?
Практическое задание
После изменений команда получила за месяц:
• 5 000 уникальных подготовленных контактов; • 1 600 содержательных разговоров; • 620 подтверждённых задач; • 310 согласованных демонстраций; • 280 состоявшихся демонстраций; • 55 просьб прекратить контакт.Рассчитайте переходы между этапами и назовите один участок, который нельзя оценить только по этим данным.
Разбор
Переходы:
• разговоры из контактов: 1 600 / 5 000 × 100% = 32%; • подтверждённые задачи из разговоров: 620 / 1 600 × 100% = 38,75%; • согласованные демонстрации из подтверждённых задач: 310 / 620 × 100% = 50%; • состоявшиеся демонстрации из согласованных: 280 / 310 × 100% ≈ 90,3%; • просьбы прекратить контакт от уникальных контактов: 55 / 5 000 × 100% = 1,1%.Самый низкий переход сам по себе не означает главную проблему. Например, 32% ответов могут быть нормальны для холодной базы. Нужны сравнение по сегментам, история изменения и данные о качестве списка. Также невозможно оценить, привели ли демонстрации к полезным решениям клиента и экономически приемлемым сделкам. История требует связать активность с последующим результатом; поиск «идеального процента» ничего не решает.
Рабочая история о KPI 2. Ответ за минуту, решение через три дня
Ситуация и реальная цель
Служба поддержки вымышленного интернет-магазина «Лист и лампа» хочет уменьшить раздражение клиентов и быстрее решать проблемы с заказами. Руководство замечает длинную очередь и вводит KPI: среднее время первого ответа должно быть не более одной минуты.
Показатель кажется разумным: молчание усиливает тревогу, особенно когда клиент не знает, принят ли запрос. Система автоматически фиксирует первое сообщение оператора. Через две недели цель достигнута: среднее время первого ответа падает с девяти минут до сорока секунд. Одновременно растёт число повторных обращений, а клиенты начинают писать: «Почему вы каждый раз приветствуете меня, но никто ничего не делает?»
Выбранный KPI и его техническая слабость
Метрика считалась так: Сумма времени от создания обращения до первого сообщения оператора / количество обращений. В ней смешались два события:• подтверждение, что запрос замечен;
• начало содержательной работы.
Оператор мог отправить шаблон «Здравствуйте! Уже проверяю информацию» и сразу перейти к следующему чату. Таймер останавливался, хотя фактическая проверка начиналась позже.
Кроме того, среднее скрывало хвост. Несколько обращений могли ждать долго, если большинство получало автоматизированный быстрый ответ.
Как изменилась работа
Премия зависела от среднего времени первого ответа по смене. Поэтому команда выстроила поведение вокруг остановки таймера:
• операторы открывали как можно больше чатов и отправляли приветствие;
• сложные обращения оставались в открытом состоянии без следующего сообщения;
• запросы передавались между сотрудниками, чтобы первый ответ формально был быстрым;
• шаблоны становились всё менее содержательными;
• в часы пик сотрудники избегали долгого исследования одного случая, потому что новые обращения ухудшали среднее.
Это создало парадокс. Клиент видел быстрый контакт, но получал меньше внимания. Для оператора же стратегия была логичной: KPI оценивал момент первого текста.
Доказательства
За два месяца получили условные данные:
Среднее время первого ответа. Месяц до KPI — 9 мин; Второй месяц после KPI — 0,7 мин.
Медиана времени первого ответа. Месяц до KPI — 6 мин; Второй месяц после KPI — 0,4 мин.
Медиана времени до содержательного действия. Месяц до KPI — 18 мин; Второй месяц после KPI — 41 мин.
Доля решённых при первом обращении. Месяц до KPI — 68%; Второй месяц после KPI — 51%.
Повторное обращение по той же проблеме за 7 дней. Месяц до KPI — 14%; Второй месяц после KPI — 27%.
Жалобы на отсутствие ответа после приветствия. Месяц до KPI — 32; Второй месяц после KPI — 119.
Среднее время полного решения. Месяц до KPI — 11 ч; Второй месяц после KPI — 16 ч.
Важна новая метрика «время до содержательного действия». Для разных типов запросов действие различалось: проверка статуса доставки, изменение данных в заказе, понятный запрос документа, оформленная передача специалисту с полной информацией. Определение не идеально, но оно отделяет приветствие от движения по делу.
Доля повторных обращений почти удвоилась. Это может зависеть от состава проблем, поэтому данные разделили на три крупных типа. Рост повторов наблюдался в каждом, хотя был сильнее в сложных случаях. Значит, объяснение только изменением портфеля недостаточно.
Смещение цели и роль среднего
Реальная цель: быстро дать клиенту полезную помощь и довести вопрос до решения. KPI: среднее время первого текста. После привязки к премии люди оптимизировали начало разговора.
Среднее дополнительно создало уязвимость. Пусть девять клиентов получили ответ за 20 секунд, а один — через 20 минут. Среднее время:
(9 × 20 секунд +1 200 секунд) / 10 = 138 секунд, то есть 2 минуты 18 секунд.
На дашборде результат может выглядеть приемлемым, хотя один человек ждал двадцать минут. Для оценки доступности нужны распределение, медиана и верхний процентиль либо доля ответов в разумном интервале. Но и они всё ещё измеряют только начало.
Варианты перепроектирования
Вариант 1. Разделить подтверждение и содержательный ответ
Автоматическое подтверждение можно честно назвать подтверждением. Оно сообщает место в очереди и ожидаемое время. Отдельно измеряется время до первого содержательного действия.
Плюс: автоматическое приветствие перестаёт считаться помощью. Минус: содержательность нужно определить по типам обращений; возможны споры.
Вариант 2. Сбалансировать скорость качеством завершения
Основной процессный показатель: медиана времени до содержательного действия. Результирующие показатели: доля повторных обращений по той же теме и время полного решения. Ограничитель: доля обращений без обновления статуса дольше установленного интервала.
Плюс: система видит и скорость, и перенос проблемы. Минус: полное решение зависит от других отделов; нельзя бездумно присваивать его отдельному оператору.
Вариант 3. Управлять очередью, а не ранжировать операторов
Время ожидания часто определяется числом поступивших обращений, расписанием и доступностью специалистов. Метрику разумнее применять на уровне смены и временного интервала. Индивидуально полезнее разбирать выборку случаев и качество передачи.
Плюс: внимание направляется на мощность процесса. Минус: сложнее увидеть устойчивые пробелы в навыках конкретного человека; их придётся выявлять другими способами.
Вариант 4. Ввести явный режим пикового спроса
Когда входящий поток превышает пропускную способность, система может переключаться: приоритизировать срочные категории, показывать честное ожидание, временно ограничивать второстепенные каналы. KPI оценивается с учётом нагрузки.
Плюс: команда не маскирует перегрузку шаблонами. Минус: нужны правила приоритета и риск ошибочной классификации.
Карточка пересмотренной метрики
Название: Время до первого содержательного действия
Единица: Обращение
Начало: Время поступления в доступную для обработки очередь
Конец: Первое подтверждённое действие по типу запроса
Основной отчёт: Медиана и 90-й процентиль
Сегменты: Тип запроса, канал, час поступления
Ограничители: Повторы по той же проблеме; обращения без обновления
Использование: Планирование мощности и обзор процесса, не автоматическая оценка личности
Вопросы перед запуском и на обзоре
• Что для каждого типа обращения считается содержательным действием?
• Может ли оператор выполнить его без ответа другого отдела?
• Как учитываются обращения, поступившие вне рабочего окна?
• Кто отвечает за задержку после передачи?
• Не станет ли команда выбирать неверно простую категорию, чтобы показать быстрый результат?
• Какой процент обращений достаточно анализировать вручную для проверки классификации?
• Что важнее в конкретном канале: мгновенное подтверждение или редкие, но полные обновления?
• Как изменился состав обращений после запуска?
Практическое задание
В смене было восемь обращений. Время до первого сообщения: 0,5; 0,5; 0,7; 0,8; 0,9; 1; 1,2; 14 минуты. Время до содержательного действия: 3; 4; 4; 5; 7; 9; 22; 60 минут.
Рассчитайте среднее и медиану для обоих рядов. Какой вывод нельзя делать?
РазборДля первого сообщения сумма равна 19,6 минуты, среднее:
19,6 / 8 = 2,45 минуты.
Медиана — среднее четвёртого и пятого значений:
(0,8 +0,9) / 2 = 0,85 минуты.
Для содержательного действия сумма равна 114 минут, среднее:
114 / 8 = 14,25 минуты.
Медиана:
(5 +7) / 2 = 6 минут.
Среднее сильно увеличивают длинные случаи, но они важны: нельзя просто убрать их как «аномалии», не проверив причины. По этим данным нельзя утверждать, что сотрудники работают плохо или медленно. Возможно, случаи на 22 и 60 минут требовали внешнего ответа. Можно утверждать другое: первое сообщение почти не описывает фактическое начало помощи, а распределение содержательного времени требует сегментации и разбора хвоста.
Рабочая история о KPI 3. Урок проведён, материал не освоен
Ситуация и реальная цель
Учебный центр при вымышленной производственной группе обучает новых сотрудников работе с внутренними процессами. Реальная цель — чтобы после курса люди могли безопасно и самостоятельно выполнять типовые операции, распознавать нетипичные ситуации и знать, когда обращаться за помощью.
Руководство недовольно переносами занятий и вводит KPI для преподавателей: провести не менее 95% запланированных учебных часов. Показатель должен защитить расписание. Через квартал доля проведённых часов достигает 98%. Одновременно наставники на рабочих местах сообщают, что новички чаще просят повторно объяснить базовые действия.
Почему KPI выглядел разумно
Без проведённого занятия обучение не состоится. Доля выполненных часов легко считается:
Проведённые часы / Запланированные часы × 100%.
Если было запланировано 400 часов, а проведено 392:
392 / 400 × 100% = 98%.
Однако формула не различает:
• занятие с полной группой и занятие с двумя слушателями; • практику и чтение слайдов; • перенесённый час и отменённый; • освоение материала и физическое присутствие; • программу, адаптированную к уровню группы, и формальное прохождение тем. Стимулы и наблюдаемое поведениеПреподаватели получили премию за выполнение часов. Организация не предусмотрела отдельного ресурса на обновление материалов и разбор результатов. Поэтому время подготовки стало конкурировать с «производительным» временем.
Появились пять изменений:
1. Отменённые из-за производственной нагрузки занятия переносили на конец месяца, даже если группа уже не могла собраться.
2. Практические задания сокращали: обсуждение ошибок не увеличивало проведённые часы, но могло нарушить график.
3. Слабым группам давали тот же темп, что сильным.
4. Часы подготовки и анализа тестов воспринимались как невидимая работа.
5. Слушателей отмечали присутствующими, если они подключились хотя бы на часть дистанционного занятия.
Не все изменения были намеренной игрой. Часть возникла из-за того, что преподаватели пытались одновременно выполнить план часов и не сорвать производственные смены.
Диагностические данные
Учебный центр сравнил два набора групп с похожими должностями и программой.
Запланировано учебных часов. До нового KPI — 360; После нового KPI — 380.
Проведено часов. До нового KPI — 326; После нового KPI — 372.
Выполнение плана. До нового KPI — 90,6%; После нового KPI — 97,9%.
Доля слушателей, прошедших итоговое практическое задание с первой попытки. До нового KPI — 76%; После нового KPI — 63%.
Среднее число повторных объяснений у наставника в первые две недели. До нового KPI — 2,1; После нового KPI — 3,4.
Доля занятий с практикой не менее трети времени. До нового KPI — 61%; После нового KPI — 38%.
Доля слушателей, присутствовавших не менее 80% занятия. До нового KPI — 84%; После нового KPI — 72%.
Нельзя автоматически приписать падение результатов преподавателям. Возможно, изменился отбор новичков, наставники стали строже или производственная нагрузка выросла. Поэтому центр проверил входной короткий тест и распределение должностей. Больших различий не нашлось. Это не доказывает причинность окончательно, но усиливает гипотезу: оптимизация часов вытеснила практику и фактическое участие.
Цель, прокси и единица анализа
Здесь особенно заметна ошибка единицы анализа. KPI считал часы преподавателя. Цель относилась к способности слушателя действовать. Между ними нет взаимно однозначной связи.
Час — ресурс и элемент процесса. Его полезно отслеживать для расписания и бюджета. Но когда час становится результатом обучения, возникает «производство часов». Это похоже на оценку ремонта по времени присутствия мастера, а не по восстановленной функции.
Кроме того, показатель 95% не учитывал причину отмены. Преподаватель мог потерять час из-за срочной производственной задачи у всей группы. Наказание создавало стимул провести формальное занятие в неудобное время вместо честного переноса.
Варианты перепроектирования
Вариант 1. Оставить выполнение расписания как операционный показатель
Доля проведённых часов остаётся на дашборде, но используется для поиска узких мест: доступность аудиторий, конфликт смен, нехватка преподавателей. Она не равна качеству обучения и не становится единственной основой премии.
Плюс: сохраняется дисциплина планирования. Минус: потребуется иной способ обсуждать вклад преподавателей.
Вариант 2. Измерять освоение на конкретных задачах
Вместо общего теста использовать несколько практических сценариев, связанных с программой. Оценка должна показывать не только «сдал/не сдал», но и тип ошибки. Результаты лучше агрегировать по группе и теме, особенно при малом числе слушателей.
Плюс: ближе к цели. Минус: качество задания критично; обучение может сузиться до натаскивания, если сценарии неизменны.
Вариант 3. Связка процесса и результата
Опережающие показатели:
• доля занятий с запланированной практикой; • фактическое участие слушателей; • своевременная обратная связь по заданиям.Запаздывающие:
• выполнение практического задания; • типовые затруднения в первые недели; • потребность в повторном обучении.Ограничитель: нельзя снижать доступность курса и вытеснять сложных слушателей ради красивого результата.
Вариант 4. Оценивать причины переносов
Переносы делятся на категории: производственная необходимость, отсутствие преподавателя, техническая проблема, несогласованное расписание. Цель — не наказать источник, а увидеть, какая часть потерь управляется учебным центром.
Плюс: данные подсказывают, где действовать. Минус: категории могут использоваться для перекладывания ответственности, поэтому нужна выборочная проверка.
Компромиссы
Итоговое практическое задание ближе к цели, но тоже уязвимо. Если от него зависит оценка преподавателя, можно заранее разбирать точные ответы, упрощать допуск или исключать слабых слушателей. Поэтому важны обновляемые варианты, разделение обучения и итоговой проверки, а также анализ по темам.
Обратная связь наставников полезна, но субъективна и зависит от сложности реальной работы. Её нельзя превращать в точный индивидуальный балл. Она лучше работает как источник повторяющихся сигналов: какие операции требуют дополнительной практики.
Вопросы перед запуском и на обзоре
• Что слушатель должен уметь делать после курса?