Фраза «после проекта показатель улучшился» ещё не доказывает эффект проекта. За тот же период могли измениться продажи, численность, руководители, рынок труда, сезонная нагрузка или состав сотрудников. Поэтому оценка эффекта начинается до запуска инициативы: с вопроса, что именно должно измениться, когда это можно увидеть и с чем сравнивать результат.
HR-аналитикаROIL&DWellbeingАвтоматизация HRОценка персонала
Хорошая оценка отвечает на три разных вопроса: показатель изменился? Какая часть изменения связана с проектом? Стоит ли полученный эффект вложенных ресурсов?
1. Спроектируйте измерение до запуска
Если критерии успеха появляются после того, как команда увидела результаты, почти всегда можно найти показатель, который выглядит хорошо. Сильная оценка начинается с заранее зафиксированной логики.
01
Сформулируйте, что именно должен изменить проект
Название инициативы ничего не говорит о механизме эффекта.
«Запустить обучение руководителей» — действие. Для оценки нужен ожидаемый результат и цепочка, через которую он должен появиться. Например: руководители лучше проводят обратную связь, снижается число управленческих конфликтов, затем сокращается нежелательная текучесть в командах.
Слишком широко«Повысить эффективность руководителей»Непонятно, какой показатель должен измениться и когда.
Рабочая гипотезаСнизить нежелательную текучесть в командах участниковДополнительно измерять изменение управленческих практик, чтобы видеть механизм эффекта.
Что зафиксировать: целевую аудиторию, ожидаемое изменение, показатель результата, предполагаемый механизм и срок, за который эффект может проявиться.
02
Зафиксируйте базовую линию
Одна точка «до» часто слишком случайна, чтобы быть надёжной базой.
Если текучесть в месяц перед запуском составляла 18%, это ещё не означает, что 18% — нормальный уровень. В предыдущие месяцы она могла колебаться от 11% до 19%. Чем сильнее метрика зависит от сезона и случайных событий, тем важнее смотреть несколько периодов до проекта.
Базовая линия=несколько сопоставимых периодов до запуска+ структура аудитории + правила расчёта
Практически: сохраните исходные значения, числитель и знаменатель, состав группы и методику расчёта. Если формула метрики поменяется в середине проекта, сравнение потеряет смысл.
03
Разделите метрики на ранние и итоговые
Одна метрика редко показывает и механизм, и бизнес-результат.
У обучения можно сразу измерить завершение программы и прирост знаний. Изменение поведения проявится позже. Влияние на продажи, качество, текучесть или производительность потребует ещё большего времени. Если смотреть только удовлетворённость участников, доказать бизнес-эффект невозможно.
| Уровень | Что показывает | Примеры |
|---|
| Охват и использование | Проект действительно дошёл до аудитории | Участие, завершение, активность, использование функции |
| Изменение поведения | Изменился процесс работы | Применение навыка, соблюдение процесса, действия руководителей |
| HR-результат | Изменился показатель персонала | Текучесть, срок адаптации, время найма, отсутствия |
| Бизнес-результат | Изменение имеет экономический смысл | Производительность, выручка, потери, стоимость операции, часы работы |
Что проверить: есть ли в системе измерения хотя бы одна метрика, близкая к бизнес-результату. Высокая посещаемость или оценка 4,8 из 5 сами по себе не показывают окупаемость проекта.
2. Отделите эффект проекта от того, что произошло бы без него
Главная аналитическая задача — построить разумный контрфактический сценарий: какой результат мы ожидали бы без проекта.
04
Не ограничивайтесь сравнением «до / после»
Изменение после запуска показывает динамику, но ещё не вклад проекта.
Допустим, после внедрения новой системы подбора средний срок закрытия вакансии сократился с 40 до 32 дней. Разница — 8 дней. За тот же период могло стать меньше сложных вакансий, измениться рынок кандидатов или вырасти команда рекрутеров. Без дополнительного сравнения нельзя приписать системе все восемь дней.
Наблюдение40 дней → 32 дняСрок закрытия снизился после внедрения.
Вопрос оценкиСколько дней сократилось именно благодаря проекту?Для ответа нужен ориентир, показывающий ожидаемую динамику без вмешательства.
05
Используйте контрольную или сопоставимую группу
Лучший ориентир — похожая группа, на которую проект пока не воздействовал.
Для HR-проектов идеальный эксперимент доступен редко, но это не означает, что сравнивать не с чем. Можно использовать подразделения, площадки, волны внедрения или группы сотрудников со схожими характеристиками. Критично, чтобы группы были сопоставимы по факторам, влияющим на целевую метрику.
Пример · L&D
Продажи участников обучения выросли на 10%
У сотрудников без обучения продажи за тот же период выросли на 7% из-за общего роста спроса. Грубая оценка дополнительного эффекта программы — около 3 процентных пунктов, а не весь наблюдаемый рост в 10%.
Важно: такое сравнение работает только при достаточно похожих группах. Если на обучение направили исключительно лучших продавцов, различия могут отражать отбор участников, а не программу.
Изменение участников−изменение сопоставимой группы=оценка дополнительного эффекта
Если контрольной группы нет: используйте несколько периодов до и после, поэтапный запуск, исторически сопоставимые подразделения или внешний ориентир. Чем слабее дизайн сравнения, тем осторожнее формулировка результата.
Метод оценки
«Разность разностей»: сравнивайте не две цифры, а две динамики
Описанная выше логика называется методом «разность разностей» (Difference-in-Differences). Смысл простой: сравниваем, насколько изменилась группа с проектом относительно собственной исходной точки, и вычитаем изменение сопоставимой группы. Метод не делает группы автоматически одинаковыми, поэтому до расчёта важно проверить их сопоставимость по роли, региону, стажу, исходному результату, нагрузке и другим факторам, связанным с целевой метрикой.
Уровень 1Слабое доказательствоЕсть только сравнение до и после. Корректно говорить: «после запуска показатель изменился».
Уровень 2УмеренноеЕсть несколько периодов и учтена сезонность. Можно говорить, что изменение отличается от обычной динамики.
Уровень 3ХорошееЕсть сопоставимая группа. Появляются основания оценивать дополнительный эффект проекта.
Уровень 4СильноеГруппы сопоставимы, выборка достаточна, внешние факторы проверены. Вывод о вкладе проекта существенно надёжнее.
06
Учтите сезонность, состав группы и внешние события
HR-показатели меняются вместе с бизнесом, рынком и календарём.
Текучесть может снижаться в определённые месяцы каждый год. Срок найма — зависеть от портфеля вакансий. Отсутствия — от сезона заболеваний. Производительность — от загрузки и спроса. До вывода об эффекте проекта полезно составить список факторов, которые изменились одновременно с ним.
| Что изменилось | Что может исказить оценку | Как проверить |
|---|
| Текучесть | Сезон, премии, сокращения, изменение состава штата | Сравнить одинаковые месяцы и сегменты |
| Срок найма | Сложность вакансий, регион, зарплата, объём найма | Сравнивать одинаковые классы вакансий |
| Производительность | Спрос, загрузка, технология, состав команды | Искать сопоставимую группу и учитывать бизнес-факторы |
| Отсутствия | Сезонность, эпидемиологическая ситуация, графики | Сравнивать с исторической сезонной динамикой |
Правило: чем больше внешних изменений произошло одновременно с проектом, тем слабее простое сравнение «до / после».
3. Дайте эффекту время проявиться
Разные результаты возникают с разной скоростью. Неправильный момент измерения способен сделать работающий проект «неэффективным» или, наоборот, создать слишком ранний оптимизм.
07
Заранее задайте лаг эффекта
Момент измерения должен следовать логике проекта, а не дате ближайшего отчёта.
После обучения знания можно проверить в день завершения. Для устойчивого изменения поведения нужны недели или месяцы. Влияние программы руководителей на текучесть команд может проявляться ещё позже. В автоматизации часть эффекта, наоборот, видна быстро — например, сокращение ручных операций после стабилизации процесса.
| Проект | Ранний сигнал | Более поздний результат |
|---|
| L&D | Знания, выполнение заданий | Поведение, производительность, качество |
| Wellbeing | Охват, использование сервисов | Отсутствия, устойчивость, удержание — если есть обоснованный механизм влияния |
| HR-автоматизация | Доля операций в системе | Экономия времени, стоимость процесса, ошибки, SLA |
| Оценка персонала | Охват и качество данных | Качество решений о развитии, перемещениях и преемственности |
Что зафиксировать до старта: когда измеряется ранний сигнал, когда — HR-результат, когда — бизнес-результат. Это защищает от подбора удобного окна после получения данных.
4. Посчитайте размер эффекта, а не только факт изменения
Для бизнеса важна величина результата. Даже статистически устойчивое изменение может быть слишком маленьким для масштабирования проекта.
08
Переведите изменение в понятный масштаб
Проценты должны заканчиваться людьми, часами, операциями или деньгами.
Снижение ранней текучести с 18% до 15% звучит содержательно, но для решения нужны объём аудитории и дополнительный эффект проекта. При 2 000 наймах в год разница в 3 процентных пункта соответствует 60 сотрудникам. Если сопоставимая группа за тот же период улучшилась на 1 пункт, более осторожная оценка дополнительного эффекта — 2 пункта, или около 40 сотрудников.
2 000 наймов×2 п.п. дополнительного эффекта=≈ 40 сотрудников
Показывайте вместе: исходный уровень, новый уровень, абсолютную разницу, относительное изменение, размер аудитории и оценку дополнительного эффекта. Так результат сложнее случайно преувеличить.
Проверка устойчивости
Не перепутайте эффект со случайным колебанием
Одинаковая разница в 3 процентных пункта имеет разный вес при 40 и при 20 000 наблюдений. Чем меньше выборка и чем сильнее показатель колеблется сам по себе, тем осторожнее стоит обращаться с красивыми процентами. Для дорогих решений полезно проверить размер выборки, исторический разброс метрики и доверительный интервал или другую подходящую статистическую проверку. Если данных мало, лучше показать диапазон возможного эффекта, чем одну точную цифру.
09
Переведите эффект в деньги там, где связь можно обосновать
Денежная оценка полезна, если понятна экономика события.
Для автоматизации можно считать высвобождённые часы и стоимость операции. Для найма — стоимость сокращения вакансии или снижения ранних уходов. Для удержания — предотвращённые затраты на замену сотрудников. Для L&D денежная модель обычно сложнее: рост бизнес-результата нужно отделить от других факторов, а затем определить, какую долю эффекта разумно связывать с программой.
Дополнительный результат×экономическая ценность единицы результата=денежный эффект
Пример · HR-автоматизация
Процесс экономит 1 200 часов HR-команды в год
Если полная стоимость часа работы составляет 1 500 ₽, расчётная стоимость высвобождённого времени — 1,8 млн ₽ в год.
Но это ещё не автоматически 1,8 млн ₽ экономии бюджета. Если штат и фонд оплаты труда не сократились, корректнее говорить о высвобождённой мощности команды. Финансовый эффект возникает, когда это время заменяет дополнительные расходы, позволяет обработать больший объём или приводит к фактическому сокращению затрат.
Не смешивайте: экономию денежных расходов, предотвращённые потери, дополнительную выручку и высвобождённое рабочее время. Для руководителя это разные типы эффекта.
Консервативный сценарий4,8 млн ₽Берём нижнюю границу эффекта и осторожную стоимость единицы результата.
Базовый сценарий7,2 млн ₽Используем наиболее обоснованные параметры расчёта.
Оптимистичный сценарий9,1 млн ₽Показываем верхнюю границу, если ключевые допущения реализуются.
Когда нужен диапазон: если стоимость текучести, доля эффекта проекта, будущий объём операций или другие параметры оценены приблизительно. Для инвестиционного решения диапазон обычно честнее одной «точной» суммы.
10
Считайте ROI после определения дополнительного эффекта
ROI не исправляет слабую причинную модель.
Главная ошибка расчётов окупаемости — взять всё улучшение показателя после проекта, перевести его в деньги и назвать финансовым эффектом инициативы. Если часть улучшения связана с рынком, сезонностью или другими изменениями бизнеса, ROI будет завышен.
ROI=(денежный эффект проекта − полные затраты на проект)÷полные затраты на проект × 100%
В затраты стоит включать не только цену поставщика: внутренние часы команды, внедрение, интеграции, коммуникации, обучение пользователей и дальнейшую поддержку, если они существенны.
Дополните ROI сроком окупаемости. ROI показывает отдачу относительно инвестиций, а срок окупаемости — когда накопленный эффект покроет затраты. Для автоматизации и крупных HR-tech проектов эти показатели лучше показывать вместе.
Слабая модельПосле проекта потери снизились на 10 млн ₽ — эффект проекта 10 млн ₽Не проверено, какая часть изменения возникла независимо от инициативы.
Для решенияДополнительный эффект проекта — 4 млн ₽ · полные затраты — 1,5 млн ₽ROI считается уже от той части результата, которую разумно связывать с инициативой.
Сквозной пример: от снижения текучести до ROI
Допустим, компания оценивает программу удержания на аудитории с 2 000 наймов в год. Важно пройти всю цепочку и не принять наблюдаемое улучшение за эффект проекта.
До проекта18% ранней текучести
После проекта15% ранней текучести
Сопоставимая группа18% → 17%
Доп. эффект−2 п.п.
Масштаб≈ 40 уходов
Цена события180 000 ₽
Эффект≈ 7,2 млн ₽
Затраты2,4 млн ₽
(7,2 млн ₽ − 2,4 млн ₽)÷2,4 млн ₽=ROI ≈ 200%
Что может разрушить вывод: одновременно повысили зарплаты, сменились руководители, группы различаются по составу или контрольная группа получила похожее воздействие. В таком случае 2 п.п. нельзя автоматически считать чистым эффектом программы.
Как оценивать разные типы HR-проектов
Единой метрики эффективности нет. Логика доказательства общая, но экономический результат у обучения, wellbeing, автоматизации и оценки возникает по-разному.
| Тип проекта | Что измерять | Где искать бизнес-эффект | Главный риск |
|---|
| L&D | Знания, поведение, качество работы, производительность | Рост результата, снижение ошибок, ускорение выхода на продуктивность | Приписать обучению общий рост бизнеса |
| Wellbeing | Использование, отсутствия, устойчивость, удержание | Снижение потерь рабочего времени и связанных затрат — если связь подтверждается данными | Обещать влияние на текучесть без проверки причинной связи |
| Автоматизация | Время операции, стоимость процесса, ошибки, SLA, объём | Экономия затрат, предотвращённые расходы, высвобождённая мощность | Назвать все сэкономленные часы денежной экономией |
| Оценка | Качество решений, точность отбора, развитие, внутренние перемещения | Снижение ошибок решений, ускорение закрытия ролей, качество кадрового резерва | Оценивать успех количеством проведённых оценок |
| Рекрутмент | Конверсии, срок, стоимость, выход, качество найма, удержание | Сокращение потерь вакансии, стоимости найма и ранних уходов | Оптимизировать скорость в ущерб качеству |
Что показать руководству на одном слайде
Руководителю обычно не нужен весь аналитический процесс. Нужна короткая конструкция, из которой понятно, насколько результат надёжен и что с ним делать.
Пример управленческой карточки
Результат проекта на одном экране
Показатель18% → 15%
Без проекта≈ 17%
Доп. эффект−2 п.п.
Масштаб≈ 40 уходов
Экономика7,2 млн ₽
ROI≈ 200%
Надёжность оценки: средняя / хорошая — зависит от сопоставимости групп
01
Задача. Какой бизнес- или HR-показатель должен был изменить проект.
02
Базовая линия. Каким был показатель до запуска и на каком периоде он рассчитан.
03
Фактическое изменение. Что произошло после запуска в абсолютных и относительных величинах.
04
Ориентир без проекта. Контрольная группа, историческая динамика или другой способ оценить ожидаемый результат без вмешательства.
05
Дополнительный эффект. Какая часть изменения остаётся после учёта общей динамики.
06
Масштаб. Сколько это сотрудников, часов, операций или предотвращённых событий.
07
Экономика. Денежный эффект, полные затраты и ROI — если перевод в деньги обоснован.
08
Ограничения. Что ещё могло повлиять на результат и насколько уверенно эффект можно связывать с проектом.
09
Решение. Масштабировать, продолжить измерение, изменить механику или остановить проект.
Проверка оценки эффекта за 5 минут
Это уже не шаблон презентации, а аудит качества расчёта. Если хотя бы на несколько вопросов ответа нет, лучше ослабить формулировку вывода, чем создавать ложную точность.
01
Был ли целевой показатель определён до запуска проекта?
02
Есть ли несколько точек базовой линии, если метрика заметно колеблется?
03
Есть ли группа или другой ориентир, показывающий, что могло произойти без проекта?
04
Сопоставимы ли аудитории до и после по ролям, регионам, стажу и другим важным признакам?
05
Учтены ли сезонность и крупные изменения бизнеса за период?
06
Прошло ли достаточно времени, чтобы целевой эффект мог проявиться?
07
Показан ли размер эффекта в абсолютных значениях, а не только в процентах?
08
Отделён ли общий рост показателя от дополнительного эффекта проекта?
09
Не превращено ли высвобождённое время в «экономию денег» без фактического финансового эффекта?
10
Включены ли в стоимость проекта внутренние ресурсы, внедрение и поддержку, если они существенны?
11
Понятны ли ограничения анализа и альтернативные объяснения результата?
12
Приводит ли полученный эффект к конкретному управленческому решению?
Ценность оценки — в способности отделить вклад проекта от общей динамики
Для сильного бизнес-кейса недостаточно показать красивую динамику после запуска. Нужны исходная точка, понятный способ сравнения, реалистичный лаг, оценка дополнительного эффекта и его масштаб. Тогда разговор о результатах HR-проекта становится разговором о решении: продолжать ли инвестиции, менять механику или масштабировать инициативу.
Автор: Редакция HR-КУХНИ
Полезные ссылки HR-КУХНИ
Подписывайтесь, читайте и общайтесь в MAX
Подписывайтесь, читайте и общайтесь в Telegram
