Добавить в корзинуПозвонить
Найти в Дзене

Как я оцениваю эффективность обучения — не по ощущениям, а по цифрам

После каждого тренинга в большинстве компаний происходит одно и то же. Раздают анкеты. Люди ставят галочки: «содержание — отлично», «тренер — очень хорошо», «готов рекомендовать — да». Руководитель смотрит на результаты, видит в среднем четыре с половиной из пяти — и делает вывод: тренинг прошёл успешно. Через квартал цифры продаж не изменились. Или изменились — но непонятно, из-за тренинга или из-за сезонности. Деньги на обучение освоены, отчёт написан, галочка поставлена. Я долго работала именно так. Пока не задала себе неудобный вопрос: а что, собственно, я измеряю этими анкетами? Удовольствие людей от мероприятия. Не более. Удовольствие от тренинга и польза от тренинга — это разные вещи. Иногда они совпадают. Иногда нет. Приятный тренер с интересными историями может дать высокий балл в анкете и нулевой прирост в конверсии. Жёсткий разбор реальных звонков может вызвать дискомфорт — и дать реальный рост через три недели. Мне нужна была система, которая измеряет не удовольствие, а ре
Оглавление

После каждого тренинга в большинстве компаний происходит одно и то же. Раздают анкеты. Люди ставят галочки: «содержание — отлично», «тренер — очень хорошо», «готов рекомендовать — да». Руководитель смотрит на результаты, видит в среднем четыре с половиной из пяти — и делает вывод: тренинг прошёл успешно.

Через квартал цифры продаж не изменились. Или изменились — но непонятно, из-за тренинга или из-за сезонности. Деньги на обучение освоены, отчёт написан, галочка поставлена.

Я долго работала именно так. Пока не задала себе неудобный вопрос: а что, собственно, я измеряю этими анкетами? Удовольствие людей от мероприятия. Не более.

Удовольствие от тренинга и польза от тренинга — это разные вещи. Иногда они совпадают. Иногда нет. Приятный тренер с интересными историями может дать высокий балл в анкете и нулевой прирост в конверсии. Жёсткий разбор реальных звонков может вызвать дискомфорт — и дать реальный рост через три недели.

Мне нужна была система, которая измеряет не удовольствие, а результат. Я её построила — методом проб, ошибок и переосмысления того, что вообще считать «результатом обучения».

Расскажу, как она устроена.

Почему «всем понравилось» — не оценка

Начну с разбора логики, потому что без этого понимания система оценки кажется избыточно сложной.

Есть классическая модель оценки обучения, которую разработал американский исследователь Дональд Киркпатрик ещё в 1950-х. Она описывает четыре уровня, на которых можно измерять результат.

Уровень первый: реакция. Понравилось ли людям? Насколько они довольны? Это то, что измеряют анкеты обратной связи после тренинга.

Уровень второй: усвоение. Что люди узнали? Какие знания и концепции усвоили? Это измеряется тестами, кейсами, устными проверками.

Уровень третий: поведение. Изменилось ли то, как люди работают? Применяют ли новые навыки в реальной работе? Это измеряется наблюдением и анализом звонков.

Уровень четвёртый: результаты. Изменились ли бизнес-показатели? Выросла ли конверсия, средний чек, скорость сделки?

Большинство компаний измеряют только первый уровень. Иногда — второй. До третьего и четвёртого доходят единицы. При этом именно третий и четвёртый уровни отвечают на вопрос, ради которого всё и затевалось.

Я не говорю, что первый уровень бесполезен. Если людям совсем не понравилось — это сигнал, что что-то пошло не так с форматом или тренером. Но если понравилось — это ещё ничего не значит про реальный результат.

Поэтому я измеряю все четыре уровня. По-разному, с разной интенсивностью — но все четыре.

Уровень первый: реакция — но не анкета

Анкету с галочками я не отменила полностью. Но изменила её до неузнаваемости.

Вместо вопросов «оцените тренера по шкале от 1 до 5» — три открытых вопроса.

Первый: что из того, что было на обучении, вы планируете применить в работе на этой неделе — конкретно?

Второй: что вызвало наибольшее сопротивление или несогласие — и почему?

Третий: чего не хватило, чтобы вы вышли с полной готовностью применять?

Это занимает десять минут и даёт мне принципиально другую информацию. Первый вопрос — намерение применить, конкретное. Второй — где есть внутренние барьеры, которые нужно проработать. Третий — что нужно добавить в посттренинговую работу.

Эти ответы я читаю в тот же день. И если вижу, что три человека из семи не могут назвать ни одного конкретного намерения — это сигнал, что тренинг был слишком абстрактным. Действую до того, как эффект успел испариться.

Уровень второй: усвоение — без теста, через применение

Классический тест после тренинга — это проверка памяти, а не навыка. Человек, который запомнил правильный ответ на вопрос «из каких этапов состоит техника SPIN», не обязательно умеет ею пользоваться.

Я измеряю усвоение через практическую задачу. Через три-пять дней после тренинга даю каждому менеджеру кейс — реальную ситуацию из нашей практики — и прошу разобрать её письменно или устно: как бы ты действовал, применяя то, что изучали?

Это не экзамен. Я так и говорю: «Это не проверка, это способ посмотреть, как ты понял материал, и помочь тебе если что-то непонятно». Атмосфера важна — если человек чувствует, что его оценивают, он закрывается.

Разбор кейса занимает пятнадцать-двадцать минут. Зато я вижу: человек понял концепцию и может применить её к конкретной ситуации — или он выучил термины, но за ними нет понимания.

Второй инструмент на этом уровне — разговор через неделю после тренинга: «Что из того, что изучали, оказалось неожиданным или непривычным? Что показалось трудным для понимания?» Люди охотно отвечают, когда вопрос задан с искренним интересом, а не в режиме контроля.

Уровень третий: поведение — главный уровень измерения

Это самый важный уровень. И именно здесь большинство руководителей останавливаются, сказав себе: «Ну, я же слышу звонки, вижу как работают — всё примерно понятно».

Примерно — это не измерение. Это ощущение.

Я измеряю поведенческие изменения через конкретные наблюдаемые показатели. До тренинга я фиксирую базовую линию — то, как люди ведут себя сейчас. После — сравниваю.

Вот как это работает на практике.

Шаг первый: до тренинга — зафиксировать базовую линию.

За одну-две недели до тренинга я прослушиваю по три-пять звонков каждого менеджера и фиксирую в простой таблице несколько конкретных поведенческих маркеров. Набор маркеров зависит от темы тренинга.

Если тренинг по работе с возражениями — фиксирую: задаёт ли менеджер уточняющий вопрос перед ответом на возражение (да/нет), сколько секунд держит паузу после возражения клиента, возвращается ли к ценности после возражения по цене.

Если тренинг по выявлению потребностей — фиксирую: соотношение вопросов и утверждений в первой части разговора, использует ли открытые вопросы, перефразирует ли слова клиента.

Никакой субъективщины — только то, что можно услышать и посчитать.

Шаг второй: через три и шесть недель после — повторное измерение.

Те же маркеры, та же методика, те же люди. Три недели — промежуточный срез, когда навык ещё осваивается. Шесть недель — итоговый, когда освоение должно произойти.

Сравнение до и после по каждому маркеру даёт конкретную картину: что изменилось, у кого, насколько. Без ощущений — только данные.

Что я делаю с этими данными.

Во-первых, показываю каждому менеджеру его собственную динамику. «Три недели назад ты задавал уточняющий вопрос перед ответом на возражение в двух звонках из десяти. Сейчас — в семи из десяти. Это реальный сдвиг». Это мощная мотивация продолжать.

Во-вторых, вижу, у кого изменений нет — и работаю с этим отдельно. Не давлю, а разбираюсь: что мешает, что непонятно, нужна ли другая форма поддержки.

В-третьих, получаю объективную оценку самого тренинга. Если у шести из восьми человек нет поведенческих изменений по ключевым маркерам — проблема либо в тренинге, либо в посттренинговой работе. Это сигнал разобраться, а не продолжать как прежде.

Уровень четвёртый: результаты — как считать честно

Это самый соблазнительный уровень — и самый опасный для ошибочных выводов.

Соблазн: посмотреть на конверсию после тренинга и сказать «выросла — значит тренинг сработал». Или: «не выросла — значит не сработал».

Проблема в том, что конверсия зависит от десятков факторов. Сезонность, качество базы, изменения в продукте, активность конкурентов, общий рынок. Приписать изменение конверсии тренингу — это как сказать, что сегодня хорошая погода потому что вы надели красный свитер.

Поэтому я измеряю результаты аккуратно — через несколько принципов.

Принцип первый: смотреть на конкретные этапы воронки, а не на итоговую конверсию.

Если тренинг был по работе с возражениями на этапе коммерческого предложения — я смотрю на конверсию именно с этого этапа в следующий. Не на общую конверсию из лида в сделку — там слишком много переменных. А на конкретный переход, который должен был улучшиться.

Это даёт более честную картину. Если конверсия с КП в договор выросла с 28% до 36% — и при этом поведенческие маркеры третьего уровня тоже показывают изменение — вот это уже можно связывать с тренингом.

Принцип второй: смотреть на динамику, а не на точечный результат.

Один месяц после тренинга — это слишком мало и слишком много переменных. Я смотрю на три месяца. И сравниваю не с предыдущим месяцем, а с аналогичным периодом прошлого года — чтобы убрать сезонный фактор.

Принцип третий: сравнивать тех, кто изменил поведение, с теми, кто не изменил.

Это самый честный способ изолировать эффект обучения. Если менеджеры, у которых зафиксированы поведенческие изменения третьего уровня, показывают рост конверсии — а те, у кого изменений нет, не показывают — это сильный аргумент в пользу того, что именно навык влияет на результат.

Я веду такое сравнение в простой таблице: поведенческий сдвиг — да/нет, изменение конверсии на целевом этапе — плюс/минус/ноль. Паттерны видны без сложной статистики.

Принцип четвёртый: смотреть на скорость, а не только на конверсию.

Это показатель, который часто упускают. Если после тренинга по переговорам конверсия не выросла, но цикл сделки сократился с сорока дней до двадцати восьми — это тоже результат. Деньги приходят быстрее. Это ценность, которая измеряется деньгами, но не всегда видна в обычных конверсионных отчётах.

Я добавила в свою систему измерений средний цикл сделки как отдельный показатель. И несколько раз именно он показывал реальный эффект тренинга — там, где конверсия казалась неизменной.

Один инструмент, который изменил всё: карта базовой линии

Отдельно хочу рассказать об инструменте, который на первый взгляд кажется лишней работой — но на практике экономит больше, чем требует.

Я начала вести то, что называю картой базовой линии по каждому менеджеру. Это живой документ, который обновляется раз в квартал.

В нём — несколько блоков.

Поведенческие маркеры: конкретные наблюдаемые действия в звонках. Не «хорошо работает с возражениями» — а «задаёт уточняющий вопрос в X% случаев», «держит паузу после цены», «возвращается к ценности без снижения».

Этапные конверсии: показатели по каждому переходу в воронке — не итоговые, а поэтапные. Обновляются ежемесячно.

Скорость: средний цикл сделки, среднее время ответа на входящий, время от первого контакта до КП.

Субъективная оценка собственной работы: раз в квартал я прошу каждого менеджера оценить по десятибалльной шкале несколько компетенций — работу с возражениями, выявление потребностей, финальные переговоры. Это не для отчёта — это для сравнения самооценки с моими наблюдениями. Расхождение часто говорит больше, чем сами цифры.

Когда у меня есть базовая линия — любое обучение можно оценить честно. Потому что есть точка отсчёта. Без неё я могу только сказать «кажется, стало лучше». С ней — «по трём из четырёх поведенческих маркеров есть улучшение, конверсия с КП в договор выросла на восемь процентных пунктов, цикл сделки сократился на шесть дней».

Это разные разговоры. С собственником, с командой, с собой.

Как я считаю ROI обучения — и нужно ли это делать

Когда у вас есть данные четвёртого уровня, можно попробовать посчитать возврат на инвестиции в обучение. Это звучит сложно, но базовая логика простая.

Берёте прирост выручки за квартал, который можно обоснованно связать с изменением конверсии. Вычитаете стоимость тренинга и время, потраченное на него командой в рабочие часы. Делите результат на вложения.

Я делаю этот расчёт приблизительно — без претензии на академическую точность, потому что изолировать влияние одного тренинга на выручку невозможно полностью. Но порядок цифр всегда полезен.

Один из тренингов по работе с возражениями у меня стоил 90 тысяч рублей. Через квартал конверсия с КП в договор выросла с 31% до 39% у шести менеджеров, у которых зафиксированы поведенческие изменения. При среднем чеке в 180 тысяч и объёме КП около двадцати в месяц на команду — это примерно восемь дополнительных сделок в квартал. При марже 40% это около 575 тысяч рублей дополнительной маржи.

Минус 90 тысяч затрат, минус время команды на тренинг и посттренинговую работу — примерно ещё 60 тысяч в часах. Итого ROI — около четырёх к одному.

Это не точная наука. Но это не «нам понравилось» тоже.

Когда я принесла такой расчёт собственнику бизнеса — разговор об обучении стал другим. Не «зачем тратим деньги» — а «куда вложить следующие».

Что делать, если данных нет

Последний честный вопрос: а что если у вас нет CRM, нет записей звонков, нет истории конверсий по этапам — и базовую линию построить просто не из чего?

Начинайте с того, что есть. Даже если у вас нет ничего, кроме итоговой конверсии «лид-сделка» — это уже точка отсчёта. Даже если записей звонков нет — можно начать слушать и фиксировать маркеры руками, по три звонка в неделю на человека. Это небыстро, но это реальные данные.

Система измерения не строится за один день. Она строится постепенно — по мере того, как накапливаются данные и появляется привычка их фиксировать.

Но начинать нужно до следующего тренинга. Потому что без базовой линии любой тренинг — это действие в темноте. Вы не узнаете, что изменилось, если не знаете, что было до.

Самое простое, что можно сделать прямо сейчас: выбрать один этап воронки, который хотите улучшить обучением, и зафиксировать текущую конверсию на нём. Одна цифра. Это уже начало системы.

Расскажите в комментариях: как вы сейчас оцениваете эффективность обучения в своей команде? Есть ли у вас метрики, которые реально показывают результат — или пока работаете по ощущениям? Буду рада обсудить — такие разговоры часто дают идеи, до которых в одиночку не доходишь.

Искренне и надолго,
Екатерина Архарова
Больше полезных материалов в моем канале

Инструменты РОПа. Архарова
MAX – быстрое и легкое приложение для общения и решения пов…