как оценить эффективность обучения персонала

5 методов и 5 шагов оценки обучения персонала

Apr 1, 2021 2:03:15 AM / Автор Yva.ai

В 2016 году HR-специалисты компании MW-Light 1 сумели снизить стоимость обучения сотрудников в 21 раз. Как им это удалось?

Исходно расходы компании на тренинги составляли около 4 млн р. в квартал. Внушительная сумма на обучение в MW-Light набегала из-за того, что нужно было регулярно обучать региональных менеджеров работе с обновлённым ассортиментом.

Обучение одного менеджера по продажам обходилось в 3800 рублей в месяц. HR-менеджеры MW-Light предположили, что стоимость можно снизить, провели оценку эффективности обучения и кое-что нашли.

Обучение для региональных сотрудников проводилось в формате выездных тренингов, что довольно дорого. Но оказалось, что многих сотрудников устроило бы дистанционное обучение. А некоторые даже обрадуются такой возможности, потому что тогда можно самим выбирать, когда учиться.

Выбор формата оказался решающим для MW-Light в решении по снижению расходов на обучение персонала. «Теперь мы не тратим деньги на командировочные, авиабилеты, номер в отеле для тренера. Когда рынок выходит новая линейка продуктов, маркетинг собирает по ней презентации, а я на их основе создаю курсы, которые сотрудники проходят в свободном режиме. В месяц это обходится компании 179 рублей на менеджера», – рассказывает Лана Виноградова, руководитель проекта дистанционного обучения MW-Light.

В новых реалиях на первый план выходит грамотная оценка эффективности обучения персонала – функция, которая определяет, что именно можно улучшить в текущей системе обучения сотрудников, чтобы она работала лучше, а стоила дешевле.

С чего HR-у начинать оценку качества обучения? Какие существуют методы оценки эффективности обучения персонала? В чем их преимущества и ограничения? Разбираемся с вопросами цены / качества обучения сотрудников – в новом материале Yva.ai.

Оценка обучения персонала de facto

Как показывает практика, часто оценка обучения персонала сводится к формальному заполнению анкет по окончании тренинга. Слушатели делятся реакцией и выражают благодарность наставнику. Более сложный и глубокий анализ не проводится, потому что HR-менеджеры или руководители:

Однако, чтобы измерить эффективность инвестиций в обучение персонала, поверхностной оценки недостаточно. Тем более этого не хватит, если мы хотим понять, что полезно улучшить в действующей системе обучения сотрудников.

Сегодня существует много способов оценить эффективность обучения персонала – начиная с классической модели Киркпатрика и заканчивая современными комбинированными системами и методами.

Рассмотрим 5 наиболее актуальных методов оценки эффективности обучения персонала, встречающихся в современной практике HR-ов и попробуем разобраться, в чём их отличия, возможности и ограничения.

Оценочная модель Дональда Киркпатрика

Д. Киркпатрик называет оценку неотъемлемой частью цикла проведения обучения – наряду с постановкой целей, выбором участников, формированием расписания и другими этапами. По его мнению, оценка позволяет понять, насколько программа соответствует потребностям обучающихся сотрудников.

С помощью оценки эффективности обучения персонала можно определить, подходит ли выбранный преподаватель группе учащихся: применяет ли он эффективные методы передачи знаний, способствуют ли его инструменты обучения поддержанию интереса участников, улучшению коммуникации и решению непосредственных задач бизнеса.

Модель Киркпатрик оценивает обучение (тренинг) по четырёхуровневому алгоритму, где важна каждая ступень, которая оказывает влияние на следующий этап.

Шаг #1 Реакция (Reaction) – выясняем у слушателей, понравился ли им тренинг. В качестве инструмента используются стандартные опросники. В анкету можно включить вопросы об актуальности программы, доступности подачи материала, организации занятий и т. д.

Шаг #2 Научение (Learning) – определяем, какие знания приобрели слушатели в процессе обучения, есть ли прогресс в их компетенции и мотивации. Определитесь с критериями эффективности обучения. Воспользуйтесь специальными тестами и практическими заданиями. Ещё можно провести деловые игры или, например, предложить коллегам кейс-тесты для оценки усвоения знаний.

Шаг #4 Результаты (Results) – анализируем результаты, достигнутые специалистами после обучения. Сравниваем данные «до и после» по ключевым показателям для этих специалистов: например, заявкам, продажам, привлечённым клиентам, удержанию существующих клиентов, удовлетворённости клиентов и т. п.

Важное преимущество оценочной модели Киркпатрика в том, что она даёт визуальное представление об эффективности обучающей программы в компании. К ограничениям модели можно отнести трудности в измерении на уровне оценки поведения, а также неготовность некоторых руководителей проходить оценку и работать с коучами. И самое главное – отказ от расчета окупаемости обучения.

Пятиуровневая модель Дж. Филипса (ROI)

Впоследствии программа оценки обучения персонала Киркпатрика была усовершенствована, расширена и дополнена экспертом в области управления персонала Джеком Филипсом. В частности, появился пятый уровень – расчёт финансовой отдачи от инвестиций компании в обучение.

Стоит отметить, что реализация модели Филлипса возможна только в компаниях, где ведется управленческий и финансовый учёт. Сам Джек Филлипс советовал применять этот метод оценки только с наиболее дорогостоящими и долгосрочными образовательными проектами, так как к ограничениям метода относят его чувствительность к точности и системности данных, что делает его ресурсоёмким.

Системная модель Стафлебима (CIPP)

В 1971 году профессор американского университета Мичиган Дэниел Стафлебим совместно с коллегами разработал системную модель оценки CIPP. Особенность этой модели оценки обучения персонала заключается в том, что она позволяет оценить не только полученный результат обучения, но и сам процесс.

Оценка обучения по системе CIPP состоит из 4 этапов.

На первом этапе, который называется context evaluation и переводится как оценка процесса, происходит выбор цели развития и выявление потребности персонала в обучение.

На втором этапе – Input evaluation, означающим оценку на входе, оцениваются

возможности, которыми располагает компания (бюджет, сроки и т. п.), а также рассматриваются различные альтернативы обучения – повышение квалификации персонала, подготовка и переподготовка сотрудников.

Выбираются методы обучения: микрообучение (microlearning), наставничество, тренинги, семинары, карьерное консультирование и т. п. Подбираются оптимальные программы. Этот этап отвечает на вопрос «Как нам это сделать?».

На четвертом этапе происходит product evaluation (оценка продукта) – оценка результата обучения. Последний этап завершается ответом на вопрос «Программа обучения работала?». Становится ясно, удалось ли компании достигнуть заявленных целей или нет.

К ограничениям системной модели Стафлебима относят отсутствие оценки непосредственно перед началом обучения, что делает невозможным подсчет окупаемости проекта. Также модель имеет недостаточную детализацию и нехватку рекомендаций по применению каждого из своих этапов.

Однако HR-специалист может воспользоваться моделью для оценки процесса внутреннего обучения, например, для оценки развития навыков клиентоориентированности менеджеров по продажам. Подобный кейс описан в книге специалиста по управлению, бизнес-тренера Елены Макоты «Игра стоит свеч. Как оценить эффективность бизнес-тренинга?»10.

Целевой подход Ральфа Тайлера

«Отец образовательной оценки» – как любят называть американского педагога Ральфа Тайлера – в 1942 году представил миру свой целевой оценочный подход Tyler’s Objectives Approach. Автор подхода сделал упор на постановку чётких целей и задач обучения, считая их размытость причиной подавляющего числа проблем в сфере образования.

Всё начинается с выбора целей и задач обучения и их систематизации. Следующий этап занимает поиск проявления выбранных целей в трудовом поведении сотрудников. Далее определяются ситуации, при которых они могут быть достигнуты.

На четвёртом этапе определяются со способом оценки обучения. Последний этап является решающим: при обнаружение расхождения между запланированными и итоговыми результатами программа корректируется, после чего оценочный цикл повторяется снова.

Преимуществом подхода Тайлера является высокая ориентированность на точную постановку целей, а мы уже не раз упоминали, что целеполагание определяет достижимость результатов при решении подавляющего большинства бизнес-задач.

Оценочная модель Майкла Берда (CIRO)

Оценка обучения по модели CIRO состоит из 4 элементов – content evaluation (оценка содержания), input evaluation (оценка входов), reaction evaluation (оценка реакции), outcome evaluation (оценка полученных результатов).

На этапе C выбираются цели и задачи обучения.

На этапе I оцениваются ресурсы компании, а также подбираются оптимальные программы обучения, критерии оценки эффективности и будущих результатов.

На этапе R запрашивается обратная связь. Это может быть выборочный опрос среди сотрудников, которые прошли обучение.

На этапе O подводятся итоги, полученные результаты сравниваются с плановыми.

Модель CIRO во многом схожа с моделью оценки обучения Киркпатрика. Согласно ей оценка эффективности обучения также основывается на показателях удовлетворённости сотрудников процессом обучения и измерение влияния обучения на различные аспекты деятельности компании.

Модель Берда близка к системной модели Стафлебима CIPP и имеет схожие ограничения – трудности в проведение регулярной оценки сотрудников, проходящих длительные программы обучения, а также отсутствие ясности и конкретности в процедуре оценки результатов. С той лишь разницей, что Берд оценивает реакцию обучающихся, а не само обучение.

С чего начать оценку эффективности обучения персонала? Как выбрать оптимальный метод?

Шаг #1 Цель

HR-у важно понимать, что он будет делать с полученными в ходе оценки эффективности обучения результатами. Поэтому первый и главный вопрос, который стоит задать: зачем нам нужна эта процедура? Важно ответить не только с позиции менеджера по персоналу, но и с позиции руководства и сотрудников, проходящих обучение.

Например, вы оцениваете эффективность тренинга по влиянию и убеждению в коммуникации. Руководителя может интересовать:

Сотрудникам же важно, помогает ли обучение легче и эффективнее добиваться нужных показателей по KPI, развиваться профессионально и добиваться новых карьерных достижений.

Важно помнить, что обучение должно соответствовать стратегическим целям компании, например, выход на новый рынок или увеличение прибыли, и решать конкретные задачи в разрезе этих целей. По итогам обучения далеко не последним аспектом оценки является соответствие приобретённых навыков и знаний сотрудников этим целям.

Шаг #2 Критерии

Критерии оценки очень сильно зависят от её предмета. Обратите внимание на то, что вы собираетесь оценивать: тренеров, слушателей, процесс обучения, результаты или всё вместе. Чем больше аспектов, тем больше критериев оценки вам нужно и тем сложнее система.

Конкретизируйте, что вы понимаете под продуктивностью обучающей программы и в чём она выражается. Критерии оценки эффективности обучения нужно довести до сведения всех участников образовательного проекта: руководства, слушателей, тренеров, HR-ов.

Шаг #3 Метод

Сравните между собой несколько методов оценки обучения. 5 из них мы коротко описали в этом материале, но это далеко не полный перечень возможных подходов. Изучите их преимущества и ограничения, обратите внимание, как это соотносится с вашей основной целью оценки.

Если в первую очередь интересует качество обучения, полезны методы, глубоко оценивающие образовательный процесс. А если, например, финансовый результат, то подойдут методы, включающие оценку монетизации новых навыков сотрудников.

Шаг #4 Бюджет

Расходы на оценку обучения персонала – важный фактор при выборе метода, будь то самостоятельная реализация или оценка с привлечением независимого эксперта. Некоторые методы требуют вложения настолько значительных ресурсов: финансовых, временных и трудовых – что у руководителей вызывает вопросы окупаемость уже самой оценки, а не обучения персонала.

В случаях, если вы уверены, что для оценки обучающей программы целесообразно применить сложный и ресурсоёмкий метод, полезно делать SWOT-анализ. Оцените сильные / слабые стороны решения, возможности и угрозы. Это поможет найти нужные аргументы, чтобы убедить руководителя. Или покажет, что применить более простые и доступные методы в вашем случае – более разумно.

Шаг #5 Реализация

После того, как проект оценки обучения персонала будет реализован, его итоги должны быть озвучены всем участникам.

Оценка прошла хорошо, если большинство коллег так или иначе высказали мнение о том, как прошла обучающая программа, что хорошего / полезного из неё вынесли обучающиеся и как изменился опыт сотрудников после обучения.

На основе обратной связи HR-специалисты, тренеры и руководители смогут принимать решения о том, что изменить в обучающей программе. Это может быть формат, как сделали в MW-Light. Или – акцент на практику. Или – системный подход. Или – геймификация, чтобы помочь закреплять навыки.

Источник

Расчет эффективности обучения персонала: от опросников к ROI

«Предоставляем бесплатное обучение», — когда-то возможности написать так в вакансии было достаточно, чтобы убедить руководство поддержать запуск корпоративного обучения. Теперь вопросов все больше, и главный из них: «Сколько обучение сотрудников помогает заработать?». Только в США в 2018 году общие расходы на обучение составили 87,6 млрд долларов. Справедливо, что руководители компаний хотят знать, как окупаются инвестиции.

Из этой статьи вы узнаете о методологии расчёта рентабельности корпоративного обучения (ROI) и получите инструкцию, как это сделать на практике. Но сперва пройдите короткий тест и узнайте, готова ли ваша компания начать измерять ROI обучения персонала.

Что такое ROI обучения и зачем его измерять

ROI — это показатель возврата вложенных средств и индикатор эффективности инвестиций. Суперсила коэффициента ROI в том, что он знаком финансистам и вызывает доверие у руководства компании.

Смысл расчёта ROI заключается в переводе затрат на обучение и выгод от него в одинаковые единицы измерения — рубли, доллары или другую валюту. Это здорово, потому что тогда возможно провести прямое сравнение и сделать однозначный вывод об эффективности обучения для бизнеса.

Формула расчёта ROI выглядит так:

Положительный коэффициент означает что вы отработали в плюс, отрицательный — обучение идёт в убыток.

Пример 1. Компания «Бета» вложила в обучение сотрудников 650 000 рублей. Благодаря этому удалось повысить продажи и заработать на 1 750 000 рублей больше.

ROI = (1 750 000 — 650 000)/650 000*100 = 169%

Получается, на каждый вложенный рубль компания получила 2 рубля 69 копеек.

Пример 2. Компания «Гамма» потратила на обучение 250 000 рублей. Обученные сотрудники принесли компании дополнительные 75 000 рублей.

В этом примере ROI отрицательный. Это означает, что получение дополнительных 75 тысяч прибыли не стоило ресурсов, вложенных в программу. Овчинка выделки не стоила.

Пока всё просто, в чём подвох?

Перемножать и делить числа легко, когда речь идёт об абстрактных примерах. Но на практике узнать, сколько удалось заработать благодаря изучению какого-то курса, — сложно.

Здесь стоит напомнить, что сама по себе формула расчёта ROI — не магический шар, который отвечает на любые вопросы. Допустим, британские учёные сообщили, что ROI последнего курса составил 7%. Какой из этого следует вывод?

Это хорошо или плохо?

Что помешало добиться большего ROI?

Как можно повысить ROI?

Точно ли результат получен благодаря обучению сотрудников, а не новой рекламной кампании?

Без дополнительных данных коэффициент ROI лишь демонстрирует экономический эффект. Что само по себе уже неплохо, но для правильного толкования результатов требуется комплексный подход к оценке эффективности обучения. Давайте рассмотрим этот подход в деталях.

Методология оценки эффективности обучения: модели Киркпатрика и Филлипса

Самая известная модель для измерения эффективности обучения — четырехуровневая модель Дональда Киркпатрика. Основная претензия в адрес Киркпатрика заключалась в его убеждении, что измерять результаты обучения в деньгах невозможно или не имеет смысла. Вот почему позднее Джек Филлипс создал свою 5-уровневую модель ROI.

Сравнение моделей Киркпатрика и Филлипса

Филлипс доработал модель Киркптарика, добавив в неё Уровень 0 (Затраты) и Уровень 5 (ROI) — те самые конкретные цифры, которые хочет видеть заказчик. Кроме того, Филлипс предложил способы изоляции результатов обучения от влияния других факторов, например, маркетинга. Это серьёзно повышает достоверность оценки.

«Все решения работают в комплексе, но важно знать, в какой степени каждое из них повлияло на конечный результат. Если вы не знаете, что именно привело к результату, вы не можете управлять ситуацией. Уж поверьте, маркетологи сумеют составить отчёт об отдаче от рекламы, промо-акций и даже эффекте от смены ценовой политики. В этом плане маркетинг сильно обгоняет обучение. Если мы будем бездействовать, как предлагает Киркпатрик, мы потеряем доверие и поддержку».

Response to LinkedIn Post: Kirkpatricks vs. Phillips

Как измерить ROI обучения

Измерение ROI по методике Филлипса состоит из четырёх этапов: планирование оценки, сбор данных, анализ и подготовка отчёта.

Последовательность действий при измерении ROI. Источник: ROI Institute

1. Определяем цели обучения

Чётко поставленные и зафиксированные цели гарантируют, что в процессе сбора данных вы будете задавать правильные вопросы и ничего не упустите. Патти Филлипс в своей книге «The Bottomline on ROI» рекомендует прорабатывать цели сверху вниз, начиная с желаемого экономического результата и заканчивая реакцией учащихся на учебный курс.

За 12 месяцев сократить объём брака на 20%

Операторы линии в состоянии своевременно распознать потенциальный брак изделия.

Применяют систему «андон» на практике в случае необходимости.

В случае обнаружения серьёзных проблем, в полном объёме соблюдают четыёхшаговую инструкцию.

Рейтинг курса не ниже 9 баллов из 10 возможных.

Патти Филлипс рекомендует проводить исследования первого уровня (Реакция) для 90-100% учебных программ, а вот измерение ROI необходимо лишь в 5-10% случаев.

2. Разрабатываем план

На этом шаге создаём и утверждаем три документа: план сбора данных, план по анализу данных и план по расчёту ROI — по этим документам вы будете контролировать ход проекта и оценивать свои успехи.

Что важно прописать в плане:

способы их достижения;

инструменты (например, СДО);

ответственных за выполнение каждого пункта.

На сайте ROI Institute можно бесплатно скачать шаблон плана проекта расчёта эффективности учебной программы и другие полезные ресурсы.

Если вы хорошо потрудитесь, то получите проработанную пошаговую тактику реализации проекта — её необходимо согласовать с клиентом или руководством. Так вы ещё раз убедитесь, что ваши ожидания совпадают, и договоритесь о критериях признания каждого этапа выполненным.

3. Собираем данные во время обучения и после него

На этом шаге работаем по классической методике Киркпатрика. Во время обучения оцениваем реакцию учащихся на изученные материалы и то, как новые знания усвоились. После завершения обучения отслеживаем, как полученные знания применяются на практике и какой результат это приносит.

Для этого можно использовать:

Пример вопросов из листа реагирования (Уровень 1)

Пример измерения изменений в поведении (Уровень 4)

4. Изолируем эффект от обучения

На конечный результат бизнеса влияет огромное число факторов: от ценовой политики до харизмы отдельных сотрудников. Изоляция — критически важный шаг, который помогает отделить заслуги обучения от влияния других факторов и обеспечивает достоверность всей методики.

Наиболее доступные техники изоляции:

Контрольная группа: вы запускаете пилотное обучение на отдельных группах участников и сравниваете результат с показателями контрольной группы, которая не участвует в программе.

Оценка участников: вы предлагаете самим участникам оценить, в какой степени обучение повлияло на их результаты.

Оценка руководителей подразделений или супервайзеров: вы просите руководителей оценить влияние обучения их команды на конечный результат группы.

5. Переводим результаты в деньги

На этом шаге присваиваем ценность в денежном эквиваленте каждому виду результатов, полученных после обучения. Так вы сможете сравнить их с затратами. Точные данные — выработка, качество и время, — как правило, можно без проблем конвертировать в деньги. Например:

дополнительные продажи → прибыль от этих продаж;

экономия времени сотрудника → рассчитываем стоимость сэкономленного времени исходя из среднего размера зарплаты (стоимость часа работы умножаем на количество сэкономленных часов сотрудника);

снижение времени простоя оборудования → оцениваем по затратам прошлых лет;

снижение текучки персонала → средства, сэкономленные на подборе персонала и адаптации;

повышение качества → средства, сэкономленные благодаря снижению процента брака.

6. Оцениваем затраты на программу

Подсчитываем все прямые и сопутствующие расходы, связанные с проведением обучения. Сюда входят зарплаты преподавателей, расходы на СДО, траты на пиар учебной программы, покупка оборудования и т.д. Не забудьте включить и расходы на проведение оценки эффективности программы.

7. Рассчитываем ROI по формуле

Как правило, для краткосрочных программ ROI рассчитывается за год. Но в отдельных случаях, когда вы реализуете масштабную программу (например, запускаете корпоративный университет), достижение максимального эффекта может занять несколько лет. Это стоит учитывать.

8. Определяем нематериальные выгоды

В большинстве случаев учебные программы помимо финансовых выгод приносят и нематериальные выгоды. Например, улучшение имиджа организации, рост сплочённости коллектива, повышение лояльности сотрудников компании. Проблема в том, что эти результаты субъективны.

Попытка конвертировать, скажем, командный дух в деньги для использования в расчёте ROI может серьёзно навредить достоверности и убедительности итоговых результатов. Лучше получить меньший коэффициент ROI с сильным отчётом о нематериальных выгодах, чем продемонстрировать высокий ROI, рискуя подорвать доверие ко всей оценке программы.

Если сомневаетесь, нужно конвертировать показатель или нет, воспользуйтесь подсказкой от ROI Institute:

9. Готовим отчёт и представляем результат

Отчёт о результатах — последний по списку, но не по важности шаг в оценке учебной программы. Подготовка отчёта и его презентация требуют тщательного планирования, ведь на кону дальнейшая судьба проекта. На этом этапе у вас две основные задачи:

А) Подготовить отчёт для разных целевых аудиторий. Разной аудитории нужна разная информация, поэтому заранее продумайте, какие отчёты потребуются. Хорошая идея — готовить сразу две версии каждого отчёта: краткую и подробную. Так вы облегчите понимание результатов, за что вам точно будут признательны.

Заказчики, высшее руководство

Полный отчёт о проведении оценки программы обучения

Источник