Оценка эффективности обучения является важным этапом процесса обучения персонала. Ее смысл состоит в том, чтобы установить, какую пользу от обучения работников получает организация, или выяснить, является ли одна форма обучения более эффективной, чем другая. Раз на учебу затрачены деньги, то следует точно знать, что же взамен сможет получить организация.

Информацию, полученную в результате оценки эффективности конкретных учебных программ, необходимо анализировать и использовать при подготовке и проведении аналогичных программ в будущем. Оценка эффективности обучения работников организации позволяет постоянно работать над повышением качества обучения, избавляясь от таких учебных программ и форм обучения, которые не оправдали возложенных на них надежд.

В идеале оценку эффективности обучения следует производить постоянно, в качественной либо количественной форме оценивая влияние обучения на такие показатели работы организации, как продажи, качество продукции и услуг, производительность труда, установки работников и др.

Основная причина, по которой организация должна оценивать эффективность учебных программ, - это выяснение того, в какой степени в итоге были достигнуты цели обучения. Учебная программа, которая не позволяет достичь требуемого уровня рабочих показателей, сформировать необходимые навыки или установки, должна быть изменена или заменена другой программой. Не всегда организация после обучения своих работников добивается желаемого результата. В этом случае возникает необходимость выявления причин неуспеха. Даже хорошие программы могут потерпеть неудачу по многих причинам: могут быть поставлены нереалистичные или слишком общие цели обучения, может быть плохо организован сам процесс обучения, возможны срывы по причинам, находящимся вне контроля тех специалистов, которые занимаются организацией обучения (например, болезнь преподавателя, поломки оборудования или ошибки людей) и др. Выявление причин, по которым данная программа обучения потерпела неудачу, и их анализ, позволяют предпринять в будущем необходимые корректирующие меры.

Оценка эффективности обучения может проводиться с помощью тестов, опросников, заполняемых обучающимися, экзаменов и т.п. Оценивать эффективность обучения могут как сами обучающиеся, так и руководители, специалисты отделов обучения, преподаватели, эксперты или специально созданные целевые группы.

Можно выделить пять критериев, обычно используемых при оценке эффективности обучения. Данные представлены на рисунке 1.5.

Рассмотрим эти критерии.

Мнение обучающихся. Выяснение мнения обучающихся о той учебной программе, по которой они только что прошли обучение, о ее полезности, интересности является принятой практикой во многих организациях.

Рисунок-Критерии, используемые при оценке эффективности обучения

Это предполагает выяснение их мнения по следующим вопросам:

Качество преподавания (квалификация преподавателя, стиль преподавания, используемые методы обучения);

Общие условия и обстановка во время обучения (физические условия, отсутствие отвлечений и т.д.);

Степень достижения целей обучения (соответствие ожиданиям слушателей, готовность слушателей использовать результаты обучения в практике своей работы).

При оценке мнений исходят из того, что если программа обучения понравилось участникам, значит, она является достаточно хорошей. Мнение обучающихся рассматривается как оценка экспертов, способных объективно оценить учебную программу по предлагаемым критериям (показателям). Обучающимся обычно предлагают по завершении обучения заполнить специально разработанные анкеты, где могут содержаться, например, следующие вопросы:

Насколько полезной для вас была эта программа?

Насколько интересным было обучение?

Насколько актуальной была тематика обучения? и т.п.

Ответы слушателей могут дать важную информацию об их отношении к обучению, к тому, как был преподнесен материал преподавателем, и выявить их готовность к использованию полученных знаний и навыков в своей работе.

Усвоение учебного материала.

Чтобы оценить степень усвоения слушателями учебного материала, преподаватель или организатор учебы должен ответить на два главных вопроса:

Что должен уметь делать ученик, чтобы продемонстрировать, что он усвоил предмет?

Что должен знать обучающийся? На какие вопросы он должен быть способен дать ответы?

Именно полнота усвоения знаний и прочность приобретенных навыков является теми показателями, на основе которых оценивается успех обучения. Оценить полноту усвоения учебного материала можно при помощи устных опросов, контрольных работ, тестирования, устных или письменных зачетов и экзаменов. Как письменная, так и устная форма проверки знаний предполагает, что обучающимся задают разнообразные вопросы.

К сожалению, большинство российских компаний не делает практически никаких попыток выяснить, в какой степени был усвоен учебный материал работниками, прошедшими обучение. Часто приходиться сталкиваться с тем, что процедура "зачета" или "тестирования", которыми пугают слушателей, на деле оказывается чистой формальностью - зачет получают все, а заполненные бланки с результатами тестирования прямым ходом, без проверки отправляются в корзину. Конечно же, и такая форма "контроля усвоения" имеет право на существования - в этом случае она выполняет функцию повышения мотивации слушателей к обучению. Но если можно взять от этой процедуры гораздо больше, то не следует от этого отказываться.

Поведенческие изменения. В соответствии с этим критерием определяется, как изменяется поведение работников после прохождения курса обучения, когда они возвращаются к своей работе. К примеру, обучение технике безопасности должно иметь итогом более высокий уровень соблюдения правил обращения с горючими или ядовитыми веществами; обучение вождению - овладение навыками вождения, безопасная езда; тренинг делового общения - уменьшение числа конфликтов в организации, более высокий уровень сотрудничества между работниками организации.

Рабочие результаты.

Эффективность программы обучения можно оценить также и по результатам производственной деятельности тех, кто прошел обучение. Если результаты работы организации, подразделения или отдельного работника улучшаются, то это и есть та реальная выгода, которую получает организация в результате обучения. Стимулом для того, чтобы начать обучение персонала, может быть слишком высокий уровень отходов или брака. При этом целью обучения работников будет сокращение отходов, например, с 10 до 3 процентов. Если такой результат достигнут, можно считать, что обучение было успешным. Успех курса по маркетингу можно оценить через определение объема продаж или через оценку степени удовлетворенности покупателей, выявленную в результате их опроса. Можно предложить непосредственным руководителям работников, прошедших обучение, оценить, насколько хорошо они применяют те знания, которые они получили за время обучения. Такую процедуру оценки можно повторить через какое-то время (через 1 месяц, 3 месяца, 6 месяцев или больше).

Эффективность затрат.

Программы обучения следует также оценивать на предмет эффективности затрат. Обучение должно быть выгодным для организации, то есть надо стремиться к тому, чтобы выгоды, которые будут получены по завершении обучения, превосходили затраты на проведение обучения.

Например, в компании "Хониуэлл" эффект воздействия программы обучения на повышение производительности труда и качества продукции определяется по формуле:

Э=П х N х V х K - N х З, (1.1)

где П - продолжительность программы (в годах); N - количество обученных работников; V - стоимостная оценка различий в результативности труда лучших и средних работников (долл.); К - коэффициент прироста результативности в результате обучения: З - затраты на обучение одного работника (долл.).

Обучение должно быть составной частью работы организации, неотделимой от ее основных целей. Обучение стоит денег, но эти вложения окупаются через повышение производительности, качества, удовлетворенности потребителей. Кроме того, и сотрудники высоко ценят те возможности, которые им открывает обучение.

Можно выделить следующие показатели эффективности обучения и методы их расчета (таблица 1.5):

Таблица 1.5 - Показатели эффективности обучения и методы их расчета

Направление оценки

Показатель

Метод расчета

Расходы на обучение

Доля расходов на обучение

Отношение расходов на обучение к общим расходам

Расходы на одного работника

Расходы на обучение, поделенные на число обученных сотрудников

Расходы на обучение в расчете на час занятий

Общие расходы на обучение, поделенные на общее время обучения

Отдача на вложения в обучение

Достигнутая экономия по отношению к затратам на обучение

Общая экономия за счет использования неиспользованных ранее ресурсов или предотвращения потерь, поделенная на сумму расходов на обучение

Процент улучшения производственных показателей после обучения в расчете на один курс

Процент работников, улучшивших производственные показатели (разница в показателях до и после обучения

Доход в расчете на одного работника за год

Общий доход или объем продаж, поделенный на общее число работников

Прибыль в расчете на одного сотрудника за год

Общая годовая прибыль до выплаты налогов, поделенная на общее число работников

Обеспеченность квалифицированными специалистами

Число сотрудников отдела обучения на 1000 работников компании

Численность отдела обучения, поделенная на общее число работников х 1000

Оценка работы отдела обучения

Удовлетворенность со стороны потребителей услуг отдела обучения и развития персонала

Отношение числа потребителей услуг отдела обучения, давших оценку «хорошая работа» или «эффективная работа», к общему числу потребителей, заполнивших оценочные листы

Понятно, что для разных видов оценки критерии будут несколько различаться. Например, для оценки первичного обучения критерии могут быть следующими: знание продуктов и услуг, профиль личности, коммуникативные навыки взаимодействия с клиентами; активность в учебном процессе. А для оценки практики, мониторинга и плановой оценки могут также добавиться такие критерии как стремление к развитию, соблюдение корпоративной культуры и т.д.

Процедура оценки эффективности обучения обычно состоит из четырех этапов, которые представлены на рисунке 1.5.

Рисунок - Этапы процедуры оценки эффективности обучения

1. Определение целей обучения. Процесс оценки эффективности обучения начинается уже на этапе планирования обучения, при определения его целей. Цели обучения задают стандарты и критерии оценки эффективности учебных программ.

Эффективность обучения-как правильно ее оценить?

Вопрос о необходимости оценки эффективности обучения персонала активно муссируется в профессиональных кругах тренеров, консультантов и HR-менеджеров. Однако модели оценки во многом различны: часть из них направлена только на качественную оценку эффективности обучения , часть включает также и количественную оценку.

Многие компании ограничиваются раздачей так называемых "листков счастья" - опросных листов, включающих такие вопросы, как: понравился ли вам тренинг, понравился ли вам тренер, как вы оцениваете эффективность проведенной программы обучения , какие еще тренинги вы хотели бы пройти? Понятно, что ответы на эти вопросы никоим образом не улучшают положение HR-менеджеров, от которых руководство все чаще требует отчета о результативности проведенных обучающих мероприятий. Но это у нас. За рубежом уже давно и с успехом используется несколько моделей оценки эффективности обучения . Некоторые из них известны и в нашей стране, некоторые являются для нашего рынка обучения лишь экзотикой. Наша компания сама не раз сталкивалась с необходимостью оценки эффективности проведенных бизнес-тренингов и семинаров, как у клиентов, так и по внутренним программам обучения .

Мы поставили целью показать различные модели оценки эффективности обучающих программ .

Начнем с рассмотрения самой известной модели Дональда Киркпатрика.

В 1959 г. американский исследователь Дональд Киркпатрик предложил четырехуровневую модель оценки эффективности обучения , которая получила широкое распространение и сегодня является классической.

Рассмотрим уровни модели Д. Киркпатрика подробнее.

Первый уровень - "Реакция участников"

Направлен на выявление того, понравилось ли участникам обучение. Для оценки этого уровня используют стандартные анкеты. Основные темы вопросов в анкетах:

Полезность полученных знаний и навыков для реальной работы;

Интересность программы;

Сложность, доступность подачи материала.

Это тот уровень, который измеряется чаще всего. Многие российские компании уже внедрили такую практику на сегодняшний день. К примеру, в нашей компании мы используем вопросник, состоящий из следующих частей.

1. Какая часть тренинга будет наиболее полезна для вашей работы?

2. Какая часть тренинга будет наименее полезна для вашей работы?

3. Есть ли какие-либо темы, которые вы хотели бы включить в программу тренинга?

4. Какой частью тренинга вы бы пожертвовали ради включения интересующих вас тем?

5. Как бы вы в целом оценили программу тренинга?

6. Как вы оцениваете баланс между отдельными частями тренинговой программы (видеофрагментами, упражнениями, играми, кейсами, лекциями, дискуссиями)?

7. Как вы оцениваете продолжительность программы тренинга ?

8. Достаточно ли времени было отведено на игры и обсуждения?

2. Оценка качества проведения тренинга , до- и посттренинговой работы (продолжительность программы, количество перерывов, эффективность посттренинговой оценки, качество оценки потребности в обучении, эффективность постановки целей и т. д.). Соответствующий раздел анкеты включает вопросы следующего типа:

1. В какой степени были достигнуты ваши личные цели в программе тренинга ?

2. Какие из ваших личных целей не были достигнуты и почему?

3. Как вы оцениваете качество посттренинговой работы?

4. Как вы считаете, достаточно ли перерывов, сделанных в ходе тренинга , для отдыха в процессе обучения ?

5. В какой степени, по вашему мнению, поставленные цели тренинга были достигнуты?

6. Как вы оцениваете качество проведенной посттренинговой работы?

3. Оценки тренера и его навыков (навык презентации, коммуникации, обратной связи, стиля ведения и прочее):

  • знание предмета;
  • организация тренинга;
  • подготовка к тренингу;
  • стиль;
  • отзывчивость, обратная связь;
  • создание благоприятного климата.

4. Оценка качества организации тренинга (размещение, доставка, помещения для тренинга, качество раздаточных и презентационных материалов):

1. Как вы оцениваете количество выданных раздаточных материалов?

2. Как вы оцениваете количество презентационных материалов (видео, аудио, слайды, флипчарт)?

3. Как вы оцениваете качество презентационных материалов (видео, аудио, слайды, флипчарт)?

4. Как вы оцениваете размещение участников?

5. Как вы оцениваете помещение для тренинга?

6. Как вы оцениваете качество обслуживания (питание, кофебрейки)?

Для каждого из вопросов задается определенная шкала оценки, например, от 1 до 6 баллов, где каждый балл сопровождается словесным описанием.

Второй уровень - "Обученность"

Определяет, как изменились знания участников в результате обучения и изменились ли они вообще. Для оценки этого уровня используют специально разработанные тесты, опросники и задания, которые позволяют количественно измерить прогресс в компетенции или мотивации участников.

Также возможно провести наблюдение в процессе обучения , в частности, в ходе выполнения контрольных упражнений или ролевых игр, либо после обучающих мероприятий в ходе рабочего процесса.

Например, мы организуем ассессмент-центр, в состав которого входят деловые игры, требующие проявления определенных навыков, кейсы, так называемые упражнения "ин-баскет". Так, для секретарей проводится упражнение по разбору документов и корреспонденции, подготовке материалов к совещанию за определенное время, ответам на звонки "трудных" клиентов.

Приведем пример упражнения "ин-баскет" для сотрудников, прошедших тренинг по управлению персоналом. Упражнение составлено на основе имитационного теста по управлению персоналом.

Ваша задача:

1. Рассмотреть человека, изображенного на фотографии.

2. Познакомиться с описанием текущей проблемы, возникшей в отношении этого человека.

3. Выбрать из списка действия, которые вы считаете наиболее уместными в данном случае. Если вы не находите в списке достаточного количества необходимых действий, то по крайней мере надо исключить действия, которые в данной ситуации применять совершенно не уместно. Для каждого кейса вы не должны выбирать ответ "ДА" более пяти раз (и менее трех).

Третий уровень - "Применение"

Выявляет, применяют ли участники полученные в ходе обучения знания и навыки на рабочем месте? Есть ли реальные изменения в их работе? Оценка данного уровня обычно проводится посредством инструментов, разработанных по принципу "360 градусов". Другой способ - использовать существующую в организации систему ключевых показателей (KPI) или сбалансированную счетную карту (ССП). В случае с тренингом продаж можно, например, сравнить количество жалоб или число заключенных сделок до и после обучения . Для оценки изменения поведения персонала на рабочем месте используется специальная анкета. Она создана для изучения изменения рабочего поведения в результате проведения обучающих мероприятий. Представленные в анкете темы затрагивались в ходе обучения и поэтому имеют непосредственное отношение к его эффективности.

Четвертый уровень - "Результаты"

Направлен на выявление изменений в бизнес-показателях компании в результате обучения . Данный уровень, как правило, является наиболее сложным для измерения, особенно, если учесть тот факт, что на показатели бизнеса влияют также и другие факторы, а изолировать их влияние практически невозможно.

Таким образом, модель Д. Киркпатрика, несмотря на простоту и удобство в использовании, страдает большой долей субъективизма и не предоставляет количественных показателей об эффективности обучения .

В 1991 г. другой американец - Дж. Филипс - добавил в модель Киркпатрика пятый уровень оценки - RОI (отдача от инвестиций в обучение). Его модель сегодня признана "Американской ассоциацией тренинга и развития" (ASTD) и используется во всем мире.

Расчет RОI позволяет:

Количественно выразить улучшение результативности и качества работы в результате обучения сотрудников;

Выразить в денежном эквиваленте ценность проведенного обучения ;

Определить возврат на инвестиции в обучающие мероприятия;

Принимать обоснованные решения по выбору обучающих программ, сравнивая их эффективность.

Однако процедура вычисления RОI довольно трудоемка. Из-за трудности расчета RОI данный показатель рекомендуется измерять лишь в случае удовлетворения следующих показателей:

Большая продолжительность программы обучения ;

Важность программы обучения для достижения корпоративных целей;

Обозримость программы (этапы) обучения ;

Большая целевая аудитория;

Высокая степень заинтересованности лиц, принимающих решения.

Формула для расчета RОI выглядит следующим образом:

Приведем пример расчета RОI для тренинга по управлению персоналом, который проводился нами для начальников цехов и мастеров участков производственного предприятия. Всего в тренинге принимали участие 15 человек.

Доходы от обучения , выраженные в улучшении качества исполнения обязанностей, подсчитаны нами как произведение среднего процента использования навыков в работе и заработной платы соответствующего сотрудника. Они составили в совокупности 21 900 у.е. за месяц. С учетом процедуры корректировки данная сумма составила:

21900 х (1-0,35)=14 235 у.е.

Кроме того, в результате обучения текучесть персонала снизилась на 14% и составила 13%, что соответствует снижению затрат на подбор, обучение и адаптацию примерно 23 человек. Следовательно, можно рассчитать доход от снижения текучести:

13% от численности работников компании составляет примерно 23 человека;

Средние затраты на подбор, обучение и адаптацию работников составляют 928 у.е.

Соответственно, доход от снижения текучести равняется 21 804 у.е.

Общий доход от проведения обучения , таким образом, составил 36 039 у.е.

Затраты на обучение 15 сотрудников:

Оплата услуг сторонних тренеров: 1700 у.е. х 2 = 3400 у.е.

Аренда помещения: 1000 у.е.

Оплата питания: 1800 у.е.

Оплата доставки сотрудников: 400 у.е.

Заработная плата участников (за 2 дня): 3000 у.е.

Заработная плата координатора (за время подготовки и проведения тренинга): 120 у.е.

Итого: 9720 у.е.

Показатель RОI для проведенного тренинга по управлению персоналом равен:

Интересен вопрос о том, какой показатель R0I считать приемлемым. Сам Филипс утверждает, что данный показатель может превосходить 800%. Более того, компания Tennessee Valley Authority, награжденная ASTD, рассчитала средний показатель RОI на уровне 1000%. Одним из выходов в данной ситуации может быть сравнение полученного значения RОI с аналогичным показателем по финансовым проектам, а также сравнение динамики RОI обучения по различным временным периодам. Так, рассчитанный нами показатель R0I значительно превосходил аналогичный показатель по другим инвестиционным проектам предприятия, что еще раз доказывает эффективность вложений в персонал.

В дополнение к расчету RОI часто вычисляют показатель срока окупаемости, отражающий срок, за который окупаются вложенные в обучение инвестиции. Срок окупаемости представляет собой показатель, обратный показателю RОI.

Существует еще одна модель оценки обучения , практически неизвестная в России, - "Таксономия Блюма" (Bloom"s Taxonomy). Она состоит из трех частей - перекрывающихся сфер, которые часто называют ЗУН (знания, установки, навыки).

Когнитивная сфера (знания)

1. Вспоминание информации

2. Понимание

3. Использование на практике

4. Анализ информации (структуры/ элементов)

5. Синтез (создание/построение)

6. Оценка (сравнение)

Эмоциональная сфера (установки)

1. Восприятие (осознание)

2. Ответ (реакция)

3. Оценка ценности (понимание и действие)

4. Сочленение (комбинирование, интеграция схожих навыков)

5. Усвоение системы ценностей (адаптация поведения)

Психомоторная сфера (навыки)

1. Имитация (копирование)

2. Управление (следование инструкциям)

3. Развитие точности, четкости

4. Организация личной системы ценностей

5. Натурализация (доведение до автоматизма, экспертное знание)

Каждая из трех сфер основана на предпосылке о том, что все категории внутри каждой сферы расположены строго в определенном порядке по степени нарастания сложности. Эти категории являются последовательными уровнями развития сотрудников в процессе обучения . В целом в практическом смысле модель похожа на модель Д. Киркпатрика. Она также требует составления по каждой из составляющих определенных вопросов, тестов или упражнений, но не дает финансовой оценки эффективности обучения .

Таким образом, для оценки эффективности обучения можно использовать различные модели, каждая из которых обладает своими достоинствами и недостатками. Выбор той или иной модели всецело зависит от целей, которые ставит перед собой специалист, занимающийся оценкой. Модель Д. Киркпатрика позволяет быстро получить наглядное представление об эффективности обучающих мероприятий. Модель "Таксономия Блюма" делает возможным более подробную оценку эффективности, а также выбор определенной стратегии обучения сотрудников. Модель Дж. Филипса направлена на оценку финансовой стороны обучения , а именно - эффективности вложений в персонал. Поэтому на сегодняшний день, нам кажется, проблема состоит не в необходимости оценки эффективности обучения или ее отсутствии, а в выборе ее конкретного алгоритма.

Любой HR понимает, что нет смысла проводить обучение без дальнейшей оценки его эффективности.С точки зрения бизнеса измерение эффективности методов развития придает финансовый смысл данным мероприятиям, позволяет компании измерять рентабельность инвестиций. Но есть и другие причины.

Оценка эффективности обучения укрепляет веру сотрудников в необходимость применения знаний, т.к. дает понимание важности изменений для руководства (сродня эффекту контроля). А с точки зрения менеджера по обучению (развитию) персонала процедура оценки определяет дополнительные потребности в обучении, проверяет методологию обучения и позволяет оценивать прогресс.

Благодаря анализу эффективности развития удается выявить устаревшие методы обучения и искоренить работу по типу «процесс ради процесса».

Способы оценки эффективности методов развития

Персонал оценивают в двух направлениях: количественные и качественные показатели .

Нельзя сказать, что какой-то из показателей менее важен, особенно когда целью развития персонала становится повышение результативности работы, следовательно, и прибыли компании. Если не оценивать оба параметра, как правило, инвестиции на обучение становятся не более чем благотворительностью. Честно говоря, в таком случае более результативно было бы перевести эти деньги, например, в фонд спасения животных, так от них было бы больше толку.

Процесс анализа результата придает смысл процедуре обучения, ведь именно для достижения результатов оно и затевалось.

Методы оценки качественных показателей

Вопросник для оценки после обучения

Это один из самых простых и популярных методов. Обычно он строится на серии вопросов, которые задают учащимся.

Например: что они думают о преподавателе, материале, стиле презентации и о чем-либо еще, связанном с программой обучения. Вопросник легко использовать и он дает немедленные результаты.

Сравнение до и после

Данный метод предполагает оценку знаний сотрудников до применения метода развития, а затем выполнение аналогичного теста после тренировки.

При разработке таких оценочных тестов следует иметь в виду ряд правил:
1. Вопросы должны быть короткими.
2. Тест не должен занимать более 10-20 минут.
3. Вопросы необходимо сосредоточить на основных задачах курса. Это позволит четко увидеть, какая информация была воспринята участниками. Но тут важно быть аккуратным в суждениях, ведь материал может быть не воспринят как по причине сотрудника (например, прослушал), так и по вине тренера (не расставил акценты должным образом).
4. Тест необходимо сформулировать на простом и понятном языке.
5. Продуктивнее смешивать истинные, ложные вопросы и с вариантами выбора.

Текущая оценка

Метод сочетает оценку до и после занятий. Как правило, такую оценку проще проводить тренеру или менеджеру по обучению. По завершению информационного блока участникам задают несколько открытых вопросов.

Например:

Такой опрос позволяет менеджеру по обучению корректировать программу, опираясь на ее воспринимаемость: заменять темы или возвращаться к пройденному материалу. Данный подход позволяет получить максимальную отдачу как менеджеру по обучению (в виде результата), так и обучающимся (в виде знаний и умений). При многодневном обучении оценку поводят в конце дня, чтобы внести необходимые изменения в работу группы на следующий день.

Анализ по модели Киркпатрика

Методика оценки Карпатрика уже давно и успешно используется многими HR-ами для изучения эффективности развития персонала. Модификаций и способов применения методики очень много, но за основу берется последовательное измерение:

1. Реакции на обучение.
Оценивается насколько программа курса устраивает обучающихся, как они реагируют на обучение и как планируют использовать знания в работе.

Практика показывает, чем больше мотивация на обучение, тем сильнее реакция на него и выше его оценка сотрудниками. Максимальной мотивации можно достичь, давая прозрачное разъяснение важности изучаемого блока для реализации основного функционала. Если сотрудник слабо понимает силу влияния того или иного процесса на работу, то положительной реакции ждать не стоит.

2. Усвоения материала.
Этап предполагает изучение мнений о доступности и конкретности пройденного курса обучения.

3. Перемены поведения.
Важно понимать, как меняется деятельность людей после обучения, применяются ли новые методики, правильно ли используются, в нужное ли время.

4. Улучшения результата.
Во время оценки необходимо понять, как обучение улучшило показатели бизнеса: понимают и предпринимают ли сотрудники действия, необходимые для достижения результата, владеют ли они всеми знаниями, умениями и навыками для реализации этих действий и осознают ли важность их применения, хотят ли выполнят данные действия.

Опираясь на теорию Кирпатрика, можно создать матрицу оценки эффективности любого метода развития персонала.

Тема обсуждения/анализа с сотрудниками Что оценивать Комментарии
Цели компании Понимание и осознание целей. Любое обучение организовывается для достижения целей предприятия. Если сотрудник не понимает ради чего его учат, то информация пройдет мимо.
Что они должны сделать, чтобы прийти к цели Четкое, структурированное описание порядка действий. С ответами на вопросы: как, зачем, почему и когда. Если у коллектива не прозрачного и детализированного понимания того, что нужно сделать, чтобы повлиять на результат – они просто не смогут это реализовать.
Чем обучение помогло для выполнения вышеперечисленных действий Понимают ли сотрудники новый материал и видят ли целесообразность его применения в работе. Информация даст понимание ценности программы для работников и качества преподнесения материала.
Какие возможности видят для себя в применении материала. Достаточен ли уровень мотивации на применение знаний. Люди выполняют работу с полной отдачей только, когда их греет ее результат и возможности, которые он открывает.

Методы оценки количественных показателей

Обучение – достаточно дорогое удовольствие, оно потребляет ресурсы времени, оборудования и персонала. Именно поэтому оценка окупаемости должна быть неотъемлемой частью любой учебной программы. В этом вопросе также поможет модель Кирпатрика. Ее доработали и добавили еще один этап – окупаемость обучения (ROI).

ROI рассчитывает так: (выгоды – затраты)/затраты * 100%

Пример расчета^
Допустим, для обучения сотрудников был нанят тренер. Стоимость его работы 30000 рублей. Для обучения потребовался инвентарь на 3000 рублей. Аренда аудитории для тренинга обошлась еще в 5000 руб. Итого расход составил 38000 руб. За первый месяц после обучения, специалисты научились продавать дополнительные услуги и вместо привычных 50 000руб. получили оплату счетов на сумму 100 000 руб.Таким образом, прибыль от обучения составила 50 000 руб.

В данном случае коэффициент окупаемости рассчитываете так: (50 000 – 38 000)/38000 = 0,315. Для того чтобы понять процент, умножим на 100. Таким образом, коэффициент окупаемости тренинга, начиная с первого месяца, составил 31%. Получается, если суммы оплат дополнительных услуг клиентами не будут уменьшаться и в последующие месяцы, то тренинг окупится примерно за 3 месяца, а дальше будет приносить прибыль.

Интерпретировать показатели ROI достаточно просто, если результат получился больше 100% , то вложения окупаются.

Каждый руководитель определяет для себя самостоятельно, какую окупаемость и за какой промежуток времени считает приемлемой.Для более точных расчетов в расходы можно добавить стоимость упущенной выгоды за время обучения и оплату труда за этот же период.

Ведь во время обучения сотрудники не приносят прибыль, но получают привычный оклад. Таким образом, можно сравнивать эффективность разных программ обучения и выбирать для себя ту, которая имеет наибольший процент возврата.

Дополнительные критерии оценки эффективности обучения персонала

Количественной оценке может подвергаться не только финансовая составляющая. Оценка эффективностиуместнав различных показателях, рассмотрим некоторые из них.

Анализ процента брака продукции, количества персонала и текучести кадров. В конечном итоге данные показатели ведут к анализу снижения затрат на данные процессы.

Продолжительность применения знаний– немаловажный параметр оценки эффективности развития персонала. Чем дольше коллектив использует новинки в работе, тем дольше держится положительный эффект. Следовательно, после оценки можно сделать выбор в пользу той программы, которая оставляет после себя более длинный хвост.

Изменение скорости выполнения задач или реакции на внеплановые ситуации. Статистика говорит, что многие компании привыкли работать в форс-мажорах, но не все с ними справляются должным образом: кого-то такие ситуации на долго выбивают из колеи. Важно оценить понижение затрат на последствия из-за ошибок.

Если организация в ходе своей деятельности активно использует оборудование, то оно периодически приходит в негодность. Увеличение срока службы оборудования в результате применения эффективных методов развития персонала также подлежит оценке.

Обучение без анализа его результатов также бессмысленно, как оценка окупаемости без дальнейших действий по улучшению. А оценка качественных показателей поможет понять, какие методы необходимо скорректировать, а возможно и полностью заменить.

Оценка эффективности обучения на производственном предприятии

Чтобы квалификация сотрудников производственных компаний соответствовала современным требованиям, их обучение и развитие должно быть встроено в общую систему управления персоналом. Каждому работнику необходимо постоянно принимать участие в обучающих программах.

Своевременное, регулярное обучение персонала особенно важно для тех предприятий, где ведутся работы повышенной опасности. Выполняющие такого рода работы сотрудники должны соответствовать требованиям законодательства: быть компетентными в вопросах охраны труда, пожарной безопасности, технической эксплуатации машин, механизмов и пр. Значит, для них нужно обеспечить особую подготовку, развитие необходимых навыков.

На нашем предприятии каждый, кто выполняет работы с повышенной опасностью, проходит специальную подготовку. Сначала проводится собеседование для определения наличного уровня знаний; по результатам первичной оценки разрабатывается индивидуальная программа профессионального обучения . Прежде чем приступить к самостоятельному выполнению работ, сотрудник обязан пройти:

  • первичный инструктаж;
  • специальную/профессиональную подготовку в соответствии с индивидуальной программой;
  • стажировку на рабочем месте;
  • первичную проверку знаний (экзамен);
  • этап работы в качестве дублера (для оперативного и оперативно-производственного персонала);
  • первичные противоаварийные и противопожарные тренировки.

    Допуск к самостоятельной работе оформляется только после проведения всех необходимых обучающих мероприятий (этот период может занять до девяти месяцев). Кроме того, для работников предусмотрено периодическое (раз в три-пять лет) повышение квалификации в лицензированных специальных учебных заведениях. Все требования к квалификации и программам обучения для выполнения работ повышенной опасности подробно описаны в государственных нормативных документах.

    Для успешной работы людям нужны дополнительные знания и новые профессиональные компетенции. Требования к уровню знаний персонала развивающегося предприятия повышаются постоянно, поэтому эйчары должны уметь своевременно выявлять потребности в обучении.

    Существует много методов выявления потребностей в обучении; выбор того или иного зависит от особенностей компании и ее возможностей. Мы используем следующие:

  • анализ результатов собеседования при приеме на работу;
  • анализ результатов деятельности в период адаптации (испытательного срока);
  • анализ результатов годовой оценки;
  • планы изменения технологий;
  • анализ перспективных планов;
  • анкетирование и интервьюирование руководителей и сотрудников компании.

    Полученные с помощью различных методов данные помогают провести анализ качества человеческих ресурсов предприятия (так называемый кадровый аудит ).

    При определении потребности в обучении сотрудников следует, прежде всего, исходить из:

  • целей компании и перспективных планов ее развития (определяют руководители высшего уровня);
  • данных о реализации этих планов и возникающих при этом проблемах (формулируют руководители среднего звена);
  • самооценки работников.

    Программы повышения квалификации персонала должны быть сориентированы на достижение перспективных целей развития бизнеса, а специализированное обучение - на решение конкретных производственных, технологических или организационных проблем и повышение качества выполнения работниками поставленных перед ними функциональных задач. В то же время важнейшую роль в повышении эффективности обучения играет стремление самих сотрудников к профессиональному совершенству.

    Задачами службы персонала на этапе определения потребности в обучении являются:

    1. Анализ информации.

    2. Методическая помощь руководителям и работникам подразделений.

    3. Организация учебных мероприятий (рис. 1 ).


    На нашем предприятии обучение планируется по результатам годовой оценки персонала : для каждого сотрудника инженерно-технического состава и руководителей разрабатывается индивидуальный план развития (ИПР), где указаны необходимые компетенции - «корпоративный минимум». За составление ИПР и реализацию предусмотренных в нем мероприятий отвечают сотрудники HR-подразделения.

    По опыту прошлых лет мы видим, что важными условиями эффективности программ обучения являются:

  • оперативность их выполнения: если между составлением плана и реализацией обучающих мероприятий проходит полгода, обучение теряет свою актуальность;
  • применение современных подходов и методов обучения;
  • эффективное использование выделенных денежных средств.

    Для оптимизации процесса обучения и развития на протяжении планируемого периода мы разработали процедуры, которые 1) обеспечивают успешную реализацию ИПР сотрудников, 2) повышают уровень организации образовательных программ и 3) позволяют оценить эффективность обучающих программ.

    Что это за процедуры? Прежде всего - новый регламент для тщательного выбора провайдеров образовательных услуг. В процессе поиска тренинговых компаний мы анализируем опыт и репутацию их специалистов, оцениваем качество предлагаемых услуг (в том числе и по отзывам их клиентов). Ключевой критерий выбора (при прочих равных условиях) - возможность адаптации программы под нужды нашего предприятия. При этом каждая программа (курс, тренинг) обязательно согласовывается с руководителем структурного подразделения, а при необходимости - корректируется с учетом его пожеланий.

    До начала обучения мы оцениваем потребность в нем каждого сотрудника. Руководители подразделений оценивают квалификацию своих подчиненных по таким показателям:

  • качество работы;
  • производительность труда;
  • наличие необходимых навыков и знаний;
  • принятие и выполнение делегируемых руководителем полномочий (надежность);
  • самостоятельность в выполнении функций (независимость).

    приложение 1


    рис. 2

    На основе этих оценок определяется необходимость развития у конкретного работника тех или иных компетенций. Сотрудники также оценивают свою потребность в обучении (приложение 1 ): ответы на вопросы анкеты помогают конкретизировать задачи и направления обучения, оценить перспективы дальнейшей «трансляции» новых знаний в конкретном подразделении, прояснить ожидания в отношении результатов учебных программ.

    После обработки анкет специалист отдела по работе с персоналом встречается с сотрудниками, для того чтобы люди смогли аргументировать свои пожелания, уточнить условия и сроки обучения. По результатам собеседования вносятся корректировки в ИПР, а также принимается решение о том, какая именно обучающая программа необходима сотруднику в данный период времени. Свои рекомендации по организации обучения специалист по обучению представляет линейному руководителю подразделения или топ-менеджеру.

    По завершении курса обучения следует этап оценки эффективности обучения . За основу мы взяли методику Киркпатрика* (рис. 2 ), которую адаптировали к потребностям нашего предприятия.

    _______________
    * Дональд Киркпатрик (Donald Kirkpatrick) - американский исследователь, в 1959 году разработавший четырехуровневую систему оценки эффективности обучения персонала. Подробнее см. в статье Г. Базаровой «Оценка эффективности тренинга».

    • Традиционные подходы к оценке эффективности мероприятий по обучению персонала заключаются в том, что по окончании обучения (семинаров, тренингов, курсов, школ и т.п.) слушатели, как правило, дают свою оценку в виде интервью или заполнения анкет, отвечая на вопросы и выбирая один из предложенных вариантов оценки (баллы):

      соответствие содержания обучения ожиданиям (потребностям) слушателей;

      применение активных методов обучения;

      применение современных средств обучения;

      связь образовательных мероприятий с рабочим местом;

      качество раздаточных материалов (рабочих тетрадей и т.п.);

      оптимальность количества обучаемых в группе;

      организационные условия для проведения занятий;

      квалификация преподавательского состава и т.п.

    Слушатели ставят организаторам и преподавателям балльную оценку в виде уровня удовлетворенности обучением.

    Кроме того, к традиционным методам оценки эффективности обучения персонала можно отнести наблюдение, статистический анализ, самоотчет, тестирование и т.п. Особый интерес для нас представляет анализ нетрадиционных методов оценки эффективности обучения персонала, таких как:

      методика Дональда Киркпатрика;

      методика Джека Филипса;

      методика бипараметрической оценки;

      оценка эффективности обучения в рамках комплексных систем оценки типа BSC, KPI;

      модель оценки Блума.

    Модель Киркпатрика, описанная в книге «Четыре ступеньки к успешному тренингу» предполагает оценку по четырем уровням. Эти уровни определяют последовательность проведения оценки обучения. Он пишет: "Каждый уровень важен и влияет на следующий за ним уровень. При переходе от уровня к уровню процесс оценки становится более трудным и требует больше времени, но при этом позволяет получить более ценную информацию. Ни один из уровней не может быть пропущен просто потому, чтобы сконцентрировать на том, что тренер считает наиболее важным". Вот четыре уровня по версии автора:

      Уровень 1 – Реакция (Reaction)

    Оценка на этом уровне определяет, как участники программы реагируют на нее. Сам Киркпатрик называет это оценкой удовлетворенности потребителей. Он подчеркивает, что реакция участников является очень важным критерием успешности тренинга, как минимум, по двум причинам.

    Во-первых, люди так или иначе делятся своими впечатлениями от тренинга со своим руководством, и эта информация уходит выше. Следовательно, она влияет на принятие решений о продолжении тренинга.

    Во-вторых, если участники не будут реагировать позитивно, то у них не будет мотивации к научению. По мнению Киркпатрика, позитивная реакция не гарантирует успешного освоения новых знаний, умений и навыков. Отрицательная же реакция на тренинг почти наверняка означает уменьшение вероятности научения.

      Уровень 2 – Научение (Learning)

    Научение определяется как изменение установок, улучшение знаний и совершенствование навыков участников в результате прохождения ими программы обучения. Киркпатрик утверждает, что изменение поведения участников в результате тренинга возможно только тогда, когда произойдет научение (изменятся установки, улучшатся знания или усовершенствуются навыки).

      Уровень 3 – Поведение (Behavior)

    На этом уровне происходит оценка того, в какой степени изменилось поведение участников в результате обучения. Киркпартик указывает на то, что отсутствие изменений в поведении участников не означает, что тренинг был неэффективен. Возможны ситуации, когда реакция на тренинг была позитивной, научение произошло, но поведение участников в дальнейшем не изменилось, поскольку для этого не были соблюдены необходимые условия. Поэтому отсутствие изменения поведения участников после тренинга не может быть поводом для принятия решения о прекращении программы.

      Уровень 4 – Результаты (Results)

    К результатам относятся изменения, которые произошли в связи с тем, что участники прошли обучение. В качестве примеров результатов Киркпатрик приводит увеличение производительности, улучшение качества, уменьшение количества несчастных случаев, увеличение продаж, снижение текучести кадров. Он настаивает на том, что результаты не следует измерять в деньгах.

    По мнению Киркпатрика, оценка на этом уровне – самая сложная и дорогостоящая. Вот несколько практических рекомендаций, которые могут помочь в оценке результатов:

      если возможно, использовать контрольную группу (не проходившую обучение);

      проводить оценку через некоторое время, чтобы результаты стали заметны;

      проводить оценку до и после программы (если это возможно);

      провести оценку несколько раз в ходе программы;

      сопоставить ценность информации, которую удастся получить с помощью оценки и стоимость получения этой информации (автор считает, что проведение оценки на 4 уровне не всегда целесообразно в связи с ее высокой стоимостью).

    Методика Джека Филипса – это использование различных формул для измерения отдачи на капитал, вложенный в персонал (ROI):

      Оценка инвестиций в кадровый отдел = расходы службы персонала/операционные расходы.

      Оценка инвестиций в HR-подразделения = расходы службы персонала/количество работников.

      Показатель отсутствия на рабочем месте = прогулы, отсутствие без предупреждения + количество сотрудников, уволившихся неожиданно.

      Показатель удовлетворенности – число сотрудников, удовлетворенных своей работой, выраженное в процентах. Определяется методом анкетирования.

      Критерий, выявляющий единство и согласие в компании. Подсчитывается на основе статистических данных по производительности и оценке эффективности труда.

    Мак Ги предлагает бипараметрическую оценку, то есть рассматривает результативность и эффективность обучения, он также вводит понятия результативности и эффективности и как их оптимальное сочетание вводит понятие производительности обучения .

    Методика измерения эффективности должна учитывать специфику обучающих мероприятий, спектр которых достаточно широк.

    Если стоит задача – оценить успешность мероприятий через снижение стоимости бизнес-процесса (правда это только частный случай – снижение издержек), то оптимальным будет следующий набор формул для оценки эффективности обучения.

    Частный экономический эффект (E) от мероприятия по обучению персонала, вызвавшего изменение стоимости данного бизнес-процесса можно определить следующим образом:

    где– стоимость бизнес-процесса (единицы производимой продукции) до обучения, ден. ед.;

    –стоимость бизнес-процесса после обучения, ден. ед.

    Определение абсолютного значения эффекта позволяет лишь выяснить тенденции, масштаб и направление эффекта от обучения (положительный, нейтральный, отрицательный), поэтому целесообразно сопоставить значение эффекта с затратами, направленными на обучение персонала.

    Интерпретация результата: если Е ≥ 0 – следовательно, успех был достигнут, по крайней мере, цель снижения издержек была достигнута, однако – вопрос цены. Поэтому – необходимо определить чистый эффект. Чистый частный экономический эффект от мероприятий по обучению персонала определяется следующим образом:

    где– стоимость бизнес-процесса (единицы производимой продукции) до обучения, ден. ед.;

    –стоимость бизнес-процесса после обучения, ден. ед.;

    –стоимость программы обучения (затраты компании на содержание учебного центра), ден. ед.

    Определение абсолютного значения частного эффекта позволяет сравнить результат от деятельности с затратами на обучение (превышают выгоды затраты или нет).

    Интерпретация результата: если≥ 0 – следовательно положительный результат был достигнут, по крайней мере, снижение издержек превысило затраты – деятельность приносит чистый эффект.

    Данная последовательность расчетов целесообразна для оценки эффективности обучения именно линейного персонала, например, в результате проведения тренинговых мероприятий, скорость обслуживания клиентов увеличилась, качество обслуживания клиентов (при этом качество может оцениваться снижением количества ошибок, жалоб клиентов) улучшилось и т.д.

    Более традиционный для восприятия и простой в интерпретации – показатель доходности (рассмотрим как типичный показатель для бизнеса – соотношением чистого дохода к затратам):

    Доходность (возврат на инвестиции в обучение) выражается в процентах.

    Интерпретация результата: если > 0 – следовательно вид деятельности доходен, иначе – затраты на обучение не возвращаются в виде дополнительного эффекта.

    Этот показатель удобно применять в случае сопоставления нескольких вариантов или реализованных мероприятий.

    Оценка эффективности обучения в рамках комплексных систем оценки типа BSC, KPI. Часто оценивая отдельные направления развития компании, в современном менеджменте применяются комплексные системы оценки, включающие ряд частных показателей, отражающих эффективность подразделений, в рамках моделей которых, удачно применяются методы комплексной оценки, например, выясняя вклад тех или иных подразделений в общий результат деятельности. Среди вышеназванных моделей можно отметить применимость каждой из них для решения задач оценки эффективности обучения персонала, выделив подотдел, отвечающий за обучение, определенный набор целевых показателей, позволяющих дать оценку именно этому подразделению компании.

    Например, выделив некоторые количественные и качественные показатели данному подразделению, предполагая, что мероприятия по обучению персонала скажутся на этих показателях, мы сможем дать оценку эффективности данных мероприятий в комплексе и по каждому отдельному эпизоду, связанному с обучением. Четко определив корреляцию этих показателей с показателями эффективности подразделений, прошедших обучение, мы сможем проанализировать эффективность работы по обучению персонала в целом на предприятии.

    Данные методики сложны к применению, вследствие широты спектра действия, однако, при умелом их использовании достигается не только интуитивная их понятность, адекватность и согласованность, что в целом, позволяет решить обозначенную выше проблему. Разработка системы показателей позволит не только всесторонне оценить, но и в режиме реального времени отслеживать уровень эффективности данных мероприятий.