Важнейшим аспектом построения эффективного обучения в организации является построение качественной системы оценки эффективности обучения. Отсутствие такой системы может привести:
к значительному снижению качества обучения;
отсутствию эффективных средств управления обучением;
общему снижению эффективности обучения.
Существующие модели оценки эффективности обучения
Наибольшее распространение при проведении оценки эффективности обучения в организации сегодня получила модель оценки обучения, базирующаяся на работах Киркпатрика и Варра, Берда и Рэкхэма. Данная модель оценки эффективности обучения хорошо зарекомендовала себя на практике.
Модель Киркпатрика
Киркпатрик рассматривает оценку эффективности обучения как важнейший элемент цикла проведения обучения, включающего в себя следующие этапы:
определение потребностей;
постановка целей;
определение предметного содержания;
выбор участников обучения;
формирование оптимального расписания;
подбор соответствующего помещения;
подбор соответствующих преподавателей;
подготовка аудиовизуальных средств;
координация программы;
оценка программы
Киркпатрик указывает три основные причины проведения оценки:
необходимость оправдания существования отдела обучения, показав, какой вклад делает этот отдел в достижение целей и задач организации;
формирование механизма принятия решения о том, как улучшить программу обучения в будущем;
формирование механизма получения информации о том, как улучшить программу обучения в будущем.
Уровни оценки эффективности обучения
Модель оценки эффективности обучения предполагает четыре уровня оценки эффективности обучения:
уровень 1: реакция слушателей на программу обучения;
уровень 2: оценка знаний и опыта, полученных слушателем по программе обучения;
уровень 3: оценка поведения на рабочем месте;
уровень 4: оценка влияния программы обучения на деятельность организации.
Уровень 1. Реакция слушателей на программу обучения.
Первый уровень модели оценки эффективности обучения определяет, как было воспринято слушателями проводимое обучение. Сам Киркпатрик называет это оценкой удовлетворенности потребителей. Наиболее эффективным средством оценки эффективности обучения на данном уровне является проведение анкетирования.
Используемые анкеты содержат широкий круг вопросов по всем аспектам обучения, в том числе:
насколько важны поставленные цели;
как слушатели оценивают качество проводимого обучения;
насколько эффективны используемые средства обучения;
какие темы дополнительно они бы хотели включить в программу обучения;
насколько комфортно слушателям было работать;
как было организовано питание;
как было организовано проживание;
В результате анкетирования можно оценить:
насколько слушатели удовлетворены качеством обучения и насколько оно соответствует их ожиданиям;
насколько хорошо обучение было организовано ;
какие дополнительные ожидания у них есть.
Получаемые в результате оценки результаты показывают степень удовлетворения обучаемых от проведенного обучения.
Уровень 2. Оценка знаний и опыта, полученных слушателем по программе обучения.
Цель 2-го уровня максимально эффективно оценить, были ли во время обучения достигнуты ее цели. Наиболее распространенным средством, используемым на данном уровне, является тесты по проверке знаний и навыков. Помимо тестов используются более сложные средства проверки, такие, как тренажеры, симуляции, сложные упражнения и т.п.
Тестирование слушателей обучения целесообразно проводить до и после обучения. Проведение двойного тестирования позволит оценить, как изменилась компетенция слушателей в результате обучения. Проведя анализ всех оценок, полученных слушателями, можно оценить насколько эффективно проведенное обучение.
На втором уровне производится оценка, насколько обучение позволило решить поставленные педагогические задачи. Однако, на втором уровне не производится оценка насколько обучение эффективно с точки зрения функционирования организации.
Уровень 3. Оценка поведения на рабочем месте.
Третий уровень модели оценки эффективности Киркпатрика отвечает за сбор информации, позволяющей оценить, как проводимое обучение, влияет на поведение слушателей на рабочих местах. С точки зрения организации это является ключевым в оценке эффективности обучения. Именно на этом уровне производится оценка, какую практическую пользу от обучения получает организация. Смогли ли слушатели на практике применить полученные ими в ходе обучения навыки, знания и умения.
Оценку эффективности обучения на данном уровне целесообразно проводить несколько раз в течение 3 – 6 месяцев после окончания обучения. За это время слушатели смогут продемонстрировать, как они применяют полученные ими во время обучения знания. Часто исследования на данном уровне проводятся с использованием специальных “карт поведения”, которые заполняют все участники обучения, а также специалисты организации, которые могут оценить, как отразилось на эффективности работы проведенное обучение.
Уровень 4. оценка влияния программы обучения на деятельность организации.
Даже если оценка эффективности обучения на третьем уровне показала, что полученные в результате обучения навыки, знания и умения успешно применяются слушателям при выполнении ими их служебных обязанностей, это вовсе не означает, что проведенное обучение принесло реальную пользу организации.
Цель оценки, проводимой на 4-м уровне, ответить на вопрос: насколько обучение, проводимое в организации, полезно?
В первую очередь необходимо ответить, каким образом проводимое обучения оказывает влияние на ключевые показатели деятельности компании.
Оценка эффективности обучения на 4-м уровне производится крайне редко из-за трудности получения показателей эффективности деятельности организации и оценки влияния на нее результатов обучения.
Вот некоторые из возможных показателей эффективности 4-го уровня:
обучение технологиям продаж:
увеличение объема продаж;
увеличение клиентской базы.
обучение техническим навыкам:
уменьшение количества обращений в службу поддержки;
уменьшение времени выполнения работы.
Очень часто оценку, проводимую на 4-м уровне разделяют на два подуровня. В рамках первого подуровня производится оценка, как обучение влияет на производственные показатели компании. На втором подуровне производится оценка экономической эффективности проводимого обучения.
Дистанционное обучение и оценка эффективности обучения
Дистанционное обучение (электронное обучение) является частью общего обучения проводимого в организации. И соответственно оценивается наряду с другими формами обучения, применяемыми в компании, с использованием тех же методов оценки. Однако, необходимо отметить, что применение технических средств, используемых при проведении дистанционного обучения, позволяет значительно упростить сбор информации для проведения оценки, а также ее последующий анализ.
Оценка эффективности обучения на производственном предприятии
Чтобы квалификация сотрудников производственных компаний соответствовала современным требованиям, их обучение и развитие должно быть встроено в общую систему управления персоналом. Каждому работнику необходимо постоянно принимать участие в обучающих программах.
Своевременное, регулярное обучение персонала особенно важно для тех предприятий, где ведутся работы повышенной опасности. Выполняющие такого рода работы сотрудники должны соответствовать требованиям законодательства: быть компетентными в вопросах охраны труда, пожарной безопасности, технической эксплуатации машин, механизмов и пр. Значит, для них нужно обеспечить особую подготовку, развитие необходимых навыков.
На нашем предприятии каждый, кто выполняет работы с повышенной опасностью, проходит специальную подготовку. Сначала проводится собеседование для определения наличного уровня знаний; по результатам первичной оценки разрабатывается индивидуальная программа профессионального обучения . Прежде чем приступить к самостоятельному выполнению работ, сотрудник обязан пройти:
Допуск к самостоятельной работе оформляется только после проведения всех необходимых обучающих мероприятий (этот период может занять до девяти месяцев). Кроме того, для работников предусмотрено периодическое (раз в три-пять лет) повышение квалификации в лицензированных специальных учебных заведениях. Все требования к квалификации и программам обучения для выполнения работ повышенной опасности подробно описаны в государственных нормативных документах.
Для успешной работы людям нужны дополнительные знания и новые профессиональные компетенции. Требования к уровню знаний персонала развивающегося предприятия повышаются постоянно, поэтому эйчары должны уметь своевременно выявлять потребности в обучении.
Существует много методов выявления потребностей в обучении; выбор того или иного зависит от особенностей компании и ее возможностей. Мы используем следующие:
Полученные с помощью различных методов данные помогают провести анализ качества человеческих ресурсов предприятия (так называемый кадровый аудит ).
При определении потребности в обучении сотрудников следует, прежде всего, исходить из:
Программы повышения квалификации персонала должны быть сориентированы на достижение перспективных целей развития бизнеса, а специализированное обучение - на решение конкретных производственных, технологических или организационных проблем и повышение качества выполнения работниками поставленных перед ними функциональных задач. В то же время важнейшую роль в повышении эффективности обучения играет стремление самих сотрудников к профессиональному совершенству.
Задачами службы персонала на этапе определения потребности в обучении являются:
1. Анализ информации.
2. Методическая помощь руководителям и работникам подразделений.
3. Организация учебных мероприятий (рис. 1 ).
На нашем предприятии обучение планируется по результатам годовой оценки персонала : для каждого сотрудника инженерно-технического состава и руководителей разрабатывается индивидуальный план развития (ИПР), где указаны необходимые компетенции - «корпоративный минимум». За составление ИПР и реализацию предусмотренных в нем мероприятий отвечают сотрудники HR-подразделения.
По опыту прошлых лет мы видим, что важными условиями эффективности программ обучения являются:
Для оптимизации процесса обучения и развития на протяжении планируемого периода мы разработали процедуры, которые 1) обеспечивают успешную реализацию ИПР сотрудников, 2) повышают уровень организации образовательных программ и 3) позволяют оценить эффективность обучающих программ.
Что это за процедуры? Прежде всего - новый регламент для тщательного выбора провайдеров образовательных услуг. В процессе поиска тренинговых компаний мы анализируем опыт и репутацию их специалистов, оцениваем качество предлагаемых услуг (в том числе и по отзывам их клиентов). Ключевой критерий выбора (при прочих равных условиях) - возможность адаптации программы под нужды нашего предприятия. При этом каждая программа (курс, тренинг) обязательно согласовывается с руководителем структурного подразделения, а при необходимости - корректируется с учетом его пожеланий.
До начала обучения мы оцениваем потребность в нем каждого сотрудника. Руководители подразделений оценивают квалификацию своих подчиненных по таким показателям:
приложение 1
рис. 2
На основе этих оценок определяется необходимость развития у конкретного работника тех или иных компетенций. Сотрудники также оценивают свою потребность в обучении (приложение 1 ): ответы на вопросы анкеты помогают конкретизировать задачи и направления обучения, оценить перспективы дальнейшей «трансляции» новых знаний в конкретном подразделении, прояснить ожидания в отношении результатов учебных программ.
После обработки анкет специалист отдела по работе с персоналом встречается с сотрудниками, для того чтобы люди смогли аргументировать свои пожелания, уточнить условия и сроки обучения. По результатам собеседования вносятся корректировки в ИПР, а также принимается решение о том, какая именно обучающая программа необходима сотруднику в данный период времени. Свои рекомендации по организации обучения специалист по обучению представляет линейному руководителю подразделения или топ-менеджеру.
По завершении курса обучения следует этап оценки эффективности обучения . За основу мы взяли методику Киркпатрика* (рис. 2 ), которую адаптировали к потребностям нашего предприятия.
_______________
* Дональд Киркпатрик (Donald Kirkpatrick) - американский исследователь, в 1959 году разработавший четырехуровневую систему оценки эффективности обучения персонала. Подробнее см. в статье Г. Базаровой «Оценка эффективности тренинга».
В настоящее время любой более или менее дальновидный работодатель уделяет повышенное внимание обучению своего персонала. Это не удивительно, учитывая стремительное развитие подходов к управлению бизнесом, появление бюджетирования, системы управления менеджментом качества, системы сбалансированных показателей и т.д. Не отстают и производственные технологии, требующие от технического персонала первоклассное знание нового оборудования и технологий. Системы продвижения товаров на рынок и продаж развиваются еще более стремительно. Все это не оставляет иного шанса работодателю для сохранения занимаемой доли рынка и в конечном итоге всего бизнеса, как постоянно повышение образовательного уровня своих подчиненных. Особую актуальность данная проблема приобретает в условиях явного отставания образовательных программ учебных заведения (как средних, так и высших) от динамично меняющихся рыночных требований. Получается так, что молодой специалист, вчерашний выпускник учебного заведения приходит на работу со знаниями «вчерашнего», а чаще даже «позавчерашнего дня».
В итоге работодатель просто обречен на вложение средств в обучение персонала. В общем-то, проблем нет. Бизнес - это и есть вложение средств, но с целью получения в последующем прибыли. Иначе это уже не бизнес, а благотворительность.
Вот тут то и начинаются проблемы, связанные с трудностями оценки эффекта от обучения. Действительно все мы на словах, умозрительно понимаем, что эффект есть, но вот выразить его и рассчитать часто не можем. Можно конечно до хрипоты спорить, что не все должно определяться экономической эффективностью. Не спорю, однако экономическая оценка проводиться должна! Для чего, спросите вы? Да хотя бы для того, чтобы отделить благотворительность от бизнеса. Можно тратить миллионы на пустое обучение персонала, не дающее никаких экономических эффектов, по сути занимаясь бестолковой благотворительностью. Не лучше ли при этом отдать эти деньги детскому дому? По крайней мере, в таком случае наша благотворительность принесет кому-то пользу.
Таким образом, мы приходим к пониманию того, что затраты на обучение, которые в настоящее время достаточно значительны, должны быть оценены с точки зрения экономической эффективности данных вложений. И на основе этого должно приниматься обоснованное управленческое решение о дальнейшем использовании данных средств.
Однако, практика показывает, что сказать в данном случае значительно проще, чем сделать! Действительно оценивать сложно. Есть четко определенные первоначальные вложения, иными словами стоимость обучения, но нет методик, показателей и критериев оценки полученного экономического эффекта. Проще сказать: сложно оценить экономическую отдачу от обучения.
В общем можно сформулировать несколько принципов, в дальнейшем определяющих логику изложения предлагаемого подхода.
1. Экономическую эффективность необходимо оценивать всегда, так как по своей сути это инвестиции в развитие бизнеса (в данном случае в трудовой потенциал). Соответственно и подходы к оценке должны быть схожими с оценкой инвестиционной привлекательности. Иными словами, в ряде случаев нельзя ждать эффекта здесь и прямо сейчас.
2. Оценка должна проводится до и после обучения. До обучения мы определяемся: а стоит ли? После обучения получаем результат: а надо ли было?
3. Вариантом не остаться у «разбитого корыта», хотя и вариантом весьма сомнительным, остается действующая практика заключения договоров, обязывающих сотрудников после обучения отработать на предприятии определенное количество лет (часто 1-3-5 года). В противном случае вернуть затраченные на обучения средства пропорционально неотработанному по договору времени. Почему вариант сомнительный? Во-первых, никак не мотивирует человека к использованию новых, приобретенных знаний и, во-вторых, не определяет эффективность его работы.
4. Как следствие из выше сказанного, эффективность вложений в обучение персонала должно определяться повышением эффективности работы сотрудника в результате обучения.
5. С чего начать? Начать необходимо с четкого категорирования целей обучения. Иными словами, например, вы как специалист, занимающийся подготовкой кадров, формируете план обучения на следующий год. Как вы это делаете? Признайтесь честно! Что подразделения в своих заявках написали, то в план и попало. Затем при утверждении бюджета 30-50% «срезали» (у кого как) и все, оставшихся выучили. А попробуйте, спросите у руководителей ваших подразделений (прежде всего направляющих на обучение ИТР) чего они ждут после обучения, зачем они планируют потратить деньги организации. Вы в лучшем случае получите весьма расплывчатые ответы. А почему? Я отвечу вам! В своем большинстве механизм обучения специалистов (ИТР) используется как способ нематериального стимулирования угодных или отличившихся перед непосредственным руководителем сотрудников. В целом, наверно, и это не плохо, но опять же не снимает вопроса об оценке эффективности данного действия.
Итак, в начале нам необходимо категорирование планируемого обучения по целям. В данном случае следует выделить следующие варианты:
1. Обучение приведет к повышению производительности труда вследствие освоения новых профессиональных навыков, подходов.
2. Обучение приведет к освоению новой профессии, должности. При этом обязательно должно планироваться совмещение профессии, должностей. Например, обучение слесаря на электрогазосварщика с последующим совмещением профессий или обучение специалиста отдела организации труда и заработной платы на бухгалтера по учету заработной платы с последующим совмещение данных должностей.
3. Обучение, после которого сотрудник займет вышестоящую или другую должность.
4. Обучение сотрудников, которое определяется законодательно и контролируется органами Ростехнадзора.
5. Обучение необходимо вследствие установки нового оборудования. Иными словами, персонал должен научится на нем работать. Иногда правда бывает, что персонал и без обучения может работать на новом оборудовании, но при этом не достаточно эффективно. В таком случае мы получаем 1 вариант, приведенный выше.
Как представляется автору, который впрочем, не претендует на абсолютную истину и даже готов поспорить, все другие цели обучения носят больше характер нематериальной мотивации персонала и в рамках данной статьи рассматриваться не будут. Хотя, опять же экономически можно оценить результаты для организации и такой мотивации персонала.
Итак, как оценить эффективность для определенных нами выше вариантов:
1. Данный вариант актуален, когда, например, существуют новые подходы к работе или ее организации на действующем оборудовании, которые необходимо в процессе обучения перенять. Тогда в общем виде экономический эффект будет определяться как:
где S - экономический эффект, руб., ΔP - прирост выработки продукции в единицу времени, тн, C - цена единицы произведенной продукции, руб./тн., Q - затраты на обучение, руб.
2. В случае освоения новой профессии, должности. Экономический эффект будет определяться как:
где S - экономический эффект, руб., Z d - заработная плата действующего работника, руб., Z z - заработная плата замещаемого сотрудника, руб., 0,3хZ d - доплата за совмещение профессии, как правило, составляет 30%, руб., Q - затраты на обучение, руб.
3. В случае замещения после обучения вышестояшей или другой должности. Экономический эффект будет определяться как:
где S - экономический эффект, руб., Q p - затраты на подбор нового сотрудника, руб. Сюда следует включить гонорар кадрового агенства или собственные затраты на подбор (заработную плату с отчислениями специалиста по подбору, а также затраты на организацию его рабочего места). Q - затраты на обучение, руб.
4. В случае обучения сотрудников в соответствии с требованиями законодательства экономический эффект предлагается определять как экономическую оценку последствий не проведения данного обучений:
,
где S - экономический эффект, руб., H - штрафные санкции, ΔP n - недовыработка готовой продукции за период времени запрета эксплуатации оборудования необученным персоналом, т.н, C - цена единицы произведенной продукции, руб./тн., Q - затраты на обучение, руб.
Конечно, в данном случае оценку можно и не проводить и руководствоваться принципом: «Требования законодательства должны быть неукоснительно выполнены!» Это действительно верно - с законом лучше не шутить! Однако, российская практика хозяйствования часто говорит об искренней любви некоторых руководителей все же поиграть в непонятные игры с законодательством. Вот на такой случай и рекомендуется провести экономическую оценку, чтобы руководителю убедительно доказать на примере полученных миллионов вероятного ущерба.
5. В случае, когда обучение необходимо вследствие установки нового оборудования, также можно ничего не оценивать, так как и так все понятно. Однако, если руководство настаивает на том, что учить никого не надо и в процессе работы они все освоят, тогда предлагаем следующий подход:
,
где S - экономический эффект, руб., ΔP - прирост выработки продукции в единицу времени после обучения, тн. Для плановых расчетов рекомендуется взять как разницу между фактической выработкой и номинальной, указанной в паспорте оборудования. C - цена единицы произведенной продукции, руб./тн., Q - затраты на обучение, руб. При оценке фактической эффективности можете добавить еще и затраты на ремонт, возникшие вследствие неквалифицированных действий необученного персонала.
Во всех формулах левая составляющая это доход от недопущения каких-либо затрат, а правая - затраты на реализацию альтернативного варианта. Разница будет являться экономическим эффектом. Тут правда возникает вопрос: «Затраты на обучение (правая составляющая формул) единовременные, а за какой период брать доход (левая сторона формул)?» Здесь возможно множество вариантов, но опять же обращаясь к практике хозяйственной деятельности отечественных предприятий, можно сказать, что рассматривать экономический эффект за период более 2-3х лет смысла не имеет. Во-первых, достаточно быстро устаревают технологии производства и через 3 года возможно потребуется проведение технического перевооружения, во-вторых, учитывая нестабильность рынка труда, через 3 года у вас за счет текучести персонала может поменяться весь рабочий состав и потребуется новое обучение. В-третьих, полученные после обучения теоретические знания и навыки (неиспользуемые каждый день) забываются достаточно быстро. В-четвертых, «закапывать» средства на обучение на срок более чем 2-3 года в современных динамично развивающихся условиях рынка автору кажется не дальновидным.
Кстати у вас может получиться, что проведение некоторого обучения для организации экономически не выгодно и возможно (при условии отсутствия других определяющих условий) от него следует отказаться.
Подводя итог, следует сказать, что вообще предлагаемые формулы оценки нельзя рассматривать как догму. Они могут претендовать лишь на наиболее часто встречающиеся в практике случаи. Жизнь же значительно богаче и к каждому случаю будет необходим индивидуальный подход экономической оценке эффективности обучения персонала.
Мансуров Р.Е., кандидат экономических наук, Директор Зеленодольского филиала ЧОУ ВПО «Институт экономики, управления и права (г.Казань) © Мансуров Р.Е. , 2011 г.© Публикуется с любезного разрешения автора
Оценка эффективности обучения является важным этапом процесса обучения персонала. Ее смысл состоит в том, чтобы установить, какую пользу от обучения работников получает организация, или выяснить, является ли одна форма обучения более эффективной, чем другая. Оценка эффективности обучения работников предприятия позволяет постоянно работать над повышением качества обучения, избавляясь от таких учебных программ и форм обучения, которые не оправдали возложенных на них надежд. Российские руководители часто не обращают должного внимания на эффективность обучения персонала. Основная причина, по которой предприятие должно оценивать эффективность учебных программ, - это выяснение того, в какой степени в итоге были достигнуты цели обучения. Вторая причина, по которой оцениваются обучающие программы, - это необходимость убедиться в том, что изменения рабочих показателей обучающихся произошли именно в результате обучения. Процедура оценки эффективности обучения обычно состоит из четырех этапов:
- 1. Определение целей обучения. Процесс оценки эффективности обучения начинается уже на этапе планирования обучения, при определении его целей. Цели обучения задают стандарты и критерии оценки эффективности учебных программ.
- 2. Сбор данных до обучения. Эта информация отражает уровень знаний, навыков и особенности рабочих установок, которые работники имели до обучения. Эти показатели могут быть трех типов: показатели, характеризующие профессиональные знания, установки и рабочие навыки работников; количественные показатели работы отдельных работников, подразделений или организации в целом (уровень производительности, финансовые показатели, количество поступивших жалоб или претензий покупателей и т.п.); качественные показатели работы отдельных работников, подразделений или организации в целом (качество товаров и услуг, удовлетворенность потребителей, удовлетворенность работников компании, уровень трудовой морали и т.п.).
- 3. Сбор данных в процессе обучения и после обучения (по тем же показателям и с использованием тех же инструментов, что и до начала обучения).
- 4. Сравнение данных, полученных до, во время и после обучения. К примеру, если основной целью программы обучения было повышение производительности труда, а после завершения обучения производительность труда осталась на том же уровне, который был до обучения, то перед организацией встает необходимость либо внесения значительных изменений в данную программу, либо полного отказа от нее. Если возможно, также сравниваются производственные показатели работников, прошедших обучение, с производственными показателями работников, не проходивших обучение (контрольной группы).
Оценка эффективности учебы требует больших затрат времени и достаточно высокой квалификации специалистов, проводящих эту оценку, поэтому многие организации отказываются от такой оценки и просто полагаются на то, что любое обучение работников приносит организации некоторую пользу и в конечном счете оправдывает себя. Эффективность проведенной учебы не всегда можно оценить достаточной точно. Во-первых, возможен отсроченный эффект, то есть обучение даст результаты не сразу после его завершения, а только по прошествии определенного времени. Возможен также кумулятивный эффект, когда достаточно высоких результатов можно ожидать после серии тренингов. И, кроме того, результаты работы отдельных работников, подразделений или всей компании могут улучшиться по причинам, не имеющим никакого отношения к обучению.
Оценки эффективности профессионального обучения делятся на послетренинговые и долгосрочные. Первые измеряют эффект учебной программы непосредственно после ее завершения, вторые - после истечения определенного промежутка времени - например, на IBM принята практика тестирования работников, прошедших обучение, через 6 и 9 месяцев после его завершения.
Чтобы получить всестороннюю картину эффективности проведенного обучения, целесообразно использовать как послетренинговую, так и долгосрочную ее оценку. Последняя дает возможность оценить долгосрочный эффект учебной программы.
Если обучение направлено на формирование определенного типа мышления и поведения сотрудников, а не на выработку конкретных профессиональных навыков, то оценка его эффективности представляется еще более сложной задачей, поскольку результаты таких программ рассчитаны на долговременный период и связаны с поведением и сознанием людей, которые не поддаются точной оценке. В подобных случаях можно использовать следующие методы:
профессиональные и психологические тесты, проводимые до и после реализации программы обучения и показывающие как изменились знания и образ мыслей обучающихся;
наблюдение за реакцией сотрудников в процессе обучения;
оценка эффективности программы самими обучающимися с помощью анкетирования, опросов, обсуждений, бесед.
Результаты оценки эффективности проведенного обучения должны быть обязательно доведены до сведения как самих обученных, так и их непосредственным руководителям и высшему руководству компании. Оценка эффективности профессионального обучения завершает цикл обучения организации и возвращает ее к исходному этапу.
В идеале оценка должна подтвердить целесообразность проведения профессионального обучения и продемонстрировать, каких результатов для организации оно позволило достичь. Эта информация в дальнейшем должна быть проанализирована и использована при подготовке и проведении аналогичных учебных программ в будущем. Такая практика позволяет постоянно работать над повышением эффективности обучения и устранять причины его неэффективности.
Любой HR понимает, что нет смысла проводить обучение без дальнейшей оценки его эффективности.С точки зрения бизнеса измерение эффективности методов развития придает финансовый смысл данным мероприятиям, позволяет компании измерять рентабельность инвестиций. Но есть и другие причины.
Оценка эффективности обучения укрепляет веру сотрудников в необходимость применения знаний, т.к. дает понимание важности изменений для руководства (сродня эффекту контроля). А с точки зрения менеджера по обучению (развитию) персонала процедура оценки определяет дополнительные потребности в обучении, проверяет методологию обучения и позволяет оценивать прогресс.
Благодаря анализу эффективности развития удается выявить устаревшие методы обучения и искоренить работу по типу «процесс ради процесса».
Способы оценки эффективности методов развития
Персонал оценивают в двух направлениях: количественные и качественные показатели .
Нельзя сказать, что какой-то из показателей менее важен, особенно когда целью развития персонала становится повышение результативности работы, следовательно, и прибыли компании. Если не оценивать оба параметра, как правило, инвестиции на обучение становятся не более чем благотворительностью. Честно говоря, в таком случае более результативно было бы перевести эти деньги, например, в фонд спасения животных, так от них было бы больше толку.
Процесс анализа результата придает смысл процедуре обучения, ведь именно для достижения результатов оно и затевалось.
Методы оценки качественных показателей
Вопросник для оценки после обучения
Это один из самых простых и популярных методов. Обычно он строится на серии вопросов, которые задают учащимся.
Например: что они думают о преподавателе, материале, стиле презентации и о чем-либо еще, связанном с программой обучения. Вопросник легко использовать и он дает немедленные результаты.
Сравнение до и после
Данный метод предполагает оценку знаний сотрудников до применения метода развития, а затем выполнение аналогичного теста после тренировки.
При разработке таких оценочных тестов следует иметь в виду ряд правил:
1. Вопросы должны быть короткими.
2. Тест не должен занимать более 10-20 минут.
3. Вопросы необходимо сосредоточить на основных задачах курса. Это позволит четко увидеть, какая информация была воспринята участниками. Но тут важно быть аккуратным в суждениях, ведь материал может быть не воспринят как по причине сотрудника (например, прослушал), так и по вине тренера (не расставил акценты должным образом).
4. Тест необходимо сформулировать на простом и понятном языке.
5. Продуктивнее смешивать истинные, ложные вопросы и с вариантами выбора.
Текущая оценка
Метод сочетает оценку до и после занятий. Как правило, такую оценку проще проводить тренеру или менеджеру по обучению. По завершению информационного блока участникам задают несколько открытых вопросов.
Например:
Такой опрос позволяет менеджеру по обучению корректировать программу, опираясь на ее воспринимаемость: заменять темы или возвращаться к пройденному материалу. Данный подход позволяет получить максимальную отдачу как менеджеру по обучению (в виде результата), так и обучающимся (в виде знаний и умений). При многодневном обучении оценку поводят в конце дня, чтобы внести необходимые изменения в работу группы на следующий день.
Анализ по модели Киркпатрика
Методика оценки Карпатрика уже давно и успешно используется многими HR-ами для изучения эффективности развития персонала. Модификаций и способов применения методики очень много, но за основу берется последовательное измерение:
1. Реакции на обучение.
Оценивается насколько программа курса устраивает обучающихся, как они реагируют на обучение и как планируют использовать знания в работе.
Практика показывает, чем больше мотивация на обучение, тем сильнее реакция на него и выше его оценка сотрудниками. Максимальной мотивации можно достичь, давая прозрачное разъяснение важности изучаемого блока для реализации основного функционала. Если сотрудник слабо понимает силу влияния того или иного процесса на работу, то положительной реакции ждать не стоит.
2. Усвоения материала.
Этап предполагает изучение мнений о доступности и конкретности пройденного курса обучения.
3. Перемены поведения.
Важно понимать, как меняется деятельность людей после обучения, применяются ли новые методики, правильно ли используются, в нужное ли время.
4. Улучшения результата.
Во время оценки необходимо понять, как обучение улучшило показатели бизнеса: понимают и предпринимают ли сотрудники действия, необходимые для достижения результата, владеют ли они всеми знаниями, умениями и навыками для реализации этих действий и осознают ли важность их применения, хотят ли выполнят данные действия.
Опираясь на теорию Кирпатрика, можно создать матрицу оценки эффективности любого метода развития персонала.
| Тема обсуждения/анализа с сотрудниками | Что оценивать | Комментарии |
| Цели компании | Понимание и осознание целей. | Любое обучение организовывается для достижения целей предприятия. Если сотрудник не понимает ради чего его учат, то информация пройдет мимо. |
| Что они должны сделать, чтобы прийти к цели | Четкое, структурированное описание порядка действий. С ответами на вопросы: как, зачем, почему и когда. | Если у коллектива не прозрачного и детализированного понимания того, что нужно сделать, чтобы повлиять на результат – они просто не смогут это реализовать. |
| Чем обучение помогло для выполнения вышеперечисленных действий | Понимают ли сотрудники новый материал и видят ли целесообразность его применения в работе. | Информация даст понимание ценности программы для работников и качества преподнесения материала. |
| Какие возможности видят для себя в применении материала. | Достаточен ли уровень мотивации на применение знаний. | Люди выполняют работу с полной отдачей только, когда их греет ее результат и возможности, которые он открывает. |
Методы оценки количественных показателей
Обучение – достаточно дорогое удовольствие, оно потребляет ресурсы времени, оборудования и персонала. Именно поэтому оценка окупаемости должна быть неотъемлемой частью любой учебной программы. В этом вопросе также поможет модель Кирпатрика. Ее доработали и добавили еще один этап – окупаемость обучения (ROI).
ROI рассчитывает так: (выгоды – затраты)/затраты * 100%
Пример расчета^
Допустим, для обучения сотрудников был нанят тренер. Стоимость его работы 30000 рублей. Для обучения потребовался инвентарь на 3000 рублей. Аренда аудитории для тренинга обошлась еще в 5000 руб. Итого расход составил 38000 руб. За первый месяц после обучения, специалисты научились продавать дополнительные услуги и вместо привычных 50 000руб. получили оплату счетов на сумму 100 000 руб.Таким образом, прибыль от обучения составила 50 000 руб.
В данном случае коэффициент окупаемости рассчитываете так: (50 000 – 38 000)/38000 = 0,315. Для того чтобы понять процент, умножим на 100. Таким образом, коэффициент окупаемости тренинга, начиная с первого месяца, составил 31%. Получается, если суммы оплат дополнительных услуг клиентами не будут уменьшаться и в последующие месяцы, то тренинг окупится примерно за 3 месяца, а дальше будет приносить прибыль.
Интерпретировать показатели ROI достаточно просто, если результат получился больше 100% , то вложения окупаются.
Каждый руководитель определяет для себя самостоятельно, какую окупаемость и за какой промежуток времени считает приемлемой.Для более точных расчетов в расходы можно добавить стоимость упущенной выгоды за время обучения и оплату труда за этот же период.
Ведь во время обучения сотрудники не приносят прибыль, но получают привычный оклад. Таким образом, можно сравнивать эффективность разных программ обучения и выбирать для себя ту, которая имеет наибольший процент возврата.
Дополнительные критерии оценки эффективности обучения персонала
Количественной оценке может подвергаться не только финансовая составляющая. Оценка эффективностиуместнав различных показателях, рассмотрим некоторые из них.
Анализ процента брака продукции, количества персонала и текучести кадров. В конечном итоге данные показатели ведут к анализу снижения затрат на данные процессы.
Продолжительность применения знаний– немаловажный параметр оценки эффективности развития персонала. Чем дольше коллектив использует новинки в работе, тем дольше держится положительный эффект. Следовательно, после оценки можно сделать выбор в пользу той программы, которая оставляет после себя более длинный хвост.
Изменение скорости выполнения задач или реакции на внеплановые ситуации. Статистика говорит, что многие компании привыкли работать в форс-мажорах, но не все с ними справляются должным образом: кого-то такие ситуации на долго выбивают из колеи. Важно оценить понижение затрат на последствия из-за ошибок.
Если организация в ходе своей деятельности активно использует оборудование, то оно периодически приходит в негодность. Увеличение срока службы оборудования в результате применения эффективных методов развития персонала также подлежит оценке.
Обучение без анализа его результатов также бессмысленно, как оценка окупаемости без дальнейших действий по улучшению. А оценка качественных показателей поможет понять, какие методы необходимо скорректировать, а возможно и полностью заменить.
