Сейчас любой более или менее обладающий дальновидностью руководитель уделяет повышенное внимание обучению персонала. Чтобы сохранить занятую долю рынка, а в конечном итоге и весь бизнес, работодателю необходимо постоянно следить за повышением образовательного уровня своих работников.
Из этой статьи вы узнаете:
- зачем необходима оценка эффективности обучения персонала;
- как организовать процесс оценки обучения персонала;
- какие существуют модели, чтобы оценить эффективность обучения персонала;
- какие четыре способа использовать, чтобы организовать оценку эффективности обучения персонала.
Если оценка эффективности обучения персонала требует больших расходов от работодателя, то как оправдать траты? Как отмечают эксперты, актуальность проблемы, как оценить эффективность обучения персонала, со временем только растет. Современные вузы не справляются с запросами бизнеса: налицо явное отставания образовательных программ высших и средних учебных заведений от постоянно изменяющихся требрований компаний, стремительно возрастающих ожиданий рынка. Так случается, что сотрудник, недавний выпускник университета, приходит на производство с уже устаревшими знаниями, зачастую непригодными для эффективного роста и развития компании. Работодатель вынужден вкладываться в обучение персонала, особенно это касается молодых специалистов.
Оценка обучения персонала: как организовать процесс
Хорошо, компания готова потратиться на развитие сотрудников. Ведь сама коммерческая деятельность подразумевает вложение средств, правда с определенной целью – ради прибыли. Иначе это уже не бизнес, а благотворительность.Вот тут-то и обнаруживаются трудности оценки эффекта от подготовки. Чтобы процедура проводилась не «ради оценки», HR-менеджерам важно понимать, что они будут делать с ее результатами, и стоят ли усилия вложенных средств.
Можно ведь истратить миллионы на бесполезное развитие персонала, которое не принесет никакой экономической эффективности. Так не лучше ли отдать эти деньги в детский дом? В таком случае ваша благотворительность принесет хотя бы кому-то ощутимую пользу.
Какие существуют модели, чтобы оценить эффективность обучения персонала
Подходы к вопросу, как осуществляется оценка эффективности обучения сотрудников, у большинства компаний разнятся. Но почти все работодатели используют четырехуровневую модель американского исследователя Дональда Киркпатрика, описанную им в 1959 году в книге «Четыре ступеньки к успешному тренингу». Инструмент в настоящее время широко распространен и считается традиционным.
Проведенный HR-специалистами мониторинг методов анализа эффекта от подготовки сотрудников, применяемых на разных предприятиях, показал: чем больше уровней данной модели используется, тем сложнее становится процедура оценки. Трудоемкость оценочных мероприятий проведенных по методике с применением четвертого уровня модели Киркпатрика, превышает даже затраты на проведение всего цикла обучения. По признанию самого автора технологии, проведение оценки обучения на четвертом уровне не всегда целесообразно из-за ее высокой стоимости.
Другим американцем – Дж. Филипсом – в 1991 году был добавлен в модель Киркпатрика пятый уровень оценки – RОI (отдача от инвестиций в развитие сотрудников). На сегодняшний день его модель получила признание (ASTD) «Американская ассоциация тренинга и развития» и успешно используется по всему миру.
Расчет RОI проводится по следующей формуле:
Вместе с расчетом RОI довольно часто занимаются вычислением показателя срока окупаемости, который отражает период времени окупаемости инвестиций, вложенных в подготовку. Показатель срока окупаемости является обратным по отношению к показателю RОI.
Имеет место быть еще одна модель, в нашей стране она практически неизвестна, это так называемая «Таксономия Блюма» (Bloom"s Taxonomy). Модель состоит из трех перекрывающихся частей, сфер, которые часто называют ЗУН (знания, установки, навыки):
- Когнитивная сфера (знания);
- Эмоциональная сфера (установки);
- Психомоторная сфера (навыки).
Данная модель в практическом смысле похожа на модель Киркпатрика, только с ее помощью нельзя сделать финансовую оценку эффективности обучения персонала.
Оценка эффективности обучения персонала: место процесса среди общей функции управления развитием персонала
Оценка эффективности обучения персонала является заключительным этапом управления развитием персонала в современных организациях и предприятиях. Средства, которые тратятся на профессиональное обучение, рассматриваются как инвестиции в развитие персонала предприятия. Эти капиталовложения должны принести отдачу в виде увеличения эффективности деятельности компаний и предприятий.
Методы оценки подготовки сотрудников можно различить по количественным и качественным характеристикам. При количественном методе результаты обучения оцениваются по таким показателям, как:
- общая численность обучаемых сотрудников;
- численность работников, проходящих подготовку, по категориям;
- выбранные способы повышения квалификации;
- сумма затрат на развитие персонала.
Количественный учет эффекта от подготовки работников нужен для формирования социального баланса предприятия. Однако количественные методы не помогут вам проанализировать результаты обучения персонала в плане уровня профессиональной подготовки, его соответствия целям предприятия.
Только благодаря качественным методам оценки результатов подготовки вы определите эффективность обучения персонала и влияние его на технические параметры производства.
Четыре способа, по которым может быть организована оценка эффективности обучения персонала
Специалисты выделяют четыре основных способа качественной оценки результатов профессиональной подготовки. При первом способе происходит оценка способностей и знаний сотрудников непосредственно в ходе или по завершению курса обучения. При использовании второго способа оцениваются профессиональные знания и навыки конкретно в условиях производства. Третий способ – оценивается влияние обучения на параметры производства. Четвертый способ – это способ экономической оценки.
Применяя первый способ, можно определить степень овладения профессиональными знаниями и навыками. Процедура оценки подразумевает участие, как правило, только преподавателей и слушателей; используется экзамен классической формы, «проверочные ситуации» и так далее.
Непосредственный руководитель обучаемого сотрудника проводит оценку профессиональных знаний и навыков в условиях производственной ситуации. Результат от полученных знаний оценивается по истечении, некоторого временного интервала, (шести или двенадцати месяцев) после завершения курса. За этот временной промежуток проявится значимость знаний, которые приобрел сотрудник в процессе обучения, пройдет состояние «эйфории», возникшее сразу по завершению программы. Применение этого способа поможет определить степень практического использования полученных знаний.
Установление степени влияния подготовки сотрудников на параметры производства можно рассматривать как основной оценочный уровень, который связывает результаты обучения с требованиями необходимыми для успешной работы и развития производства. Показатели такого анализа выражаются в физических величинах:
- численность персонала,
- коэффициент брака,
- коэффициент текучести кадров и тому подобное.
В настоящее время отсутствуют комплексные методы анализа, применение которых позволило бы с большей точностью определить степень влияния обучения на каждый отдельный фактор.
Экономическая оценка резульативности подготовки сотрудников основана на целесообразности осуществления инвестиций в персонал, человеческие ресурсы. В качестве критерия целесообразности осуществления инвестиций в персонал принимается размер получения дополнительного чистого дохода, после того как программы обучения будут реализованы. В этом случае:
- Если приращение больше нуля (D < C, где D – инвестиции в персонал, C – возможный долгосрочный эффект от инвестиций, наблюдаемый в производственно-коммерческом процессе), то вложение денежных средств в данную программу по обучению персонала окупается и является целесообразным. При этом чем меньше рыночная норма отдачи капитала, чем выше ожидаемое увеличение чистого дохода в N-ом году, чем больше период времени использования полученных знаний, тем эффективнее капиталовложения в персонал;
- Если D > C, то производство инвестиций в данную программу является нецелесообразным и возникает необходимость в поиске других областей приложения капитала.
Программа обучения персонала своей целесообразностью прямо пропорциональна сроку возможного использования полученных знаний.
Создание некоторых программ обучения ставит своей задачей вовсе не выработку конкретных профессиональных навыков, а нацелено на формирование определенного типа мышления и поведения. Измерение эффективности такой программы довольно сложно произвести напрямую. Ведь результаты программы рассчитаны на долговременный период и связаны с поведением и сознанием людей, которые не поддаются точной оценке. В подобных случаях используются косвенные методы:
- проведение тестов до и после обучения, которые показывают степень увеличения знаний обучающихся;
- наблюдение за поведением прошедших обучение сотрудников на рабочем месте;
- наблюдение за реакцией обучающихся по ходу программы;
- оценка эффективности программы самими обучающимися с использованием анкетирования или в ходе открытого обсуждения.
Установленные критерии оценки эффективности программ еще до начала подготовки должны быть доведены до сведения всех участников (как слушателей, так и тренеров и менеджеров процесса). После финиша программы и подведения результатов, итоги сообщаются в службу управления персоналом, руководству обучавшихся сотрудников и самим сотрудникам, а затем используются при планировании дальнейшей подготовки.
Зачем необходима оценка эффективности обучения персонала
Оценивать эффективность обучения персонала можно с использованием различных моделей. Ведь у каждой из приведенных моделей, имеются свои достоинства и недостатки. На какой из них остановит свой выбор специалист, оценивающий эффективность обучения персонала, полностью будет зависеть от целей, которые поставлены руководством компании.
Применение модели Киркпатрика позволяет быстро получить наглядное представление об эффективности обучающих мероприятий. Использование модели «Таксономии Блюма» делает возможным более подробную оценку эффективности обучения, а также позволяет выбрать определенную стратегию обучения персонала. С помощью модели Дж. Филипса можно оценить финансовые аспекты обучения, например, эффективность вложений в персонал. Поэтому на сегодняшний день, как считают специалисты, проблемой является не необходимость оценки эффективности обучения или отсутствие таковой, а определение выбора ее конкретного алгоритма.
Одной из составляющих системы является обучение сотрудников и создание им условий для профессионального роста. Обучающие программы способствуют повышению квалификационного уровня работников, что сказывается на эффективности производства в целом.
Чем диктуется необходимость обучения персонала
Особенно актуально обучение для производств, считающихся потенциально опасными. Здесь малейшее отклонение от технологии может стать причиной техногенной аварии. Задействованные в этой отрасли сотрудники должны проявлять компетентность в вопросах технического устройства механизмов, пожарной безопасности и так далее. Они должны владеть полным комплексом сведений об охране труда и технике личной безопасности.
Кроме того, производственные технологии не стоят на месте. Они развиваются и становятся все более сложными. Это требует от работников глобальных знаний по управлению инновационным оборудованием.
Кроме того, обучение преследует несколько целей:
- Стремление занять более высокую должность. Допускается последующее совмещение должностей.
- Стремление глубже овладеть профессией.
- Стремление работодателя быть законопослушным. Существует категория программ и курсов, изучение которых является обязательным на производстве. Данный вид обучения подконтролен надзорным органам. В частности, Ростехнадзор достаточно строго относится к этому вопросу. Неисполнение его распоряжений чревато крупными штрафами для руководителя предприятия.
Даже самые квалифицированные сотрудники иногда попросту не успевают за постоянно развивающимися и углубляющимися требованиями рынка. Достаточно часто молодые специалисты, демонстрирующие хорошие знания в процессе обучения на производстве оказываются недостаточно компетентными. Предлагаемые программы для обучения помогут «не отставать» персоналу.
Зачем нужна оценка эффективности обучения персонала
Каждый работодатель должен вкладывать средства предприятия на обучение персонала. Экономическая эффективность подобных инвестиций с лихвой окупается, если обучение было качественным.
У работодателя появляется возможность сформировать команду, состоящую из профессионалов, готовую к выполнению задачи любой сложности. Управленческое решение по поводу распределения обязанностей становится более обоснованным и мотивируемым.
Затраты работодателя включают в себя:
- приобретение программ;
- создание условий для их изучения;
- последующую оценку качества полученных знаний персоналом.
Экономическая отдача от обучения становится тем более полной, чем более объективной является картина оценки обучения.
Отдача обучения оценивается по экономической эффективности, поскольку для работодателей это есть не что иное, как вложение в производство.
От трудового потенциала зависит, будет ли развиваться бизнес дальше, каковы его профессиональные горизонты, и будет ли вообще будущее у предприятия. Эффективность обучения персонала определяется также степенью увеличения эффективности работы сотрудника после прохождения курсов или изучения программ.
То есть, работодатель может определить целесообразность обучения по тому, насколько практически оно выгодно и применимо вообще при решении производственных задач.
Критерии результативности обучения
Наиболее объективным способом оценки эффективности обучения и наличия экономической отдачи от него считается метод экспертных оценок. Решающее мнение здесь отводится эксперту. Для этого собирается предварительная информация, которая позволит измерить уровень эффективности обучения.
С ее помощью эксперт выявит, насколько повысилась компетентность персонала и, главное, как конкретно это отражается на результативности производства. Эффективное обучение должно улучшить финансовые показатели производства, в противном случае затраты на него будут не оправданными.
К критериям результативности относится:
Кроме того, эксперт анализирует уровень сокращения временных и финансовых затрат.
Таким образом, оценка эффективности обучения персонала - это надежный вариант выяснения целесообразности и эффективности проведения обучения.
Как оценить эффективность обучения персонала
Самый объективный показатель - результативность труда после обучения.
Наряду с этим, на современном производстве применяются следующие критерии:
- Общественно-социологические. К ним относится анкетирование и интервьюирование.
- Статистические. Математический анализ полученных данных также позволит увидеть целесообразность проведенного обучения. Простейшая математическая формула - S = (P * C) — Q - максимально объективно отражает картину состояния производства после обучения (S - экономический эффект, P - прирост продукции за определенную единицу времени; C - цена единицы произведенной продукции за данный промежуток времени; Q - затраты на обучение).
- Оценочные. Сотруднику, прошедшему обучение, могут предложить выполнить контрольное задание, которое является итоговым тестом. По сути, это своеобразный экзамен на предмет усвоения новых сведений.
Для руководителя обучение персонала - это хороший способ освоить новую продукцию или минимизировать издержки производства. Нельзя внедрить новые станки в цеху, если предварительно сотрудники не прошли обучение работы на данном оборудовании. Поэтому эффективность обучения персонала является жизненно важным фактором для работодателя.
Влияние результатов обучения может благотворно сказаться на работе всего предприятия. Благодаря ему улучшается микроклимат организации и вырабатывается .
В качестве оценки эксперты используют также показатели, полученные после прохождения обучения:
Оценка эффективности обучения персонала на предприятии проводится также на основе отзывов клиентов и потребителей. Часто после прохождения обучения отзывы становятся более положительными, а жалобы на качество продукции или уровень обслуживания существенно сокращаются.
Это также хороший способ проверить, насколько эффективным было обучение. Если команда сформирована из профессионалов, ставших более компетентными и хорошо владеющими навыками работы, в коллективе сокращается «текучка» и уменьшается число производственных конфликтов.
Формирование эффективной команды - это конечная цель каждого работодателя.
Эффективность обучения-как правильно ее оценить?
Вопрос о необходимости оценки эффективности обучения персонала активно муссируется в профессиональных кругах тренеров, консультантов и HR-менеджеров. Однако модели оценки во многом различны: часть из них направлена только на качественную оценку эффективности обучения , часть включает также и количественную оценку.
Многие компании ограничиваются раздачей так называемых "листков счастья" - опросных листов, включающих такие вопросы, как: понравился ли вам тренинг, понравился ли вам тренер, как вы оцениваете эффективность проведенной программы обучения , какие еще тренинги вы хотели бы пройти? Понятно, что ответы на эти вопросы никоим образом не улучшают положение HR-менеджеров, от которых руководство все чаще требует отчета о результативности проведенных обучающих мероприятий. Но это у нас. За рубежом уже давно и с успехом используется несколько моделей оценки эффективности обучения . Некоторые из них известны и в нашей стране, некоторые являются для нашего рынка обучения лишь экзотикой. Наша компания сама не раз сталкивалась с необходимостью оценки эффективности проведенных бизнес-тренингов и семинаров, как у клиентов, так и по внутренним программам обучения .
Мы поставили целью показать различные модели оценки эффективности обучающих программ .
Начнем с рассмотрения самой известной модели Дональда Киркпатрика.
В 1959 г. американский исследователь Дональд Киркпатрик предложил четырехуровневую модель оценки эффективности обучения , которая получила широкое распространение и сегодня является классической.
Рассмотрим уровни модели Д. Киркпатрика подробнее.
Первый уровень - "Реакция участников"
Направлен на выявление того, понравилось ли участникам обучение. Для оценки этого уровня используют стандартные анкеты. Основные темы вопросов в анкетах:
Полезность полученных знаний и навыков для реальной работы;
Интересность программы;
Сложность, доступность подачи материала.
Это тот уровень, который измеряется чаще всего. Многие российские компании уже внедрили такую практику на сегодняшний день. К примеру, в нашей компании мы используем вопросник, состоящий из следующих частей.
1. Какая часть тренинга будет наиболее полезна для вашей работы?
2. Какая часть тренинга будет наименее полезна для вашей работы?
3. Есть ли какие-либо темы, которые вы хотели бы включить в программу тренинга?
4. Какой частью тренинга вы бы пожертвовали ради включения интересующих вас тем?
5. Как бы вы в целом оценили программу тренинга?
6. Как вы оцениваете баланс между отдельными частями тренинговой программы (видеофрагментами, упражнениями, играми, кейсами, лекциями, дискуссиями)?
7. Как вы оцениваете продолжительность программы тренинга ?
8. Достаточно ли времени было отведено на игры и обсуждения?
2. Оценка качества проведения тренинга , до- и посттренинговой работы (продолжительность программы, количество перерывов, эффективность посттренинговой оценки, качество оценки потребности в обучении, эффективность постановки целей и т. д.). Соответствующий раздел анкеты включает вопросы следующего типа:
1. В какой степени были достигнуты ваши личные цели в программе тренинга ?
2. Какие из ваших личных целей не были достигнуты и почему?
3. Как вы оцениваете качество посттренинговой работы?
4. Как вы считаете, достаточно ли перерывов, сделанных в ходе тренинга , для отдыха в процессе обучения ?
5. В какой степени, по вашему мнению, поставленные цели тренинга были достигнуты?
6. Как вы оцениваете качество проведенной посттренинговой работы?
3. Оценки тренера и его навыков (навык презентации, коммуникации, обратной связи, стиля ведения и прочее):
- знание предмета;
- организация тренинга;
- подготовка к тренингу;
- стиль;
- отзывчивость, обратная связь;
- создание благоприятного климата.
4. Оценка качества организации тренинга (размещение, доставка, помещения для тренинга, качество раздаточных и презентационных материалов):
1. Как вы оцениваете количество выданных раздаточных материалов?
2. Как вы оцениваете количество презентационных материалов (видео, аудио, слайды, флипчарт)?
3. Как вы оцениваете качество презентационных материалов (видео, аудио, слайды, флипчарт)?
4. Как вы оцениваете размещение участников?
5. Как вы оцениваете помещение для тренинга?
6. Как вы оцениваете качество обслуживания (питание, кофебрейки)?
Для каждого из вопросов задается определенная шкала оценки, например, от 1 до 6 баллов, где каждый балл сопровождается словесным описанием.
Второй уровень - "Обученность"
Определяет, как изменились знания участников в результате обучения и изменились ли они вообще. Для оценки этого уровня используют специально разработанные тесты, опросники и задания, которые позволяют количественно измерить прогресс в компетенции или мотивации участников.
Также возможно провести наблюдение в процессе обучения , в частности, в ходе выполнения контрольных упражнений или ролевых игр, либо после обучающих мероприятий в ходе рабочего процесса.
Например, мы организуем ассессмент-центр, в состав которого входят деловые игры, требующие проявления определенных навыков, кейсы, так называемые упражнения "ин-баскет". Так, для секретарей проводится упражнение по разбору документов и корреспонденции, подготовке материалов к совещанию за определенное время, ответам на звонки "трудных" клиентов.
Приведем пример упражнения "ин-баскет" для сотрудников, прошедших тренинг по управлению персоналом. Упражнение составлено на основе имитационного теста по управлению персоналом.
Ваша задача:
1. Рассмотреть человека, изображенного на фотографии.
2. Познакомиться с описанием текущей проблемы, возникшей в отношении этого человека.
3. Выбрать из списка действия, которые вы считаете наиболее уместными в данном случае. Если вы не находите в списке достаточного количества необходимых действий, то по крайней мере надо исключить действия, которые в данной ситуации применять совершенно не уместно. Для каждого кейса вы не должны выбирать ответ "ДА" более пяти раз (и менее трех).
Третий уровень - "Применение"
Выявляет, применяют ли участники полученные в ходе обучения знания и навыки на рабочем месте? Есть ли реальные изменения в их работе? Оценка данного уровня обычно проводится посредством инструментов, разработанных по принципу "360 градусов". Другой способ - использовать существующую в организации систему ключевых показателей (KPI) или сбалансированную счетную карту (ССП). В случае с тренингом продаж можно, например, сравнить количество жалоб или число заключенных сделок до и после обучения . Для оценки изменения поведения персонала на рабочем месте используется специальная анкета. Она создана для изучения изменения рабочего поведения в результате проведения обучающих мероприятий. Представленные в анкете темы затрагивались в ходе обучения и поэтому имеют непосредственное отношение к его эффективности.
Четвертый уровень - "Результаты"
Направлен на выявление изменений в бизнес-показателях компании в результате обучения . Данный уровень, как правило, является наиболее сложным для измерения, особенно, если учесть тот факт, что на показатели бизнеса влияют также и другие факторы, а изолировать их влияние практически невозможно.
Таким образом, модель Д. Киркпатрика, несмотря на простоту и удобство в использовании, страдает большой долей субъективизма и не предоставляет количественных показателей об эффективности обучения .
В 1991 г. другой американец - Дж. Филипс - добавил в модель Киркпатрика пятый уровень оценки - RОI (отдача от инвестиций в обучение). Его модель сегодня признана "Американской ассоциацией тренинга и развития" (ASTD) и используется во всем мире.
Расчет RОI позволяет:
Количественно выразить улучшение результативности и качества работы в результате обучения сотрудников;
Выразить в денежном эквиваленте ценность проведенного обучения ;
Определить возврат на инвестиции в обучающие мероприятия;
Принимать обоснованные решения по выбору обучающих программ, сравнивая их эффективность.
Однако процедура вычисления RОI довольно трудоемка. Из-за трудности расчета RОI данный показатель рекомендуется измерять лишь в случае удовлетворения следующих показателей:
Большая продолжительность программы обучения ;
Важность программы обучения для достижения корпоративных целей;
Обозримость программы (этапы) обучения ;
Большая целевая аудитория;
Высокая степень заинтересованности лиц, принимающих решения.
Формула для расчета RОI выглядит следующим образом:
Приведем пример расчета RОI для тренинга по управлению персоналом, который проводился нами для начальников цехов и мастеров участков производственного предприятия. Всего в тренинге принимали участие 15 человек.
Доходы от обучения , выраженные в улучшении качества исполнения обязанностей, подсчитаны нами как произведение среднего процента использования навыков в работе и заработной платы соответствующего сотрудника. Они составили в совокупности 21 900 у.е. за месяц. С учетом процедуры корректировки данная сумма составила:
21900 х (1-0,35)=14 235 у.е.
Кроме того, в результате обучения текучесть персонала снизилась на 14% и составила 13%, что соответствует снижению затрат на подбор, обучение и адаптацию примерно 23 человек. Следовательно, можно рассчитать доход от снижения текучести:
13% от численности работников компании составляет примерно 23 человека;
Средние затраты на подбор, обучение и адаптацию работников составляют 928 у.е.
Соответственно, доход от снижения текучести равняется 21 804 у.е.
Общий доход от проведения обучения , таким образом, составил 36 039 у.е.
Затраты на обучение 15 сотрудников:
Оплата услуг сторонних тренеров: 1700 у.е. х 2 = 3400 у.е.
Аренда помещения: 1000 у.е.
Оплата питания: 1800 у.е.
Оплата доставки сотрудников: 400 у.е.
Заработная плата участников (за 2 дня): 3000 у.е.
Заработная плата координатора (за время подготовки и проведения тренинга): 120 у.е.
Итого: 9720 у.е.
Показатель RОI для проведенного тренинга по управлению персоналом равен:
Интересен вопрос о том, какой показатель R0I считать приемлемым. Сам Филипс утверждает, что данный показатель может превосходить 800%. Более того, компания Tennessee Valley Authority, награжденная ASTD, рассчитала средний показатель RОI на уровне 1000%. Одним из выходов в данной ситуации может быть сравнение полученного значения RОI с аналогичным показателем по финансовым проектам, а также сравнение динамики RОI обучения по различным временным периодам. Так, рассчитанный нами показатель R0I значительно превосходил аналогичный показатель по другим инвестиционным проектам предприятия, что еще раз доказывает эффективность вложений в персонал.
В дополнение к расчету RОI часто вычисляют показатель срока окупаемости, отражающий срок, за который окупаются вложенные в обучение инвестиции. Срок окупаемости представляет собой показатель, обратный показателю RОI.
Существует еще одна модель оценки обучения , практически неизвестная в России, - "Таксономия Блюма" (Bloom"s Taxonomy). Она состоит из трех частей - перекрывающихся сфер, которые часто называют ЗУН (знания, установки, навыки).
Когнитивная сфера (знания)
1. Вспоминание информации
2. Понимание
3. Использование на практике
4. Анализ информации (структуры/ элементов)
5. Синтез (создание/построение)
6. Оценка (сравнение)
Эмоциональная сфера (установки)
1. Восприятие (осознание)
2. Ответ (реакция)
3. Оценка ценности (понимание и действие)
4. Сочленение (комбинирование, интеграция схожих навыков)
5. Усвоение системы ценностей (адаптация поведения)
Психомоторная сфера (навыки)
1. Имитация (копирование)
2. Управление (следование инструкциям)
3. Развитие точности, четкости
4. Организация личной системы ценностей
5. Натурализация (доведение до автоматизма, экспертное знание)
Каждая из трех сфер основана на предпосылке о том, что все категории внутри каждой сферы расположены строго в определенном порядке по степени нарастания сложности. Эти категории являются последовательными уровнями развития сотрудников в процессе обучения . В целом в практическом смысле модель похожа на модель Д. Киркпатрика. Она также требует составления по каждой из составляющих определенных вопросов, тестов или упражнений, но не дает финансовой оценки эффективности обучения .
Таким образом, для оценки эффективности обучения можно использовать различные модели, каждая из которых обладает своими достоинствами и недостатками. Выбор той или иной модели всецело зависит от целей, которые ставит перед собой специалист, занимающийся оценкой. Модель Д. Киркпатрика позволяет быстро получить наглядное представление об эффективности обучающих мероприятий. Модель "Таксономия Блюма" делает возможным более подробную оценку эффективности, а также выбор определенной стратегии обучения сотрудников. Модель Дж. Филипса направлена на оценку финансовой стороны обучения , а именно - эффективности вложений в персонал. Поэтому на сегодняшний день, нам кажется, проблема состоит не в необходимости оценки эффективности обучения или ее отсутствии, а в выборе ее конкретного алгоритма.
Предисловие
1 РАЗРАБОТАНА Учреждением образования «Белорусский государственный университет информатики и радиоэлектроники»
ИСПОЛНИТЕЛИ:
Алябьева И.И., инженер-электроник отдела менеджмента качества
Соколовская Е.Н., бизнес-аналитик отдела менеджмента качества
ВНЕСЕНА Рабочей группой по созданию и внедрению системы менеджмента качества образования
2 УТВЕРЖДЕНА И ВВЕДЕНА В ДЕЙСТВИЕ приказом ректора
от 02.11.2012 №256
3 ВВЕДЕНА ВЗАМЕН МИ 3.6-02-2010 (версия 01)
© БГУИР
Настоящая методическая инструкция не может быть тиражирована и распространена без разрешения учреждения образования «Белорусский государственный университет информатики и радиоэлектроники»
Издана на русском языке
Назначение и область применения 4
Нормативные ссылки 4
Термины, обозначения, сокращения 4
Общие положения 5
Оценка результатов обучения 7
Приложение Б Анкета оценки обучения (заполняется сотрудником) 10
Приложение В Анкета оценки обучения (заполняется руководителем) 11
Приложение Г Оценка результативности обучения сотрудника 12
Приложение Д Отчет об оценке результативности обучения сотрудников подразделения за год 13
Лист регистрации изменений 14
Лист согласования 15
1 НАЗНАЧЕНИЕ И ОБЛАСТЬ ПРИМЕНЕНИЯ
Настоящая методическая инструкция является документом системы менеджмента качества университета. Предназначена для оценки степени результативности обучения персонала и применяется в структурных подразделениях в целях обеспечения требований пунктов 6.2.2(b,c); 7.4.1, 7.4.3 СТБ ISO 9001-2009.
Настоящая методическая инструкция распространяется на все структурные подразделения университета, направляющие сотрудников на обучение, повышение квалификации, переподготовку и др. виды обучения и самообразования и обязательна к применению для руководителей всех уровней.
2 НОРМАТИВНЫЕ ССЫЛКИ
СТБ ИСО 9000-2006 Системы менеджмента качества. Основные положения и словарь.
СТБ ISO 9001-2009 Системы менеджмента качества. Требования.
СТБ ИСО 9004-2001 Системы менеджмента качества. Рекомендации по улучшению деятельности.
ТК РБ 4.2-МР-17-2003 Методические рекомендации по организации постоянного повышения результативности системы менеджмента качества.
3 ТЕРМИНЫ, ОБОЗНАЧЕНИЯ, СОКРАЩЕНИЯ
В настоящей методической инструкции применяются термины и определения по СТБ ИСО 9000–2006, а также следующие термины с соответствующими определениями:
Результативность – степень реализации запланированной деятельности и достижения запланированных результатов.
Компетентность – выраженная способность применять знания и умение.
Обучение – целенаправленный процесс организации и стимулирования учебной деятельности обучающихся по овладению знаниями, умениями и навыками, развитию их творческих способностей.
4 ОБЩИЕ ПОЛОЖЕНИЯ
4.1 Комплексная оценка результатов обучения формируется по завершению всех этапов процесса обучения работника и предопределяется четкостью поставленных целей на каждом из этапов обучения, включающих:
1) определение потребностей в обучении (анализ потребностей организации, связанной с компетентностью, анализ прочих потребностей в обучении работника, анализ готовности, мотивации, способности работников к обучению и самообразованию);
2) проектирование:
четкая постановка конкретной цели обучения;
разработка плана-графика и сроков обучения сотрудников подразделения;
планирование, при необходимости, согласование учебных программ;
выбор форм и методов обучения – курсы, семинары, консультации, инструктаж, заочное, дистанционное обучение и пр.;
анализ обучающих организаций (внешних или внутренних поставщиков обучения – преподавателей, тренеров и пр.);
выбор методов мониторинга и контроля;
методы и формы оценки результатов/итогов обучения поставщиком обучения;
планирование финансирования обучения;
вовлечение сотрудников/работников как активных участников процесса обучения;
предусмотреть возможности улучшения реализации потребностей в обучении
4) оценка результатов обучения.
Рисунок 1 – Цикл обучения
(ГОСТ Р ИСО 10015-2007 Руководящие указания по обучению)
4.2 Анализу требований к поставщику обучения (внутреннего или внешнего) подвергается:
уровень компетентности преподавательского состава;
опыт работы в данном секторе услуг;
программа обучения, отвечающая поставленным целям и ожидаемым результатам;
используемые образовательные технологии;
стоимость обучения;
критерии и методы оценки результативности обучения в целях определения: достижения поставленных целей, ожидаемых результатов, оценки приобретенной компетентности обученного сотрудника, оценки удовлетворенности потребителей (обучаемого сотрудника, руководителя СП данного сотрудника);
формы оценки и сертификации.
4.3 Выбор поставщика обучения фиксируется/регистрируется и завершается оформлением соглашения/договора на обучение с отражением всех тем, сроков, стоимости, условий, полномочий и ответственности применительно к процессу обучения, порядка разрешения споров и пр. статей, предусмотренных законодательством Республики Беларусь (для внешнего поставщика обучения).
4.4 Завершение обучения документально оформляется в виде записей по обучению.
5 ОЦЕНКА РЕЗУЛЬТАТОВ ОБУЧЕНИЯ
5.1 Основной целью оценки результатов обучения является подтверждение достижения целей обучения в целом, включая оценку результативности обучения.
Используемый метод оценки результативности обучения –анкетирование (комбинированное, двухуровневое).
При необходимости развернутого анализа можно пользоваться многоуровневой моделью Д. Киркпатрика, Дж. Филлипса (дополнительно учитывающий экономический показатель), однако необходимо оценить целесообразность и оптимальность выбора данных многоуровневых моделей с соотнесенными затратами.
5.2 Оценка проводится за краткосрочный и долгосрочный периоды.
При оценке за краткосрочный период обрабатывается информация обратной связи от обучаемого (о практической ценности обучения, методах обучения, используемых ресурсах, а также знаниях и навыках, приобретенных в результате обучения) (приложение Б) и непосредственного руководителя обученного сотрудника (приложение В) о практической ценности обучения и предложенных аспектов для улучшений.
Критерии результативности:
удовлетворенность обучающихся;
приобретения обучающимися знаний, навыков и подготовки;
Оценка проводится на основе следующих критериев:
удовлетворенности обучающихся;
приобретения обучающимися знаний, навыков и качеств;
удовлетворенности со стороны руководства;
влияния на организацию (по результатам анализа предложенных аспектов для улучшений);
процедур мониторинга процесса обучения.
5.3 Процесс оценки включает сбор данных, анализ и оценку результативности обучения, подготовку отчета по оценке (приложения Г, Д).
Отчет по оценке обучения включает в себя следующее:
заявки на обучение (в соответствии с планом обучения работников структурного подразделения;
критерии оценки, описание источников и методов;
анализ собранных данных и интерпретацию результатов;
выводы и рекомендации по улучшению.
Заполненные и обработанные анкеты оценки обучения хранятся в структурном подразделении до окончания отчетного периода.
При обнаружении несоответствий необходимо применение корректирующих действий.
Данные отчета являются входными данными для процесса мониторинга, основной целью которого является обеспечение объективных свидетельств результативности процесса обучения и удовлетворения требований организации в обучении. Мониторинг предусматривает анализ всего процесса обучения на каждой из четырех стадий (рисунок 1).
Методы мониторинга могут включать в себя анкетирование, тестирование, консультирование, наблюдение и сбор данных.
Алгоритм оценки результативности обучения приведен в приложении А.
Приложение А
Алгоритм оценки результативности обучения
Приложение Б
Анкета оценки обучения (заполняется сотрудником)
Участник обучения (ФИО)______________________________________________________
Структурное подразделение, должность __________________________________________
Тема обучения ________________________________________________________________
Дата обучения _____________Место проведения ___________________________________
Учебное заведение_____________________________________________________________
1. Оцените результативность обучения по 5-бальной шкале (5 – отлично, 4 – хорошо, 3 – удовлетворительно, 2 – плохо, 1 – очень плохо)
|
Критерии оценки обучения |
Оценка |
Примечание |
|
1. Соответствие содержания курса обучения ожиданиям | ||
|
2. Актуальность для Вас полученных знаний (своевременность) | ||
|
3. Новизна полученной информации (современность) | ||
|
4. Соответствие содержания курса программе обучения | ||
|
5. Понятность изложенного материала | ||
|
6. Темп проводимых занятий | ||
|
7. Удовлетворенность используемыми технологиями обучения | ||
|
8. Практическая ценность материала, применимость для работы | ||
|
9. Удовлетворенность полученными материалами | ||
|
10. Насколько обучение способствовало совершенствованию личных качеств? | ||
|
Общее количество баллов | ||
|
Оценка обучения сотрудника, Осотр, % : (Осотр = общее кол-во баллов х 100) / 50
|
2. Ваши предложения по улучшению деятельности (сотрудника, подразделения, университета) с учетом полученных при обучении знаний:
3. Оцените качество преподавания по 5-бальной шкале (5 – отлично, 4 – хорошо, 3 – удовлетворительно, 2 – плохо, 1 – очень плохо)
|
Критерии оценки качества преподавания |
Оценка |
Примечание |
|
1. Доступность изложения материала | ||
|
2. Используемые технологии обучения (практические задания, работа в группах, использование современных технических средств) | ||
|
3. Оценка уровня компетентности преподавателя | ||
|
4. Коммуникабельность преподавателя, умение наладить контакт с аудиторией | ||
|
Общее количество баллов | ||
|
Оценка качества преподавания, Кпр, % : (Кпр = общее кол-во баллов х 100) / 20
|
4. Ваши пожелания по совершенствованию преподавания _____________________________________________________________________________5. Ваше желание дальнейшего обучения: а) по тематике проведенного обучения Да / Нет
б) по другой тематике Да / Нет
__________________ ________________
Дата Подпись
Приложение В
Анкета оценки обучения
(заполняется руководителем)
Структурное подразделение_____________________________________________________
Руководитель (ФИО)___________________________________________________________
Участник обучения (ФИО), должность____________________________________________
Тема обучения (семинара)_______________________________________________________
Когда и кем проводилось обучение _______________________________________________
|
Критерии оценки |
Оценка |
Замечания |
|
1.Практическая ценность знаний, полученных при обучении для подразделения, университета | ||
|
2.Ценность внесенных сотрудником предложений по улучшению работы сотрудника/подразделения/ университета | ||
|
3.Насколько обучение способствовало развитию у работников необходимых для работы навыков | ||
|
4.Насколько обучение способствовало развитию у работников необходимых для работы личных качеств | ||
|
Общее количество баллов | ||
|
Общая оценка, Орук, % (общ. кол-во баллов х100) / 20
|
2. Какие еще знания, умения необходимы сотруднику для успешного выполнения его должностных обязанностей: ваши предложения по улучшению деятельности (отдела, подразделения) с учетом полученных на семинаре знаний:
__________________________________________________________________________________________________________________________________________________________
3. Какое обучение еще необходимо для данного сотрудника (по какой тематике):
__________________________________________________________________________________________________________________________________________________________
4. Ваши пожелания по совершенствованию обучения в университете:_________________ _______________________________________________________________________________________________________________________________________________________________________________________________________________________________________
__________________ ________________
Дата Подпись
Приложение Г
Оценка результативности обучения сотрудника
Сумма весовых коэффициентов равна 1.
Графа «Значение критерия» заполняется:
по разделу 1 Анкеты (для сотрудника) Приложения Б
по разделу 1 Анкеты (для руководителя) Приложения В
Результативность критерия определяется как произведение Весовой коэффициент х Значение критерия (%)
Приложение Д
Отчет об оценке результативности обучения сотрудников подразделения за ______________ год
1. Основание проведения обучения____________________________________________ план-график обучения на ___ г., приказ №___ от _____, пр. основание
2. Критерии оценки результативности:
1) Доля персонала, прошедшего обучение:
Р 1 = К 1 /К 2 100, %
К 1 – количество обученных работников,
К 2 – общее количество работников, запланированных по плану-графику обучения
2) Оценка результативности обучения сотрудниками:
Р 2 = ∑О сотр /кол-во анкет, %
3) Оценка результативности обучения руководителями подразделений:
Р 3 = ∑О рук /кол-во анкет, %
Общая результативность обучения сотрудников:
Робщ = ∑Р i / кол-во анкет, %
3. Оценка качества преподавания:
К = ∑К пр /кол-во анкет, %
К пр – показатели оценки качества преподавания (из анкет обучения, заполняемых сотрудниками)
____________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________
__________________ __________________ ______________________________
Дата Подпись ФИО
ЛИСТ РЕГИСТРАЦИИ ИЗМЕНЕНИЙ
|
№ изме-нения |
Дата внесения изменения, дополнения и проведения ревизии |
Номера листов |
Шифр документа
|
Краткое содержание изменения, отметка о ревизии |
ФИО, подпись
|
|
1 |
2 |
3 |
4 |
5 |
6 |
Оценка эффективности обучения является центральным моментом управления профессиональным обучением и одновременно самой сложной проблемой такого управления.
В середине прошлого столетия американец Дональд Киркпатрик предложил многоуровневый концептуальный подход к оценке эффективности обучающих программ, который остается базовым и сегодня. При переходе от уровня к уровню оценка становится все более глубокой и точной.
На первом этапе происходит оценка на уровне «нравится/не нравится», то есть определяется степень эмоциональной удовлетворенности. Неудовлетворенность, бесспорно, говорит о неэффективности данного обучения для того, кто остался им не доволен. Однако удовлетворенность остальных «учеников» вовсе не является показателем того, что обучение было для них эффективным.
На втором уровне оценка «прирастает» мониторингом знаний и умений до и после обучения, то есть осуществляется, пока еще не количественная, но уже качественная оценка реальной эффективности обучения. Для того чтобы достичь самоцели, а именно оценки бизнес-результата обучения, пройти первые два уровня недостаточно.
На третьем уровне модели Киркпатрика необходимо убедиться в реальных изменениях производственного поведения обученного сотрудника. То есть необходимо понять, применяет сотрудник полученные знания и навыки в своей работе или нет.
На четвертом уровне должен быть проведен мониторинг изменений в работе сотрудника, подразделения или даже компании в целом. К примеру, речь может идти о количестве клиентов, удержанных или возвращенных благодаря деятельности обученного сотрудника, о снижении количества брака на определенное число единиц продукции, о сокращении времени выполнения заказа и т.д.
Таким образом, для оценки эффективности процесса обучения можно выделить следующие критерии:
мнение обучающихся
удовлетворенность учащихся;
усвоение учебного материала;
изменения поведения, степень использования полученных знаний и навыков в процессе работы;
рабочие результаты;
эффективность затрат.
Для определения результатов обучения можно использовать такие методы, как опросы, экзамены и тесты, аттестация сотрудников, анализ динамики общих показателей деятельности организации. При этом общепризнанной является точка зрения, что обучение не может оцениваться только с позиций эффективности. Согласно теории человеческого капитала знания и квалификация наемных работников рассматриваются как принадлежащий им и приносящий доход капитал, а затраты времени и средств на приобретение этих знаний и навыков - инвестиции в него.
В любом случае, критерии оценки должны быть установлены до обучения и доведены до сведения обучающихся, обучающих и управляющих процессом профессионального обучения.
Считается, что успех программы профессионального обучения на 80% зависит от её подготовки и только на 20% от желания и способности обучающихся. Обучение будет в одинаковой степени неэффективно в случае отношения к нему как к «оплачиваемым каникулам» или как к «наказанию». Понимание того, как профессиональное обучение может заинтересовать сотрудника, позволяет соответствующим образом преподнести ему информацию о предстоящей программе.
Прежде чем оценивать эффективность вложения средств, в компании необходимо выстроить систему контроля над результатами обучения. Самая распространенная ошибка, которую допускают компании-заказчики, состоит в отсутствии контроля за результатами обучения персонала. Для определения того, насколько эффективно оказалось проведенное обучение персонала, необходимо также определить, что было на входе и что получилось на выходе, другими словами, где произошел прирост знаний, умений и навыков во время обучения. Таким образом, система контроля обязательно включает в себя:
входной контроль;
текущий контроль (если речь идет о длительных программах обучения);
заключительный контроль (может иметь формальную и неформальную форму);
контроль за использованием приобретенных знаний и навыков в процессе работы.
Осуществлять такой контроль может и непосредственный руководитель на рабочем месте сотрудника, можно проводить анкетирование, чтобы выяснить, как изменился, например, уровень сервиса и т.д.
При проверке результатов обучения необходимо убедиться, что каждому, прошедшему курс обучения, созданы условия для применения полученных знаний при выполнении повседневных обязанностей. То, чему работник обучился, только тогда принесет пользу, когда будет перенесено из учебной аудитории на рабочее место. Может случиться, что, возвратившись на свое рабочее место, полный энтузиазма, он не встретит поддержки и не сможет воспользоваться обратной связью. Через какое-то время социальная среда заставит его вернуться к тому, как он действовал раньше. Таким образом, теряется все ценное, что дало обучение, а в худшем случае отвергаются все мотивирующие факторы в потребности обучения.
Процедура оценки эффективности обучения обычно состоит из четырех этапов.
Определение целей обучения. Процесс оценки эффективности обучения начинается уже на этапе планирования обучения, при определении его целей. Цели обучения задают стандарты и критерии оценки эффективности учебных программ.
Сбор данных до обучения. Эта информация отражает уровень знаний, навыков и особенности рабочих установок, которые работники имели до обучения. Эти показатели могут быть трех типов:
показатели, характеризующие профессиональные знания, установки и рабочие навыки работников;
количественные показатели работы отдельных работников, подразделений или организации в целом (уровень производительности, финансовые показатели, количество поступивших жалоб или претензий покупателей и т.п.);
качественные показатели работы отдельных работников, подразделений или организации в целом (качество товаров и услуг, удовлетворенность потребителей, удовлетворенность работников компании, уровень трудовой морали и т.п.).
Сбор данных в процессе обучения и после обучения (по тем же показателям и с использованием тех же инструментов, что и до начала обучения).
Во время обучения можно собрать ценную информацию о мотивации слушателей, об их интересе к разным учебным темам, об их оценке работы преподавателей и др. Данные после обучения могут быть собраны разными способами: заполнить специально разработанные опросники, чтобы они оценили данную программу, работу преподавателей, свою включенность в обучение и т.д. Для оценки степени усвоения учебного материала по окончании обучения могут быть проведены зачеты, экзамены, тестирование.
Сравнение данных, полученных до, во время и после обучения.
Эффективность обучения - это не вопрос веры или убеждений, а вполне конкретные результаты, которые можно (и нужно!) оценивать количественно или качественно. Эффективность проведенной учебы не всегда можно оценить достаточной точно. Во-первых, возможен отсроченный эффект, то есть обучение даст результаты не сразу после его завершения, а только по прошествии определенного времени. Поэтому некоторые организации используют практику многократных оценок через определенные промежутки времени.
Дальнейшее использование результатов оценки будет зависеть от ее целей. После завершения обучения и проведения его оценки результаты могут использоваться при дальнейшем планировании профессионального обучения, а также корректировка тренинговых программ, сценариев тренинга, способов работы с теми или иными техниками.
Таким образом, все методы обучения персонала могут принести необходимый результат и быть востребованы внутри организации. Главное -- знать, какого результата ждет компания от данного обучения персонала, зачем ей это нужно, и каким образом будут контролироваться полученные результаты.
