263
подчиненного. Коллеги, подчиненные, клиенты бывшего ученика также могут высказать свое мнение о качестве его работы и ответить на некоторые вопросы тренера. Впрочем, соображения практического, коммерческого, этического или политического характера могут сделать невозможным привлечение этих людей к ассесменту. В любом случае участники ассесмента должны обладать достаточными знаниями и умениями и быть честными людьми, чтобы рационально и непредвзято подойти к оценке исполнения бывшего ученика.
Если валидизация тренинга в контексте научения предполагает оценку исполнения каждого ученика, то посттренинговый ассесмент можно производить выборочно. Это особенно целесообразно в случае массового обучения работников за короткий промежуток времени. В данном случае крайне важно соблюсти правила составления выборки, изложенные в приложении 2.
Какими методами производить ассесмент?На этом уровне валидизации тренер может воспользоваться, по отдельности или в комбинации, различными методами и техниками, главные из которых описаны ниже (некоторые уже упоминались нами в связи с анализом работы и объектов тренинга; описание этих методов, раскрывающее их преимущества и недостатки, содержится в приложении 1).
Опросники. Используя опросник, тренер может получить ответы на большинство вопросов, перечисленных в начале этого раздела. Обычная рекомендация при составлении опросника — это краткость и простота, поскольку краткие опросники имеют более высокий коэффициент заполняемости и вызывают больший интерес у «потребителя». Но потенциальный минус таких опросников заключается в том, что они недостаточно детализированы и потому иногда предоставляют неоднозначную информацию. Несколько сгладить проблему помогают аккуратное составление вопросов и доскональная апробация опросника. Однако в некоторых случаях, особенно при малом количестве учеников, проводить апробацию нецелесообразно.
Контрольные интервью. Для получения более детальной информации, которую невозможно получить посредством опросника, полезно провести контрольное интервью или серию контрольных интервью с использованием стандартных форм и опытных интервьюеров. Как указывает Брэмли (Bramley, 1986), это особенно важно в тех случаях, когда нужно:
• пересмотреть объекты тренинга; • оценить степень переноса;
Глава 9
• исследовать эффективность конкретных методов и техник обуче
ния.
Планирование действий. План действий — это приоритезированный перечень задач, составленный учеником в конце тренинга. Он показывает, какие обязательства берет на себя ученик, какие умения и знания, приобретенные во время тренинга, он намерен применить по возвращении на рабочее место. Подобный план не только облегчает перенос, но и может стать бесценным подспорьем при оценке эффективности тренинга. В частности, его можно использовать для разработки контрольных опросников и форм интервью. Тренер должен быть заинтересован в том, чтобы эти документы охватывали следующие вопросы.
• Какая часть плана выполнена?
• Какие умения были применены на практике?
• Что «отложено» и почему?
Техника критичного инцидента. Суть данной техники в том, чтобы собрать информацию о тех рабочих инцидентах или действиях, которые являются крайне важными или критичными для эффективного выполнения работы, т. е. непосредственно влияют на успех или неудачу. Есть два критерия, на основании которых инцидент квалифицируется как критичный:
• информация об инциденте должна быть получена из первых рук — от непосредственного участника или свидетеля;
• последствия инцидента должны быть очевидными и несомненными.
Информацию о критичных инцидентах собирают посредством интервью или групповой дискуссии. Как правило, участников просят предварительно заполнить специально разработанный опросник.
Собрав ряд инцидентов, тренер должен сопоставить их с заявленными рабочими и учебными целями. Такое сопоставление обеспечит его данными, необходимыми для оценки эффективности учебной программы. Однако не всегда возможно сопоставить инцидент с рабочей или учебной целью, и это может натолкнуть на два вывода. В случае негативного инцидента тренер получает в свое распоряжение информацию о ранее не выявленных объектах тренинга, тогда как позитивный инцидент может свидетельствовать о том, что исполнитель приобрел тренируемое умение ранее — в другом месте или другим способом.
Оценка эффективности тренинга
Оценка исполнения и самооценка. Системы оценки исполнения — это один из способов идентификации объектов тренинга, но они также позволяют тренеру проверить, насколько проведенный тренинг восполнил актуальные или потенциальные пробелы в исполнении. Эти оценочные данные могут быть получены в ходе регулярно проводимых аттестаций персонала либо путем проведения через некоторое время по окончании тренинга специальных упражнений. Линейные начальники, ответственные за оценку исполнения, наверняка выберут первый путь, так как данная процедура меньше других нарушает производственный процесс. Безусловно, для того чтобы аттестация имела хоть какую-то ценность на данном уровне валидизации тренинга, необходимо четко определить параметры и шкалы, по которым будет производиться оценка. Техника критичного инцидента может найти дополнительное применение и оказаться полезной при проектировании и разработке схемы оценки (Latham, Wexley, 1981).
Некоторые оценочные системы предусматривают для работников возможность самим оценить собственное исполнение, что также обеспечивает тренера информацией об уровне компетентности прошедших обучение работников и степени переноса полученных знаний и умений.
Прямое наблюдение. Иногда оценить влияние тренинга на рабочее исполнение можно только наблюдая за тем, как бывшие ученики трудятся на своих рабочих местах. Наблюдатель регистрирует, как ученик справляется с тем или иным заданием, какие действия он выполняет. Данные наблюдений сопоставляются с эффективными паттернами поведения. Эта техника имеет ряд ограничений. Ее применение проблематично в тех случаях, когда работа характеризуется продолжительным циклом активности или нерегулярной и непредсказуемой последовательностью действий. Кроме того, присутствие наблюдателя может повлиять на поведение исполнителя и привести к неверным заключениям.
Изучение производительности и результатов. В отдельных случаях работу исполнителя можно оценить по коэффициенту производительности. Представленный в цифровом выражении, он позволяет совершенно определенно оценить качество и количество произведенной работы. Ориентируясь на эти коэффициенты, тренер может судить о том, выходят ли бывшие ученики на тот уровень исполнения, которого от них ждут. Очень важно выбрать оптимальный период для проведения такого рода анализа. Следует также учесть, в каких уело-