Критерии должны быть релевантными, достаточными, надежными и свободными от контаминации. Эти требования подробно обсуждаются Гольдштейном (Goldstein, 1986), мы же лишь кратко поясним их.
Релевантность — это то, насколько критерий, используемый для оценки эффективности тренинга, прямо или косвенно соответствует знаниям, умениям и установкам, заданию/элементам задания и потребностям организации, выявленным в ходе предшествующего анализа. Рис. 5.16 иллюстрирует эти взаимоотношения.
Так, например, знания, умения, установки, с одной стороны, и критерии оценки, применяемые во время и по окончании тренинга — с другой, можно считать релевантными ровно в той мере, в какой они отражают равноценные компоненты заданий, требующие тренингового вмешательства. Невыполнение данного условия вызывает неполноценность критерия или контаминацию.
Неполноценность критерия определяется тем, насколько критерии, реально используемые на различных стадиях тренингового цикла, «уступают» потенциально релевантным критериям, разработанным в процессе оценки объектов тренинга. Такая ситуация может быть вызвана двумя причинами: 1) объект тренинга, выраженный в терминах знаний, умений или установок, не представлен в критерии или 2) объект тренинга не включен в программу тренинга.
Контаминация критерия — это включение в критерий посторонних элементов и влияний, в результате чего применение критерия не обеспечивает точной оценки фактора, идентифицированного посредством анализа объектов тренинга. Например, если оценки, полученные стажером во время тренинга, известны его непосредственному начальнику, последний может невольно завысить или занизить свою оценку работы подчиненного.
Фундаментальным требованием к любому критерию является требование надежности. При использовании одного и того же инструмента оценки надежность измеряется устойчивостью критерия во времени либо степенью взаимного соответствия оценок, полученных посредством применения двух или нескольких схожих методов оценки. Так, в последнем случае сильное расхождение в оценках двух независимых экспертов относительно умений стажера будет свидетельствовать о низкой надежности критерия. Низкая надежность критерия ставит под сомнение не только инструменты оценки, но и предполагаемые эффекты различных форм тренинга.
Подробнее о критериях и методах оценки, используемых в процессе тренинга, мы поговорим в главах 6 и 9. Пока отметим лишь, что, начиная с данного момента, тренер ни на секунду не должен забывать