д.
В связи с использованием данных профессионального обучения как
критериальной меры полезно различать промежуточные и конечные кри-
терии. Применительно к тесту отбора военных летчиков или к тесту ме-
дицинских способностей, например, конечными критериями будут со-
ответственно выполнение боевых заданий и врачебная практика.
Очевидно, для получения таких данных потребуется много времени. Со-
мнительно к тому же, что такой критерий действительно является ко-
нечным. Наконец, даже если бы такие конечные данные удалось полу-
чить, на них, вероятно, сказывалось бы действие многих не поддающихся
контролю факторов, что снижало бы ценность результатов. Так, трудно
было бы оценить относительную степень успеха врачей разных специаль-
ностей в различных частях страны. Поэтому в качестве критериальных
мер часто используются промежуточные критерии.
Наилучшие во многих отношениях критериальные меры основаны
на последующем выполнении реальной деятельности. Они отчасти ис-
пользовались при валидации тестов общего интеллекта и личностных те-
стов, но в основном-при валидации тестов специальных способностей.
Они также применяются при валидации тестов профессионального отбо-
ра в торговле, промышленности, армии. Большинство мер, основанных
на выполнении деятельности, хотя и являются конечным критерием, все
же во многих отношениях хороши и как промежуточные критерии.
В этом качестве они предпочтительнее данных о прохождении специаль-
ного обучения. Вместе с тем при измерении выполнения той или иной
деятельности не удается в такой степени стандартизовать условия изме-
рения, как в случае профессионального обучения. Более того, поскольку
выяснение уровня выполнения деятельности занимает много времени,
оно сопряжено с выбыванием значительного числа испытуемых. Ввиду
того что лица, занимающие номинально одинаковые должности, в раз-
ных организациях выполняют фактически неодинаковые функции, в ру-
ководстве к тесту необходимо приводить сведения не только о валидно-
сти данных по критерию деятельности, но и об обязанностях,
выполнявшихся членами нормативной выборки.
Валидация методом контрастных групп обычно влечет за собой
сложный критерий, в котором отражены накапливающиеся и неконтро-
лируемые избирательные влияния повседневной жизни. Такой критерий
в конечном счете связан с принадлежностью или непринадлежностью ин-
ливила к оппепйлйннпй гпл/ттшэ Маттмтичо. г.., "п",.~---. ----- - - --
135 ВАЛИДНОСТЬ. ОСНОВНЫЕ ПОНЯТИЯ
ставлены с результатами нормальных школьников того же возраста.
В этом случае множество факторов, определивших помещение ребенка
в специальное учреждение для детей с глубокой умственной отста-
лостью, составят критерий валидации. Аналогично валидность теста му-
зыкальных или технических способностей проверяется сравнением ре-
зультатов учащихся музыкальной школы или инженерного колледжа
с данными учеников обычной школы или обычного колледжа.
Разумеется, контрастные группы могут комплектоваться по любому
критерию-по успеваемости, субъективному мнению о качествах лично-
сти, выполнению деятельности или просто по признаку предельных слу-
чаев в каком-либо распределении критериальных мер. Эти группы стано-
вятся различными постепенно под действием многочисленных требова-
ний повседневной жизни. В этих условиях критерий оказывается
сложнее ранее рассмотренных и не поддается четкому определению.
Метод контрастных групп весьма часто применяется при валидации
личностных тестов. Так, определяя валидность теста социальных качеств,
можно сопоставить результаты тестирования торговых и администра-
тивных работников с данными конторских служащих и инженеров. При
этом предполагается, что работающие в торговле или управленческом
аппарате превосходят по своим социальным качествам инженеров
и клерков. Точно так же можно сравнить самых активных и наименее ак-
тивных студентов колледжа. При валидации тестов интересов, таких, как
анкета основных профессиональных интересов (SVIB), и при подготовке
шкал социальных установок часто используются данные разных профес-
сиональных групп. Для определения валидности шкал социальных уста-
новок иногда используются также группы, сформированные по полити-
ческому, религиозному, географическому и иным признакам, поскольку
эти группы представляют явно различные точки зрения.
При разработке некоторых личностных тестов, как отбор заданий,
так и валидация, основываются на врачебном диагнозе. Такой диагноз
допустимо использовать как достаточный критерий, если он ставится по-
сле длительного наблюдения и детального изучения истории болезни,
а не после поверхностного собеседования или осмотра. В последнем слу-
чае на врачебный диагноз можно положиться не больше чем на резуль-
тат самого теста, и такой диагноз следует рассматривать не как крите-
риальную меру, а как результат, валидность которого еще должна быть
установлена.
В связи с другими категориями критериев уже упоминались субъек-
тивные оценки, даваемые школьными учителями, инструкторами специа-
лизированных курсов, мастерами на производстве. Сюда же относятся
отзывы офицеров о подчиненных им военнослужащих, оценки, даваемые
ученикам школьной администрацией, оценки товарищей по работе, по
классу, по клубу и т.д. До сих пор речь шла о субъективных оценках,
играющих лишь вспомогательную роль в получении информации о та-
ком критерии, как академическая успеваемость, обучение на специализи-
рованных курсах, успехи в работе. Теперь же рассмотрим применение
субъективных оценок в качестве основной критериальной меры, особенно
когда такие оценки не ограничиваются описанием конкретных достиже-
ний, а являются мнением наблюдателя по целому ряду свойств, на изме-
рение которых ориентирован тест. Например, испытуемые из выборки
--_".."" " -хапактеоистики по таким признакам, как стремле-
- Т,ТТТ1 чстнпсть.
13о ПРИНЦИПЫ 11ихо..к)гич1-(к()го ТЕСТИГПЛНИЯ
Подобные оценки используются при валидации почти всех типов те-
стов. Они особенно важны в качестве критерия личностных тестов, по-
скольку в этой области трудно установить более объективные критерии.
Это особенно справедливо в отношении социальных качеств, оценка ко-
торых основывается на личных контактах и составляет наиболее ло-
гичный их критерий. Хотя эти оценки подвержены ошибкам, свой-
ственным всем субъективным суждениям, они представляют значитель-
ную ценность, если условия, в которых производится регистрация
мнений, тщательно контролируются. Способы повышения точности
субъективных оценок будут рассмотрены в гл.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143
В связи с использованием данных профессионального обучения как
критериальной меры полезно различать промежуточные и конечные кри-
терии. Применительно к тесту отбора военных летчиков или к тесту ме-
дицинских способностей, например, конечными критериями будут со-
ответственно выполнение боевых заданий и врачебная практика.
Очевидно, для получения таких данных потребуется много времени. Со-
мнительно к тому же, что такой критерий действительно является ко-
нечным. Наконец, даже если бы такие конечные данные удалось полу-
чить, на них, вероятно, сказывалось бы действие многих не поддающихся
контролю факторов, что снижало бы ценность результатов. Так, трудно
было бы оценить относительную степень успеха врачей разных специаль-
ностей в различных частях страны. Поэтому в качестве критериальных
мер часто используются промежуточные критерии.
Наилучшие во многих отношениях критериальные меры основаны
на последующем выполнении реальной деятельности. Они отчасти ис-
пользовались при валидации тестов общего интеллекта и личностных те-
стов, но в основном-при валидации тестов специальных способностей.
Они также применяются при валидации тестов профессионального отбо-
ра в торговле, промышленности, армии. Большинство мер, основанных
на выполнении деятельности, хотя и являются конечным критерием, все
же во многих отношениях хороши и как промежуточные критерии.
В этом качестве они предпочтительнее данных о прохождении специаль-
ного обучения. Вместе с тем при измерении выполнения той или иной
деятельности не удается в такой степени стандартизовать условия изме-
рения, как в случае профессионального обучения. Более того, поскольку
выяснение уровня выполнения деятельности занимает много времени,
оно сопряжено с выбыванием значительного числа испытуемых. Ввиду
того что лица, занимающие номинально одинаковые должности, в раз-
ных организациях выполняют фактически неодинаковые функции, в ру-
ководстве к тесту необходимо приводить сведения не только о валидно-
сти данных по критерию деятельности, но и об обязанностях,
выполнявшихся членами нормативной выборки.
Валидация методом контрастных групп обычно влечет за собой
сложный критерий, в котором отражены накапливающиеся и неконтро-
лируемые избирательные влияния повседневной жизни. Такой критерий
в конечном счете связан с принадлежностью или непринадлежностью ин-
ливила к оппепйлйннпй гпл/ттшэ Маттмтичо. г.., "п",.~---. ----- - - --
135 ВАЛИДНОСТЬ. ОСНОВНЫЕ ПОНЯТИЯ
ставлены с результатами нормальных школьников того же возраста.
В этом случае множество факторов, определивших помещение ребенка
в специальное учреждение для детей с глубокой умственной отста-
лостью, составят критерий валидации. Аналогично валидность теста му-
зыкальных или технических способностей проверяется сравнением ре-
зультатов учащихся музыкальной школы или инженерного колледжа
с данными учеников обычной школы или обычного колледжа.
Разумеется, контрастные группы могут комплектоваться по любому
критерию-по успеваемости, субъективному мнению о качествах лично-
сти, выполнению деятельности или просто по признаку предельных слу-
чаев в каком-либо распределении критериальных мер. Эти группы стано-
вятся различными постепенно под действием многочисленных требова-
ний повседневной жизни. В этих условиях критерий оказывается
сложнее ранее рассмотренных и не поддается четкому определению.
Метод контрастных групп весьма часто применяется при валидации
личностных тестов. Так, определяя валидность теста социальных качеств,
можно сопоставить результаты тестирования торговых и администра-
тивных работников с данными конторских служащих и инженеров. При
этом предполагается, что работающие в торговле или управленческом
аппарате превосходят по своим социальным качествам инженеров
и клерков. Точно так же можно сравнить самых активных и наименее ак-
тивных студентов колледжа. При валидации тестов интересов, таких, как
анкета основных профессиональных интересов (SVIB), и при подготовке
шкал социальных установок часто используются данные разных профес-
сиональных групп. Для определения валидности шкал социальных уста-
новок иногда используются также группы, сформированные по полити-
ческому, религиозному, географическому и иным признакам, поскольку
эти группы представляют явно различные точки зрения.
При разработке некоторых личностных тестов, как отбор заданий,
так и валидация, основываются на врачебном диагнозе. Такой диагноз
допустимо использовать как достаточный критерий, если он ставится по-
сле длительного наблюдения и детального изучения истории болезни,
а не после поверхностного собеседования или осмотра. В последнем слу-
чае на врачебный диагноз можно положиться не больше чем на резуль-
тат самого теста, и такой диагноз следует рассматривать не как крите-
риальную меру, а как результат, валидность которого еще должна быть
установлена.
В связи с другими категориями критериев уже упоминались субъек-
тивные оценки, даваемые школьными учителями, инструкторами специа-
лизированных курсов, мастерами на производстве. Сюда же относятся
отзывы офицеров о подчиненных им военнослужащих, оценки, даваемые
ученикам школьной администрацией, оценки товарищей по работе, по
классу, по клубу и т.д. До сих пор речь шла о субъективных оценках,
играющих лишь вспомогательную роль в получении информации о та-
ком критерии, как академическая успеваемость, обучение на специализи-
рованных курсах, успехи в работе. Теперь же рассмотрим применение
субъективных оценок в качестве основной критериальной меры, особенно
когда такие оценки не ограничиваются описанием конкретных достиже-
ний, а являются мнением наблюдателя по целому ряду свойств, на изме-
рение которых ориентирован тест. Например, испытуемые из выборки
--_".."" " -хапактеоистики по таким признакам, как стремле-
- Т,ТТТ1 чстнпсть.
13о ПРИНЦИПЫ 11ихо..к)гич1-(к()го ТЕСТИГПЛНИЯ
Подобные оценки используются при валидации почти всех типов те-
стов. Они особенно важны в качестве критерия личностных тестов, по-
скольку в этой области трудно установить более объективные критерии.
Это особенно справедливо в отношении социальных качеств, оценка ко-
торых основывается на личных контактах и составляет наиболее ло-
гичный их критерий. Хотя эти оценки подвержены ошибкам, свой-
ственным всем субъективным суждениям, они представляют значитель-
ную ценность, если условия, в которых производится регистрация
мнений, тщательно контролируются. Способы повышения точности
субъективных оценок будут рассмотрены в гл.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143