Так, если
испытуемый знает четыре из пяти ответов в одинаковых по длине
списках, то пятый будет неизбежно правильным. Поэтому следует
76
ТИП МЕТОДИКИ
А. Однопараметрические
Б. Непараметрические
В. Многопараметрические
предъявлять списки неравной длины или указывать, что некоторым
элементам нет никаких соответствий (или и то, и другое), как в
нашем примере. Эти меры с очевидностью уменьшают вероятность
случайного угадывания правильного ответа.
Из нашего первого примера задания на восстановление соответст-
вий было видно, что это более совершенное задание, чем альтерна-
тивное. Возникает очевидный вопрос: всегда ли это так? Давайте еще
раз рассмотрим примеры 4 и 5, приведенные при описании альтерна-
тивных заданий.
ПРИМЕР 5 АЛЬТЕРНАТИВНОГО ЗАДАНИЯ (см. стр. 74)
Этому заданию, конечно же, можно придать форму задания на
восстановление соответствия.
МЕТОДИКА БУКВА
t-критерий
Факторный анализ
Хи-квадрат
Дисперсионный анализ
Ковариационный анализ
Тау Кенделла
Укажите буквой, какой тип методики, если такой есть, описы-
вает каждую статистическую методику из приведенного списка.
Возможно, что ни одно или более чем одно описание соответству-
ет некоторым элементам этого списка.
Такое задание на восстановление соответствия подходит к этому
материалу настолько же хорошо, как и альтернативная форма, и
можно также узнать дополнительную информацию относительно тех
методик, которым соответствовал ответ "нет". Изучение данного
задания выявляет, что это происходит обязательно, так как форма
задания на восстановление соответствия требует, чтобы испытуемый
для каждого варианта ответа решил, является ли методика многопа-
раметрической, непараметрической, и т.д.
На примере 5 проиллюстрировано, что выбор формы задания за-
висит от материала и от тестируемых знаний. В данном случае про-
верки детальных знаний по статистике задание на восстановление
соответствий, вероятно, лучше, чем альтернативные задания, и оба
они предпочтительнее, чем задание с несколькими вариантами вы-
бора. Это, конечно же, не обязательно всегда так.
ПРИМЕР 4 АЛЬТЕРНАТИВНОГО ЗАДАНИЯ (см. стр. 74)
Заметим, что для тестов на проверку понимания данных нет про-
стого очевидного способа сформулировать задание в виде восстанов-
ления соответствий. Это, на самом деле, дает нам ключ для учета
относительных достоинств альтернативных заданий и заданий на
восстановление соответствий. Последние, несомненно, предпочти-
тельнее как тесты по материалу, представленному в данном вопросе.
Обычно, как в примере 4 альтернативного задания, задание на вос-
становление соответствий не может быть сформулировано. Могут
быть сконструированы задания с вариантами выбора, однако они
будут слишком громоздкими, а выбор действенных дистракторов бу-
дет трудным. Помимо этого, такие задания неизбежно будут иметь
тенденцию к взаимозависимости, что уменьшит их эффективность.
Для тестирования подробной информации методика восстановле-
ния соответствий может оказаться более предпочтительной, по срав-
нению с альтернативной, при условии что вопросы позволяют соста-
вить соответствующие списки.
Следует подчеркнуть один момент, касающийся альтернативных
заданий и заданий на восстановление соответствий как тестов инфор-
мации - опасность тривиального тестирования.
Хотя и важно осознать, что хи-квадрат является непараметриче-
ской, а t-критерий - однопараметрической методикой, способность
выговорить утверждение: "t-критерий является однопараметриче-
ской методикой",- за которую испытуемый с неизбежностью полу-
чает соответствующие баллы, не предполагает понимания того, что
же такое t-критерий и однопараметрическая статистическая методи-
ка. Такой информации можно обучить даже семилетнего ребенка.
Подобно этому, знание того, что Скотт написал "Уэверли", пред-
ставляется не очень важной по сравнению со способностью выпол-
нить критический анализ этого романа.
Заключения по рассмотрению заданий с вариантами
выбора, альтернативных заданий и заданий на восстановление
соответствия
При конструировании тестов интеллекта, специальных способно-
стей и достижений следует ориентироваться на формулировку зада-
ний преимущественно этих трех типов. Как же принять решение,
какой тип использовать? При этом следует учитывать ряд моментов.
СПЕЦИФИЧЕСКИЕ ФАКТОРЫ
При принятии решения, какой тип задания использовать, следует
помнить о влиянии специфических факторов. Если тест состоит из
заданий одного типа, возникает опасность влияния некоторого спе-
цифического фактора, связанного с этой частной формой задания. В
батарее тестов такая специфика может даже быть похожа на истин-
ный групповой фактор, хотя это, конечно, не что иное, чем ложная
78
(дутая) специфика - ловкий навык отвечать на задания определен-
ного вида. Таким образом, разнообразие типов заданий весьма полез-
но.
УТОМЛЕНИЕ
Источником ошибок при тестировании часто является утомление,
особенно в тестах способностей и аналогичных, в работе с которыми
необходимы усилия по концентрации, сосредоточению внимания.
Разнообразие заданий, вероятно, сделает тест менее монотонным для
испытуемых (Cronbach, 1970).
ЭФФЕКТИВНОСТЬ ЗАДАНИЙ
Конечно, мы хотим, чтобы наши задания были настолько эффек-
тивны, насколько это возможно. Как было показано в анализе раз-
личных типов заданий, каждое из них наиболее эффективно при
определенных условиях. Вероятно, основной подход к конструирова-
нию заданий может быть сформулирован следующим образом:
(1) Стандартным заданием, которое подходит к большинству ви-
дов материала и вопросов, является тип задания с вариантами выбо-
ра.
(2) Для получения подробной фактической информации, связан-
ной с содержанием заданий, эффективный и компактный тест обес-
печивается типом заданий на восстановление соответствия и альтер-
нативными заданиями.
(3) Для тестирования понимания материала, представленного в
вопросе, особенно полезны альтернативные задания.
(4) По причинам, обсуждавшимся в пунктах 1 и 2, имеет смысл
разрабатывать тест с заданиями всех типов, хотя и нет необходимости
иметь одинаковое количество заданий каждого типа.
Выбор типа заданий
С моей точки зрения, лучше всего попытаться сконструировать
задания каждого типа. Иногда это просто невозможно, что устраняет
автоматически по крайней мере одну категорию заданий. Если будут
сформулированы все три вида заданий, принятие решения обычно
уже возможно. В примерах, приведенных ниже, информацией, под-
лежащей тестированию, является форма бимодального распределе-
ния.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96
испытуемый знает четыре из пяти ответов в одинаковых по длине
списках, то пятый будет неизбежно правильным. Поэтому следует
76
ТИП МЕТОДИКИ
А. Однопараметрические
Б. Непараметрические
В. Многопараметрические
предъявлять списки неравной длины или указывать, что некоторым
элементам нет никаких соответствий (или и то, и другое), как в
нашем примере. Эти меры с очевидностью уменьшают вероятность
случайного угадывания правильного ответа.
Из нашего первого примера задания на восстановление соответст-
вий было видно, что это более совершенное задание, чем альтерна-
тивное. Возникает очевидный вопрос: всегда ли это так? Давайте еще
раз рассмотрим примеры 4 и 5, приведенные при описании альтерна-
тивных заданий.
ПРИМЕР 5 АЛЬТЕРНАТИВНОГО ЗАДАНИЯ (см. стр. 74)
Этому заданию, конечно же, можно придать форму задания на
восстановление соответствия.
МЕТОДИКА БУКВА
t-критерий
Факторный анализ
Хи-квадрат
Дисперсионный анализ
Ковариационный анализ
Тау Кенделла
Укажите буквой, какой тип методики, если такой есть, описы-
вает каждую статистическую методику из приведенного списка.
Возможно, что ни одно или более чем одно описание соответству-
ет некоторым элементам этого списка.
Такое задание на восстановление соответствия подходит к этому
материалу настолько же хорошо, как и альтернативная форма, и
можно также узнать дополнительную информацию относительно тех
методик, которым соответствовал ответ "нет". Изучение данного
задания выявляет, что это происходит обязательно, так как форма
задания на восстановление соответствия требует, чтобы испытуемый
для каждого варианта ответа решил, является ли методика многопа-
раметрической, непараметрической, и т.д.
На примере 5 проиллюстрировано, что выбор формы задания за-
висит от материала и от тестируемых знаний. В данном случае про-
верки детальных знаний по статистике задание на восстановление
соответствий, вероятно, лучше, чем альтернативные задания, и оба
они предпочтительнее, чем задание с несколькими вариантами вы-
бора. Это, конечно же, не обязательно всегда так.
ПРИМЕР 4 АЛЬТЕРНАТИВНОГО ЗАДАНИЯ (см. стр. 74)
Заметим, что для тестов на проверку понимания данных нет про-
стого очевидного способа сформулировать задание в виде восстанов-
ления соответствий. Это, на самом деле, дает нам ключ для учета
относительных достоинств альтернативных заданий и заданий на
восстановление соответствий. Последние, несомненно, предпочти-
тельнее как тесты по материалу, представленному в данном вопросе.
Обычно, как в примере 4 альтернативного задания, задание на вос-
становление соответствий не может быть сформулировано. Могут
быть сконструированы задания с вариантами выбора, однако они
будут слишком громоздкими, а выбор действенных дистракторов бу-
дет трудным. Помимо этого, такие задания неизбежно будут иметь
тенденцию к взаимозависимости, что уменьшит их эффективность.
Для тестирования подробной информации методика восстановле-
ния соответствий может оказаться более предпочтительной, по срав-
нению с альтернативной, при условии что вопросы позволяют соста-
вить соответствующие списки.
Следует подчеркнуть один момент, касающийся альтернативных
заданий и заданий на восстановление соответствий как тестов инфор-
мации - опасность тривиального тестирования.
Хотя и важно осознать, что хи-квадрат является непараметриче-
ской, а t-критерий - однопараметрической методикой, способность
выговорить утверждение: "t-критерий является однопараметриче-
ской методикой",- за которую испытуемый с неизбежностью полу-
чает соответствующие баллы, не предполагает понимания того, что
же такое t-критерий и однопараметрическая статистическая методи-
ка. Такой информации можно обучить даже семилетнего ребенка.
Подобно этому, знание того, что Скотт написал "Уэверли", пред-
ставляется не очень важной по сравнению со способностью выпол-
нить критический анализ этого романа.
Заключения по рассмотрению заданий с вариантами
выбора, альтернативных заданий и заданий на восстановление
соответствия
При конструировании тестов интеллекта, специальных способно-
стей и достижений следует ориентироваться на формулировку зада-
ний преимущественно этих трех типов. Как же принять решение,
какой тип использовать? При этом следует учитывать ряд моментов.
СПЕЦИФИЧЕСКИЕ ФАКТОРЫ
При принятии решения, какой тип задания использовать, следует
помнить о влиянии специфических факторов. Если тест состоит из
заданий одного типа, возникает опасность влияния некоторого спе-
цифического фактора, связанного с этой частной формой задания. В
батарее тестов такая специфика может даже быть похожа на истин-
ный групповой фактор, хотя это, конечно, не что иное, чем ложная
78
(дутая) специфика - ловкий навык отвечать на задания определен-
ного вида. Таким образом, разнообразие типов заданий весьма полез-
но.
УТОМЛЕНИЕ
Источником ошибок при тестировании часто является утомление,
особенно в тестах способностей и аналогичных, в работе с которыми
необходимы усилия по концентрации, сосредоточению внимания.
Разнообразие заданий, вероятно, сделает тест менее монотонным для
испытуемых (Cronbach, 1970).
ЭФФЕКТИВНОСТЬ ЗАДАНИЙ
Конечно, мы хотим, чтобы наши задания были настолько эффек-
тивны, насколько это возможно. Как было показано в анализе раз-
личных типов заданий, каждое из них наиболее эффективно при
определенных условиях. Вероятно, основной подход к конструирова-
нию заданий может быть сформулирован следующим образом:
(1) Стандартным заданием, которое подходит к большинству ви-
дов материала и вопросов, является тип задания с вариантами выбо-
ра.
(2) Для получения подробной фактической информации, связан-
ной с содержанием заданий, эффективный и компактный тест обес-
печивается типом заданий на восстановление соответствия и альтер-
нативными заданиями.
(3) Для тестирования понимания материала, представленного в
вопросе, особенно полезны альтернативные задания.
(4) По причинам, обсуждавшимся в пунктах 1 и 2, имеет смысл
разрабатывать тест с заданиями всех типов, хотя и нет необходимости
иметь одинаковое количество заданий каждого типа.
Выбор типа заданий
С моей точки зрения, лучше всего попытаться сконструировать
задания каждого типа. Иногда это просто невозможно, что устраняет
автоматически по крайней мере одну категорию заданий. Если будут
сформулированы все три вида заданий, принятие решения обычно
уже возможно. В примерах, приведенных ниже, информацией, под-
лежащей тестированию, является форма бимодального распределе-
ния.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96