(5) Избегайте тестировать тривиальное ввиду простоты его
обнаружения. Thorndike и Hagen (1977) утверждают, что каждое
задание должно быть независимым. Однако, с нашей точки зрения,
64
это требование невозможно выполнить. Если задания извлекаются из
генеральной совокупности заданий, то они не могут быть независи-
мыми. В самом деле, если бы это было так, то каждое из них тестиро-
вало бы отдельную переменную. А поскольку большая часть знаний
представляет собой некоторого рода структуры, я полагаю, что это
правило лучше игнорировать.
Все эти правила, даже включая те, которые касаются подбора
дистракторов, должны соблюдаться для заданий всех видов. Thorn-
dike и Hagen (1977), исходя из инструкций, опубликованных Служ-
бой тестирования в системе образования (Educational Testing Service,
1963), перечисляют ряд других правил, большинство из которых мы
уже обсуждали в этих пяти более общих правилах.
Сама проблема должна содержаться в основной части задания, а
не выноситься в часть с вариантами выбора, которые должны быть
настолько краткими, насколько возможно. Оба эти момента относят-
ся к правилу 1 -требованию простоты,-а именно, требованию того,
что в основную часть должно быть включено лишь то, что необходимо
для ясной и четкой формулировки проблемы. Thorndike и Hagen
советуют как можно реже использовать отрицания в основной части
по двум причинам: а) это приводит к противоречиям (при чтении
задания) и б) за исключением редких случаев, отрицательные зна-
ния не настолько важны, как позитивные. Знание того, что летучая
мышь - это не птица, не насекомое, не рыба и не рептилия, не
является необходимым для знания того, что же это такое. Еще два
других замечания этих авторов полезны при практической разработ-
ке тестов:
(1) Использование выражения "ни один из перечисленных" в
качестве дистрактора допустимо только тогда, когда существует не-
двусмысленный правильный ответ,- как, скажем, в заданиях, свя-
занных с алфавитом или математическими понятиями.
(2) Аналогично, использование в качестве дистрактора выраже-
ния "все перечисленные" приводит к допустимости скользких мест в
формулировке заданий, в которых дистракторы не являются особен-
но дискриминативными, поскольку автор вопросов знает, что любой
из ответов правильный.
Теперь, имея все время в виду наши основные пять правил, я
проиллюстрирую искусство формулирования заданий с несколькими
вариантами выбора. Понятно, что в короткой серии примеров я не
смогу создать задания, которые бы эффективно основывались на
правиле 4, гласящем, что ответ на один вопрос не должен быть клю-
чом к другим заданиям. Как и в случае тестов интеллекта, каждый
пример будет сопровождаться комментариями. Предлагаемые зада-
ния разработаны для тестов вербальных и числовых способностей.
ПРИМЕР 1.
У речной излучины на поляне появилась горилла-самка и внезап-
но издала громкий вопль.
В этом предложении дополнением является:
(а) горилла, (б) поляне, (в) излучины, (г) вопль, (д) самка.
Это простое, понятное задание, в котором вся информация содер-
жится в основной части. Возможен только один правильный ответ, и
все дистракторы являются существительными, то есть тем видом
слов, которые могут быть дополнениями, что не позволяет испытуе-
мым, знающим, что дополнением не могут быть глаголы или наречия,
сократить количество вариантов выбора. Следует заметить, что по-
ложение правильного ответа в списке вариантов выбора должно оп-
ределяться случайным образом, чтобы предотвратить случаи угады-
вания.
ПРИМЕР 2.
Внезапно громкий вопль был издан гориллой-самкой, которая
появилась у речной излучины на поляне.
В этом предложении подлежащим является:
(а) гориллой, (б) вопль, (в) излучины, (г) поляне, (д) самкой.
Этот пример аналогично прост, и вся информация содержится в
основной части. Он умышленно связан с заданием 1, поскольку те
испытуемые, знания которых о дополнении и подлежащем лишь
приблизительны, и которые полагают, что подлежащее - это тот,
кто "делает", не смогут выполнить данное задание. Аналогично, тот
факт, что в предложении с почти тем же самым смыслом теперь
подлежащее и дополнение поменялись местами, будет составлять
трудность для тех, чьи познания в грамматике неполны. Заметим
опять, что все варианты выбора могут быть подлежащим.
ПРИМЕР 3.
Я переживаю, когда думаю о тебе, переходящим через дорогу
самостоятельно в это время дня.
В этом предложении есть ошибка. Неправильным словом являет-
ся:
(а) я, (б) переходящим, (в) дня, (г) тебе, (д) самостоятельно
Это пример плохого задания. Понятно, что вся информация со-
держится в основной части задания и существует однозначный пра-
вильный ответ. Более того, содержание задания не является триви-
66
альным. Однако в предложении есть только одна ошибка, так что
испытуемые могут прийти к правильному ответу, исключая дистрак-
торы, которые явно не являются неправильными.
Это задание должно быть каким-либо образом перефразировано;
например: "Если в этом предложении есть грамматическая ошибка,
то неправильным словом является: (а) я, (б) переходящим, (в) дня,
(г) тебе, (д) ни одно из этих слов, если в предложении ошибки нет."
Такая формулировка устранит проблему, но она несколько громозд-
ка. Вероятно, наилучшим решением было бы использовать другую
форму задания, такую как: " Какое из следующих предложений грам-
матически правильно: (а) Я переживаю, когда думаю о тебе, перехо-
дящим через дорогу самостоятельно в это время дня. (б) Я пережи-
ваю, когда думаю о тебе, переходящем через дорогу самостоятельно
в это время дня." Этот пример хорошо иллюстрирует ограничения
формы заданий со многими вариантами выбора. При определенных
условиях, когда вопрос краток, необходимость вводить дистракторы
делает задание слишком простым. Следовательно, более предпочти-
тельно использование разных форм заданий. В этом случае трудно
сформулировать общие правила. Здесь вся надежда на сообразитель-
ность разработчиков тестов. В данном примере показан ход рассуж-
дений, который следует использовать разработчикам тестов при под-
боре заданий. А теперь рассмотрим вопрос: можем ли мы построить
задание с вариантами выбора, чтобы протестировать знание одного
правила грамматики - о причастных оборотах.
ПРИМЕР 4.
Я переживаю, когда думаю о тебе, переходящем через дорогу
самостоятельно в это время дня.
В этом задании "переходящем" является:
а) прилагательным, б) причастием, в) определением, г) наречием,
г) сказуемым
В этом задании знание правил о причастных оборотах проверяет-
ся, конечно, более непосредственно, чем в исходном задании в при-
мере 3.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96