3. Типичные ошибки при разработке тестовых заданий
ADO в Delphi AJAX Android C++ CakePHP CMS COM CSS Delphi Flash Flex HTML Internet Java JavaScript MySQL PHP RIA SCORM Silverlight SQL UML XML Бази даних Веб-розробка Генетичні алгоритми ГІС Гітара Дизайн Економіка Інтелектуальні СДН Колір Масаж Математика Медицина Музика Нечітка логіка ООП Патерни Подання знань Розкрутка сайту, SEO САПР Сесії в PHP Системне програмування Системний аналіз Тестологія Тестування ПЗ Фреймворки Штучний інтелект
|
3. Типичные ошибки при разработке тестовых заданийНаиболее часто встречающиеся ошибки:1. Излишняя сложность, запутанность формулировки.
(125). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ 2. Неоднозначность условия.
(126). ВЫБЕРИТЕ ВЕРНЫЕ ВАРИАНТЫ Указание «перечислить все» вводит в заблуждение, так как в эталоне указан только один правильный ответ. 3. Очевидность решения.
(127). ВСТАВИТЬ СЛОВО Правильный вариант ответа: «число»
(128). ВСТАВИТЬ ПРОПУЩЕННОЕ СЛОВО Правильны вариант ответа: «знаний»
(129). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ 4. Зависимость результата от памяти или от других индивидуальных особенностей испытуемого, а не от уровня развития тех умений и навыков, для оценки которых разрабатывается тест (кроме заданий, где необходима именно работа памяти). Как правило, это вопросы, которые выясняют оценки, мотивацию, мнения и т. д.
(130). КАКИЕ ИННОВАЦИОННЫЕ ТЕНДЕНЦИИ В ОРГАНИЗАЦИИ ЛЕКЦИЙ ВЫ МОЖЕТЕ НАЗВАТЬ?
(131). СРЕДИ БЛИЖАЙШИХ СТУДЕНТОВ З.ФРЕЙДА НАИБОЛЕЕ ИЗВЕСТНЫ Фраза «наиболее известны» требует уточнения – КОМУ наиболее известны? Может быть, среди испытуемых встретится тот, кому кроме указанных в эталоне двух имен известны (в смысле «подробно, основательно изучены») и другие из перечисленных. 5. Абсурдность, нереальность вариантов ответов.
(132). ПРИ ПОСТРОЕНИИ ДИАГРАММЫ В EXCEL МАСТЕР ДИАГРАММ ПОСТРОИТ ЛЮБУЮ ДИАГРАММУ ЗА _____ ШАГОВ 6. Появление двух и более правильных ответов, не оговоренное в условии.
(135). УКАЖИТЕ НЕ МЕНЕЕ ДВУХ ВЕЩЕСТВ ИЗ СПИСКА, СПОСОБНЫХ К ХИМИЧЕСКОМУ ОБЕСКИСЛОРАЖИВАНИЮ ВОДЫ В эталоне указано 4 правильных ответа, т. е., выбрав три, как указано в задании (не менее двух), испытуемый получит неверно выполненное задание. 7. Логические ошибки, вытекающие из несоответствия инструкции содержанию задания и содержанию ответов.
(136). ЗАКОНЫ РАСПРЕДЕЛЕНИЯ ВРЕМЕНИ МЕЖДУ ОТКАЗАМИ ХАРАКТЕРИЗУЮТСЯ Ошибочными являются последние варианты ответов: они находятся в логическом противоречии с содержанием задания, где утверждается существование такого элемента (характеристики, способа использования, зависимости). 8. Нарушение правила подбора ответов по одному основанию (нарушение принципа однородности):
(139). ТЕХНИЧЕСКАЯ НОРМА ЗАГРУЗКИ ВАГОНА ОПРЕДЕЛЯЕТСЯ Первый вариант ответа «делением количества погруженных тонн на количество погруженных вагонов» не соответствует принципу однородности и отвечает на другой вопрос – «как, каким действием», а не «согласно какому документу», как остальные дистракторы.
(140). В ТРЕУГОЛЬНИКЕ ВЫСОТА ЯВЛЯЕТСЯ МЕДИАНОЙ И БИССЕКТРИСОЙ Первый и третий ответы образуют вместе с содержанием задания безусловные неверные утверждения; второй ответ порождает верное условное утверждение. Исправить ситуацию можно было бы, сформулировав по-другому – «верно, если треугольник равнобедренный» или «неверно, если треугольник разносторонний». Деление понятий должно проводиться по одному, определенному основанию. 9. Многословные формулировки задания и ответов, требующие слишком много времени на прочтение. Повторяющиеся формулировки. Главная причина появления многословия в заданиях – использование двух и более условий. Задание сформулировано очень длинно, в виде ситуации, по сути, такое задание не является тестовым, например:
(141). ПРЕДСТАВЬТЕ СЕБЕ СЛЕДУЮЩУЮ СИТУАЦИЮ (далее в кавычках текст задания): Предлагаются на выбор ответы:
– Предложенное решение даст как требуемый результат, так и оба дополнительных результата. В компьютерном тестировании такое задание с трудом помещается на экране, его чтение занимает много времени, не говоря уж об осмысливании ответов
(142). ЕСЛИ НОМИНАЛЬНЫЙ ДОХОД ПОВЫСИЛСЯ НА 8 %, А УРОВЕНЬ ЦЕН ВЫРОС НА 10 %, ТО РЕАЛЬНЫЙ ДОХОД С точки зрения формы, лучше использовать одно условие вместо двух. Задание при этом становится короче, но при этом теряется полнота содержания и глубина контроля. Особенно неприемлемо многословие в ответах. Этим страдают задания, сформулированные по принципу удвоенного противопоставления. Нежелательное многословие в ответах возникает вследствие «лобового» противопоставления одних элементов другим, с использованием одного и того же словесного состава. В таких случаях лучше искать другие формы. 10. Отрицательно сформулированные задания не сразу поддаются логическому анализу, тем более при дефиците времени.
(143). МЕЖДУ СОБСТВЕННЫМИ ОБОРОТНЫМИ СРЕДСТВАМИ И ВЕЛИЧИНОЙ ОБОРОТНЫХ АКТИВОВ НЕ МОЖЕТ БЫТЬ СОГЛАШЕНИЯ Недопустимыми являются формулировки типа:
(144). УКАЖИТЕ ВЕРНЫЙ ОТВЕТ В этом задании правильный ответ – это неправильный ответ. Попробуй, испытуемый, разберись за короткое время! 11. Использование среди дистракторов вариантов «все ответы верные» или «все вышеперечисленное верно». При компьютерном тестировании варианты ответов при каждом предъявлении перемешиваются и «все вышеперечисленное верно» может попасть на первое место, т. е. выше него никаких вариантов нет. Недопустимо, чтобы ответ «все перечисленное верно» был верным ответом, так как, отмечая правильные ответы, испытуемый может начать отмечать по очереди все верные ответы, но они не входят в эталон, поэтому весь ответ на задание будет неверным. Примером такого недоразумения является задание:
(145). УКАЖИТЕ ПРАВИЛЬНЫЙ ОТВЕТ В качестве эталонного ответа предлагается «все перечисленное верно». При этом любой из перечисленных вариантов ответов будет правильным, но если испытуемый выберет какой-то из них, кроме «все перечисленное верно», то получит неверно выполненное задание. Другими словами, задания с такой формулировкой ответов изначально являются провальными для испытуемых:
(146). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ 12. В вопросах на установление соответствия используются неоднородные объекты: (147). ЗАКОНЧИТЕ ОПРЕДЕЛЕНИЯ
Понятно, что, не зная формальных определений тех понятий, что в первом столбце, можно правильно ответить на все задание, так как понятия, включенные в эту группу, совершенно разнородны, и из предложенных вариантов можно легко найти им соответствующие определения. Еще один пример нарушения требования однородности элементов: (148). УСТАНОВИТЕ СООТВЕТСТВИЕ МЕЖДУ ТЕРМИНОМ И ЕГО ОПРЕДЕЛЕНИЕМ
(149). УСТАНОВИТЕ СООТВЕТСТВИЕ МЕЖДУ ТЕРМИНОМ И ЕГО ОПРЕДЕЛЕНИЕМ
(150). СОСТАВЬТЕ ПРАВИЛЬНЫЕ ПАРЫ (юридические дисциплины)
13. Нарушено требование взаимнооднозначного соответствия: (151). СООТНЕСИТЕ ПОНЯТИЯ С ПЕРИОДАМИ ВРЕМЕНИ
(152). СООТНЕСИТЕ ДЕЙСТВИЯ С ФОРМАМИ ЭКОНОМИЧЕСКОЙ ИНТЕГРАЦИИ
Недопустимо при компьютерном тестировании использование одинаковых элементов («ХХ век» или «Общий рынок»), так как вероятность ошибки – 50 % (компьютерное тестирование тем и отличается от «бумажного», что реагирует на символы и фраза «ХХ век» из первой пары не заменит ту же фразу из третьей пары). 13-1. Отсутствие четкой инструкции в заданиях на установление последовательности. При этом задание искажается и превращается в нечто, похожее на выбор правильного ответа, например:
(153). ПРОВЕДЕНИЕ СПАСАТЕЛЬНЫХ РАБОТ ВКЛЮЧАЕТ: Автор имел в виду порядок проведения спасательных работ, как алгоритм действий, имеющих строгую последовательность, однако получилось простое перечисление видов работ, где все элементы имеют место. Инструкцию к этому заданию следовало бы сформулировать так: «ПОРЯДОК ПРОВЕДЕНИЯ СПАСАТЕЛЬНЫХ РАБОТ». В следующем задании непонятно, о каком порядке идет речь, как влияют перечисленные элементы на частоту профилактики:
(154). ЧАСТОТА ПРОФИЛАКТИКИ В этом задании неясно, в каком именно порядке располагать фамилии: в алфавитном, хронологическом, по географии проживания (с запада на восток), по количеству созданных трудов, по продолжительности жизни и т. д. 14. Наличие одинаковых элементов в списке для упорядочивания.
(156). УКАЖИТЕ ПОСЛЕДОВАТЕЛЬНОСТЬ ВЫПОЛНЕНИЯ ИНФОРМАЦИОННОГО ПРОЦЕССА В этом задании слово «Корректировка» используется два раза, что создает ситуацию, когда при прочих верно расставленных элементах вероятность правильного ответа на это задание равна 50 %. Реагируя на символы, компьютер воспринимает по-разному элемент множества, стоящий на четвертом месте и на седьмом, хотя для испытуемого они одинаковы. Для того, чтобы убедиться в этом, можно по-разному набрать слово «корректировка» под каждым из этих номеров – «КОРРЕКТИРОВКА», «к о р р е к т и р о в к а», «Корректировка». Смысл для испытуемого не изменится, но компьютер воспринимает эти элементы как разные, переставлять их местами нельзя. загрузка...
|
Сторінки, близькі за змістом
|
Copyright © 2008—2024 Портал Знань.
При використанні матеріалів посилання, для інтернет-ресурсів — гіперпосилання, на Znannya.org обов'язкове.
Зв'язок
|
НТУУ "КПІ" Інженерія програмного забезпечення КПІ Лабораторія СЕТ |
|