Образовательные информационные технологии. Часть 2. Педагогические измерения. Морев И.А. - 128 стр.

   06.07. Два типа ошибок измерений в тестологии и их
          источники


                                       Архитекторы прячут свои ошибки под плющом,
                                           врачи под землей, а хозяйки под майонезом.
                                                                        Бернард ШОУ
Так же, как и в любой технической области, тестологические измерения сопровождаются
ошибками. Эти ошибки могут быть
   •   систематическими, возникающими, например, по вине создателей тестовых
       заданий, тестирующей программы, учебного пособия, и
   •   случайными, возникающими из-за того, что участники пытаются «схитрить»,
       выполнить часть заданий методом «случайного тыка».
Систематические ошибки возникают из-за:
   •   разницы толкования определений в ТЗ и в учебнике;
   •   неясностей в интерфейсе;
   •   логических неувязок в текстах ТЗ;
   •   неправильных объяснений, данных сопровождающим тестирования операто-
       ром, и др.
На величину ошибок влияет человеческий фактор. Наиболее вероятные величины случай-
ных ошибок определения рейтинга, если их отложить на графике, образуют небольшой
интервал значений или, говоря языком статистики, – доверительный интервал. Величина
этого интервала зависит от того, в какую область рейтингов попал исследуемый рейтинг.
Проще говоря, – если участник правильно выполнил много заданий, вероятность того, что
он нажимал клавиши «на авось», мала. И наоборот, эта вероятность велика для участни-
ков, результаты которых попали в область «наиболее вероятного» результата.
В общем случае, величину доверительного интервала можно представить функцией двух
переменных:
   •   расстояния от исследуемого результата до «идеального» и
   •   расстояния от исследуемого результата до центра области «наиболее вероят-
       ного» результата.
Очевидно, с изменением этих переменных, величина области «доверительного интервала»
будет изменяться в определенных пределах. Эти пределы заключены между величиной
области «наиболее вероятного» результата и нулем.
Знание величин доверительных интервалов поможет на практике при разборе экзаменаци-
онных апелляций, а также очень важно для правильного применения методов факторного
анализа.
                                                           Детей нужно учить врать.
                                                                          Г. ОСТЕР




                                          128