Образовательные информационные технологии. Часть 2. Педагогические измерения. Морев И.А. - 90 стр.

А может стать и так, что вершин у кривой распределения окажется так много, что они
станут незаметными на фоне одной, объединяющей их, суммирующей вершины.
                                                Гораздо легче узнать человека вообще,
                                              чем какого – либо человека в частности.
                                        Франсуа де ЛАРОШФУКО, aforizm.kaminplus.ru
Воспитанные на незыблемых законах классической теории вероятностей тестологи обыч-
но рассматривают только кривые распределений результатов с одной вершиной. Более то-
го, они считают, что только такие кривые и могут получаться, если тестовые задания и
процедура тестирования правильные. Все остальное, следовательно, – ошибка измерений.
Более того, тестологи говорят, что тестовые задания и процедура тестирования правиль-
ные, если в результате тестирований получается именно одногорбая, плавная, узнаваемая
математиками кривая.
На практике такая ситуация, когда кривая получается плавной и одногорбой, достаточно
редка, и методики ее исправления нельзя всегда признать однозначно объективными.
Считается, что хорошим методом исправления ситуации, борьбы с «многогорбостью» яв-
ляется приписывание заданиям весов (относительной сложности и пр.), выражаемых чис-
лами. Результат каждого претендента взвешивают, т. е. суммируют не очки (плюс очко за
каждое верно выполненное задание), а веса.
Существуют разные подходы к вычислению весов заданий, нацеленные на «исправление»
кривой распределения. Задача такого исправления математически сложна, и не каждый из
разработанных способов исправления приводит к желанному результату.
Так и должно быть, поскольку исходные положения теории основаны на предположении
об однородности групп претендентов, т. е. статистически «гладком» распределении среди
них ЗУН. А это случается не всегда. Например, возьмите группу, где четверть претенден-
тов умеет в совершенстве решать задачи только по одной теме физики, три четверти –
только по двум. Тестирование такой группы с помощью усредненного по темам теста
приведет к удивительным результатам, из которых трудно сделать монотонную одногор-
бую кривую.
Вычисленные веса могут сильно зависеть от того, как сформирована группа претендентов.
Это означает, что каждое новое тестирование, с новой группой претендентов, должно со-
провождаться решением задачи вычисления весов вновь. А результаты этих двух тестиро-
ваний нельзя будет однозначно сопоставить.
Какой смысл имеют веса, можно ли использовать их значения для решения иных задач,
более значимых, чем подгонка кривой распределения под установленную волюнтаристски
форму?
Вернемся к традиционной задаче объективного оценивания подготовки учащихся и рас-
пределения их по трем-четырем группам в соответствии с их уровнями. Кривая распреде-
ления результатов с одной вершиной, как бы она не была математически и эстетически
красива, не дает оснований для объективного ответа на вопрос о том, где же объективно
провести границы групп.
Опытный тестолог поделит учащихся с помощью простого алгоритма, давно придуманно-
го и повсеместно применяемого:
   •   протестируйте учащихся и получите кривую распределения результатов;
   •   присвойте всем учащимся рейтинги и составьте список учащихся в соответствии с
       рейтингами - от высшего к низшему;
   •   определите, сколько учащихся может учиться в группе лучших (допустим – 20);

                                         90