Образовательные информационные технологии. Часть 2. Педагогические измерения. Морев И.А. - 137 стр.

   06.11. Трудоемкость и сложность тестового задания


                                                    На узкой дороге тон задает черепаха.
В классической тестологии понятия «трудность» и «сложность» использовали как сино-
нимы. Разные авторы предлагали различать их. В современной тестологии термин «труд-
ность» заменяют на более подходящий – «трудоемкость» (предложено В. П. Беспалько).
   •   Трудоемкость задания – мера количества и длительности предполагаемых опера-
       ций, необходимых для успешного выполнения задания.
   •   Сложность задания – мера объема и сложности информации, которую должен ос-
       воить претендент для того, чтобы выполнить задание.
Если претенденты имеют достаточно времени, чтобы продумать варианты выполнения и
не соревноваться в скорости, определяющим фактором становится сложность заданий.
Поэтому сложность – наиболее часто используемое слово для характеристики заданий.
Сложность задания зависит от пути изучения учебной темы претендентами (по какому
учебнику), от их подготовки и сообразительности. Сложность принимает разные значения
для разных выборок претендентов. Одно и то же задание для студента одного вуза может
стать неразрешимым, для студента другого – «семечками». Чем больше претендентов,
правильно выполнивших задание, тем меньше его сложность для данной группы. На ве-
личину сложности могут влиять артефакты, например – накапливающаяся в процессе дли-
тельного сеанса усталость или недостаточность времени сеанса. Простое задание могут не
выполнить большинство претендентов только потому, что пока они до него добрались,
они устали. Или, вообще не успели добраться. Так простое задание с большим номером
автоматически формально становится очень сложным.
И в школе, и в вузе часто бывает ситуация, когда:
   •   учащиеся одной параллели учатся у разных преподавателей и по разным учебни-
       кам;
   •   преподаватели меняются в учебной группе в течение учебного года.
А если так, то усилия по эмпирическому определению сложности заданий теста не приве-
дут к результату, и сложность заданий будет принимать разные значения.
Вычисленная сложность заданий может реально использоваться в дальнейших тестирова-
ниях при условии сохранения трех внешних параметров:
   •   личность преподавателя и материал лекций, контрольных работ и пр.;
   •   комплект учебных пособий;
   •   параметры претендентов (т. е. группы учащихся, подвергающиеся тестированию,
       должны быть статистически неотличимы по характеристикам).
В противном случае, сложность заданий придется пересчитывать после каждого сеанса
тестирований перед определением рейтингов. А тогда может произойти казус:
   •   претенденты, тестировавшиеся в составе разных групп и получившие одинаково
       высокий рейтинг, будут значительно различаться своими характеристиками;
   •   претендент, прошедший тестирование по одному тесту, но в разных группах, полу-
       чит разный рейтинг.
Один из путей преодоления этих проблем – переход к векторному рейтингу.

                                           137