Образовательные информационные технологии. Часть 2. Педагогические измерения. Морев И.А. - 88 стр.

       05.02. Что измеряют в процессе тестирования?


                                      Все силы отдай, чтобы выполнить точно расчет,
                                          Но знай: небеса не приемлют научный подход.
                                        Уильям ВОРДСВОРТ (перевод Л. Владимирова)
В настоящее время используют три метода обработки и анализа результатов тестирова-
ния:
   •   классический;
   •   IRT (Item Response Theory);
   •   наглядный.
Два первых подхода базируются на статистической обработке так называемого «сырого»
балла, то есть балла, набранного испытуемым в результате тестирования. Обработка
включает
   •   определение трудности или «веса» каждого задания, т. е. числа, отражающего ко-
       личество участников с ним справившихся;
   •   пересчет результатов – «сушка сырых баллов».
Наглядные методы, как правило, не включают промежуточной обработки и позволяют
участнику увидеть результат сразу после сеанса.
Люди, применяющие наглядные методы, экономят свое и чужое время, и опираются при
этом на свой опыт, говорящий:
   •   если задания составлены и «взвешены» опытным преподавателем, то никакая ста-
       тистическая обработка не повлияет существенно на результаты тестирования;
   •   какие бы системы пересчета баллов не применялись, все равно вверху рейтинговой
       таблицы фигурируют, слегка меняясь местами, одни и те же учащиеся.
Нельзя с ними не согласиться. «Сушка сырых баллов» после завершения тестирования с
добротно созданным тестом действительно требует больших трудозатрат и редко приво-
дит к существенным изменениям в рейтинговых таблицах. Пример тому – российский
опыт проведения тестирований «Телетестинг», ЦКТ, ЕГЭ. Опытные члены жюри тради-
ционных олимпиад, которым приходится иметь дело с разными системами пересчета бал-
лов, придерживаются часто такого же мнения.
Математический аппарат классической теории проще, чем аппарат IRT, там возможен об-
счет даже с помощью калькулятора, хотя удобнее воспользоваться специальными про-
граммами.
Считается, что классическая теория имеет ряд недостатков, главный из которых – боль-
шая, чем в IRT, зависимость результатов измерения от инструмента измерения (теста).
Качественный анализ хорошо представленных результатов наглядно демонстрирует ус-
пешность учебного процесса, дает возможность оптимизировать корректировку содержа-
ния и методики обучения. Используя результаты каждого испытуемого, можно индиви-
дуализировать обучение.
                                                               Икс с игреком не путай!
                                                                    А. И. ПРИГОРНЕВ
От процедуры тестирования ожидают, что после ее завершения все участники будут дос-
таточно надежно распределены (дифференцированы) по определенным группам. Количе-
                                          88