Образовательные информационные технологии. Часть 2. Педагогические измерения. Морев И.А. - 97 стр.

UptoLike

Составители: 

97
05.04. Разрешающая способность и объективность
измерительных процедур
Чертеж должен работать!
В. Ф. ЕФИМЕНКО
Под «разрешающей способностью» технологии оценки понимают степень возможности
адекватного распределения (дифференцирования, разбиения) с ее помощью всех претен-
дентов на критериально-однородные группы в соответствии с их уровнями знаний, лично-
стными качествами, практической подготовкой и пр.
Обычно подразумевается, что границы между группами учащихся, проведенные процеду-
рой оценки с высокой «разрешающей способностью», легко
объяснимы и не вызывают
споров. Однако многие из нас сталкивались со случаями логически необъяснимого прове-
дения границ между «пятеркой» и «четверкой» или «четверкой» и «тройкой» не только на
устных экзаменах, но и при компьютерных тестированиях.
Чаще всего, когда технологии тестирования разрабатываются неспециалистами, границы
определяются волюнтаристски, «с потолка» (здесь очень просится
слово «всегда»).
Иногда работодатели предъявляют специфические претензии к вузовской оценке качест-
ва, полагая, что принимаемый на работу специалист должен, в первую очередь, грамотно
проектировать изделия, а не знать назубок определения и математические теоремы. Тре-
бования вузовских приемных комиссий также нередко расходятся с тем, что требуется от
выпускников в школах. Эта разница
в точках зрения на качество исходящей и входящей
«продукции» вполне объяснима и должна учитываться при проведении тестирований.
Разрешающую способность технологии можно и повысить и понизить. Она может быть
повышена:
во-первых, путем перехода к многобалльным шкалам (например, 100-балльные или
1000-балльные);
во-вторых, путем использования многомерных оценок (например, когда оценива-
ние каждой составляющей образованности специалиста ведется по-отдельности и
вычисление интегральной оценки осуществляется с применением методик фактор-
ного анализа).
Разрешающая способность зависит от свойств не только каждого из применяемых тесто-
вых заданий, но и всей совокупности ТЗ в целом.
Лучшим следует признавать
тот массив ТЗ, который:
во-первых, «равномерно покрывает» весь учебный материал (т. е. в заданиях нашла
равное отражение учебная информация из подобных по информационному весу и
важности разделов дисциплины);
во-вторых, вопросы и ответы самих заданий не вызывают нареканий с точки зре-
ния грамотности, взаимного соответствия и т. п.;
в-третьих, веса оценок, которые учащиеся получают в свою «копилку» в процессе
тестирования, объективно соответствуют соотношениям сложности и важности ТЗ;
в-четвертых, задания нельзя выполнить путем простого логического заключения
либо простого узнавания исходя из каких-либо примет.
Тестовые задания описывают многими характеристиками, например;
       05.04. Разрешающая способность и объективность
              измерительных процедур


                                                           Чертеж должен работать!
                                                                  В. Ф. ЕФИМЕНКО
Под «разрешающей способностью» технологии оценки понимают степень возможности
адекватного распределения (дифференцирования, разбиения) с ее помощью всех претен-
дентов на критериально-однородные группы в соответствии с их уровнями знаний, лично-
стными качествами, практической подготовкой и пр.
Обычно подразумевается, что границы между группами учащихся, проведенные процеду-
рой оценки с высокой «разрешающей способностью», легко объяснимы и не вызывают
споров. Однако многие из нас сталкивались со случаями логически необъяснимого прове-
дения границ между «пятеркой» и «четверкой» или «четверкой» и «тройкой» не только на
устных экзаменах, но и при компьютерных тестированиях.
Чаще всего, когда технологии тестирования разрабатываются неспециалистами, границы
определяются волюнтаристски, «с потолка» (здесь очень просится слово «всегда»).
Иногда работодатели предъявляют специфические претензии к вузовской оценке качест-
ва, полагая, что принимаемый на работу специалист должен, в первую очередь, грамотно
проектировать изделия, а не знать назубок определения и математические теоремы. Тре-
бования вузовских приемных комиссий также нередко расходятся с тем, что требуется от
выпускников в школах. Эта разница в точках зрения на качество исходящей и входящей
«продукции» вполне объяснима и должна учитываться при проведении тестирований.
Разрешающую способность технологии можно и повысить и понизить. Она может быть
повышена:
   •   во-первых, путем перехода к многобалльным шкалам (например, 100-балльные или
       1000-балльные);
   •   во-вторых, путем использования многомерных оценок (например, когда оценива-
       ние каждой составляющей образованности специалиста ведется по-отдельности и
       вычисление интегральной оценки осуществляется с применением методик фактор-
       ного анализа).
Разрешающая способность зависит от свойств не только каждого из применяемых тесто-
вых заданий, но и всей совокупности ТЗ в целом.
Лучшим следует признавать тот массив ТЗ, который:
   •   во-первых, «равномерно покрывает» весь учебный материал (т. е. в заданиях нашла
       равное отражение учебная информация из подобных по информационному весу и
       важности разделов дисциплины);
   •   во-вторых, вопросы и ответы самих заданий не вызывают нареканий с точки зре-
       ния грамотности, взаимного соответствия и т. п.;
   •   в-третьих, веса оценок, которые учащиеся получают в свою «копилку» в процессе
       тестирования, объективно соответствуют соотношениям сложности и важности ТЗ;
   •   в-четвертых, задания нельзя выполнить путем простого логического заключения
       либо простого узнавания исходя из каких-либо примет.
Тестовые задания описывают многими характеристиками, например;


                                          97