ВУЗ:
Составители:
Рубрика:
ранжирование экспертом оцениваемых величин (в порядке убывания или возрастания);
определение экспертом числовых значений оцениваемых величин (например, при определении
коэффициентов весомости показателей качества каждому коэффициенту эксперты присваивают определенные
числовые значения).
Оценка по отклонению от среднего мнения экспертной группы может быть выражена через
совокупность абсолютных отклонений
)(
i
∆
, рассчитанных как разница между средней групповой оценкой
)(x и индивидуальной оценкой (х
i
)
ii
xx
−
=
∆
.
Оценка объективности эксперта является важной характеристикой его качества. В ряде случаев, например,
при оценке конкретных образцов продукции, необъективность экспертов может привести к существенному
искажению результатов. Однако пока еще нет специфических методов оценки объективности экспертов и
на практике довольствуются косвенной оценкой по отклонению от среднего мнения экспертов.
Тестовые оценки
Тестовый метод заключается в проведении испытаний, в ходе которых оцениваются некоторые
психофизиологические особенности, от которых зависит качество эксперта.
Достоинством этого метода является возможность оценить многие качества, для чего другие методы и
виды оценок неприемлемы. Недостаток его заключается в том, что полученные при тестировании результаты
невозможно сравнить с данными, полученными каким-либо объективным методом.
При проведении тестовых оценок к тестам предъявляются следующие требования:
понимания испытуемым экспертом постановки тестовой задачи и условий, которым должно отвечать ее
решение;
вероятность случайного угадывания решения задачи должна быть близка к нулю;
тестовая задача должна иметь точное решение.
Разновидностями тестовых являются оценки воспроизводимости результатов, квалиметрической
компетентности эксперта, объективности корректирования своих оценок.
Оценка воспроизводимости результата – оценка степени близости индивидуальных оценок эксперта,
проведенных через определенные промежутки времени. Применительно, например, к экспертному опросу,
проводимому в несколько туров, это означает, что оценки, назначенные экспертом в последующем туре,
должны быть достаточно близкими к аналогичным оценкам предыдущего тура. В этом случае можно говорить
о малом значении случайностей погрешности экспертной оценки, т.е. о стабильности мнения.
Следует учесть, что промежуток времени между турами должен быть не велик, чтобы исключить влияние
возможной новой информации, изменяющей его суждения, но в то же время достаточен, чтобы эксперт забыл
данные оценки в предыдущем туре.
Оценка квалиметрической компетентности эксперта – оценка теоретических знаний методов оценки
качества и умения их применять. Оценка теоретической подготовки эксперта может проводиться путем
контроля знаний с использованием тестов в определенной области знаний.
Проверка умения проверять подразделяют на три типа:
умение использовать разные типы оценочных шкал;
умение определять субъективные вероятности;
умение различать достаточное число градаций оцениваемого свойства.
1
Умение использовать разные типы оценочных шкал (порядка, отношений, интервалов) очень важно,
так как достаточно часто экспертные оценки проводятся путем ранжирования показателей качества товаров
(например, вкус очень сладкий, сладкий, слабовыраженный, несладкий). Эксперты, не умеющие оперировать
некоторыми видами шкал, должны быть отклонены на этапе формирования рабочих групп.
2
Умение определять субъективные вероятности – способность эксперта оценивать вероятность
наступления определенных событий. Эта способность различна у разных людей. От эксперта требуется не
только давать количественные оценки каким-то признакам экспертируемого им объекта, но и определять
субъективную вероятность этих оценок.
Использование вероятностных характеристик проявляется и в том, что эксперты очень редко улавливают
разницу между математическим ожиданием некоторой величины и ее наиболее вероятным значением.
Эксперты, у которых такая способность отсутствует, не должны привлекаться к экспертизам, связанным
с прогнозированием.
Страницы
- « первая
- ‹ предыдущая
- …
- 29
- 30
- 31
- 32
- 33
- …
- следующая ›
- последняя »