Введение в информационно-поисковые системы - 20 стр.

UptoLike

ВУЗ: 

ТвГТУ | Тверь

Составители: 

Рубрика: 

−на уровне входа изучаются вопросы, связанные с входной информацией и
внутренним содержимым системы, в частности, о степени полноты имеющихся ин-
формационных ресурсов в определенной области;
−уровень обработки рассматривает вопросы качества работы алгоритмов поис-
ка, обоснованности применяемых методов и подходов;
−на уровне выхода исследуется взаимодействие пользователя с системой и ра-
бота с полученными результатами: вид представления найденных документов, оцен-
ка механизмов обратной связи и т. д;
−уровень применимости системы анализирует возможности использования ре-
зультатов поиска для решения стоящей перед пользователем задачи и степень по-
лезности этих результатов;
−социальный уровень исследует влияние системы на ее окружение, а именно
на эффективность принятия решений, производительность труда и т. д.
В зависимости от целей и условий оценки эффективности можно выбрать мно-
жество методов исследования. На практике часто применяется метод макрооценки.
Анализируемая ИПС рассматривается в таком случае как черный ящик, то есть ее
структура не принимается во внимание, а акцент делается на затраты времени и ре-
сурсов на уровне входа и получение нужных документов на уровне выхода [].
Необходимо отметить, что испытание ИПС в любом случае должно произво-
диться с использованием набора запросов, отражающего реальные типы запросов,
которые в действительности поступают в условиях эксплуатации системы. Одновре-
менно оценка релевантности найденных разными системами документов должна
проводиться одними и теми же пользователями (экспертами) [, ].
Принято выделять несколько основных критериев эффективности ИПС:
1.Полнота поиска - способность ИПС выдавать все релевантные документы.
2.Точность поиска - способность ИПС отсеивать нерелевантные документы.
3.Усилия, затрачиваемые на формулирование запросов, взаимодействие с си-
стемой и просмотр выдаваемой информации.
4.Форма представления найденной информации.
5.Полнота информационного массива, то есть степень охвата всех релевант-
ных информационных ресурсов, интересующих пользователей.
Некоторые из этих критериев можно измерить довольно легко. Например, за-
траты труда пользователей можно выразить через время, необходимое для форму-
лирования запроса, диалога с системой и просмотра полученной информации. Так
же непосредственно можно оценить форму представления документов. Определе-
ние полноты охвата информационного массива может вызывать затруднения, если
18

Страницы