Подход к построению перспективных систем поиска информации из открытых источников, в частности сети Internet

На сегодняшний день известны системы способные выполнять поиск материала и его сортировку по запросу потребителя (поисковые системы). Поиск материала несколькими поисковыми системами и его ранжирование в соответствии с запросом потребителя (метапоисковые системы). Пример метапоисковой системы (МПС) представлен на рис. 1.

Рис. 1. Пример метапоисковой системы

Потребитель на основе информационной потребности формулирует запрос к МПС. МПС формирует соответствующий запрос каждой из N доступных поисковых систем. Обработанный на основе правил ранжирования метапоиска материал представляется потребителю.

Анализ полученных результатов не производится, что может привести к предоставлению пользователю нерелевантного материала. Результаты, полученные первыми в одной поисковой системе, могут оказаться выше в другой, чем существенно понизить качество самого поиска. Ранжирование материалов по релевантности дает хороший результат при создании анализатора позиции сайта в поисковых системах, но в целом для систем метапоиска оказывается неудовлетворительным. В качестве решения данной проблемы и повышения качества поиска используется расположение полученных ссылок по порядку их следования в результатах поиска каждой из поисковых систем. При этом, если в разных поисковых системах был найден один и тот же сайт, то ценность его для потребителя повышается.

Известные авторам поисковые и МПС выполняют поиск информации, которая представляет собой ее определенный вид – текст, фотоматериалы, видеоматериалы, аудиоматериалы. Совокупность различных видов информации, в соответствии с запросом пользователя, не предлагается или предлагается в тестовом режиме. Кроме того, существующие на сегодняшний день поисковые и МПС не производят поиска информации на естественных языках отличных от естественного языка запроса. Для устранения указанных недостатков в перспективных системах поиска информации предлагается использовать следующий подход.

Суть подхода состоит в создании документа, поле которого условно разделяется на четыре части, заполнение каждой из которых осуществляется, не зависимо от других, из двух возможных источников. В качестве первого из источников информации выступает предварительно сформированная база данных, содержащая все виды информацию. Вторым источником выступает открытый источник, например, Internet. Кроме того, формирование запроса происходит не только на естественном языке запроса, но и на других естественных языках. Формирование запроса при таком подходе может быть реализованное так, как представлено на рис. 2.

Рис. 2. Схема формирования запросов по виду информации на различных естественных языках

Схема включает в себя, агентов (А1, А2, А3…), формирующих запросы на определенном естественном языке и МПС, которым этот запрос поступает.

Информация, поступающая в ответ на запрос потребителя в МПС, сортируется и передается на обработку агентам (А1, А2, А3…). Агенты в соответствии с правилами доверия осуществляют обработку материала и обратный перевод на естественный язык формирования запроса.

Далее происходит передача информации агенту (А) и обработка полученных данных этим агентом.

Название предлагаемого подхода формируется исходя из сути используемых им методов – многоагентная метапоисковая система (ММПС).

Наполнение документа осуществляется следующим образом. Документ представляет собой совокупность данных, таких как текст, фотоматериалы, аудиоданные, видеоданные. Пользователь, на основе информационной потребности, формулирует запрос, который поступает в базу данных и ММПС. На основе сформулированного запроса поступает ответ из базы данных и ММПС. По каждому виду информации формируется индивидуальный запрос (итого четыре параллельных запроса по каждому виду информации). Схема формирования запроса по виду информации представлена ранее на рис. 2. Схема предлагаемого подхода представлена на рис. 3.

Интернет

ММПС

ММПС

Рис. 3. Схема предлагаемого подхода