Состав поисковой системы

1. поисковый робот (Crawler, Spider и пр.);

2. база индексов документов (база данных);

3. поисковая машина;

4. модуль выдачи результатов.

Схема работы поискового робота

Поисковый робот круглосуточно просматривает содержимое Web - страниц, выбирает по определенным алгоритмам значимые слова и запоминает в базе индексов эти слова и адреса документов, в которых эти слова обнаружены. Если для какого-то слова робот нашел ссылку на другой документ на этой же Web – странице или на другой, он самостоятельно направляется по указанным ссылкам, находит новые документы и также их просматривает.

Значимые (существенные) слова – множество слов, которые, по мнению разработчика робота, наиболее точно отображают смысл обрабатываемой информации.

Индексация документа: запоминание значимых слов документа и их характеристик в базе индексов.

База индексов: множество гигантских индексных файлов поисковой системы, хранящих информацию о том, какое значимое слово, сколько раз, в каком документе (на какой Web – странице) употребляется.

Поисковая машина при ответе на запрос пользователя обращается к своей базе индексов, но не к информационным ресурсам Internet.

Каждая поисковая система использует свои методы индексации. Различные поисковые системы имеют разные объемы базы индексов.

Схема работы поисковой машины

Дата добавления: 2015-04-29