ПОИСКОВЫЕ СИСТЕМЫ (SEARCH ENGINES)
Подавляющее большинство пользователей Интернета имеют слабое представление, как работает поисковая система. Здесь мы рассмотрим основные понятия и устройство поисковых систем (они же поисковые машины, или поисковики).
Поисковых систем довольно много, есть более или менее популярные и соответственно посещаемые ( рейтинг поисковых систем ). В мировом Интернете наиболее популярен Google, в Рунете - Яндекс, хотя «русский» Google
тоже набирает все бо'льшую силу.
Почему же именно поисковые системы заняли в Интернете самое главное место ? Все просто - они упорядочили хаос. В Интернете сегодня десятки миллионов веб-страниц, «разбросанных»
беспорядочно, без возможности перехода от «первой» веб-страницы к «последней». Нельзя «читать» Интернет подряд.
Именно поисковые системы обеспечивают «понятность» и «прозрачность» Интернета для простого пользователя. Каким же образом ?
ПОИСКОВЫЕ СИСТЕМЫ И ПОИСК ИНФОРМАЦИИ
С тех времен, когда были изобретены книги, люди придумали три основных способа поиска информации (оглавление, предметный указатель, ссылки) среди большого количества страниц. В Интернете используются те же способы поиска, просто они автоматически выполняются специальными программами.
ОГЛАВЛЕНИЕ
Надо найти нужную страницу книги - открываем оглавление. Этому способу поиска в Интернете соответствуют каталоги. В них веб-страницы расположены по рубрикам. Последовательно просматривая каталог, пользователь выбирает нужную рубрику и просматривает сайты этой рубрики.
Сначала эры Интернета именно каталоги были основным способом упорядочения информации, но потом уступили первенство поисковым системам.
ССЫЛКИ
Второй привычный для книголюбов способ поиска - это ссылки в тексте на нужную страницу. Анологично в Интернете действует система переадресации пользователя со страницы на страницу по ссылкам с помощью мышки компьютера.
Ссылки в Интернете называются гипертекстовыми. Ссылки это «корневой» принцип Интернета.
ПРЕДМЕТНЫЙ УКАЗАТЕЛЬ, ИЛИ ИНДЕКС
Третий способ поиска нужной информации - алфавитный список важных терминов (предметный указатель, или индекс).
В индексе перечисляются важные термины (ключевые слова). Именно принцип поиска нужной веб-страницы по ключевым словам в индексе и стала основной идеей, по которой созданы поисковые системы Интернета.
Как же составляется и работает индекс Интернета ?
КАК РАБОТАЕТ ПОИСКОВАЯ СИСТЕМА
Поисковая система является специальной программой, которая составляет и хранит предметный указатель Интернета, находит в нем заданные ключевые слова. Для этого программа и составляет индекс.
ЭТАПЫ СОСТАВЛЕНИЯ ПОИСКОВОЙ СИСТЕМОЙ ИНДЕКСА И ПОИСК ПО НЕМУ
1. Сбор адресов веб-страниц в Интернете
Поскольку веб-страницы беспорядочно разбросаны в Интернете поисковая система должна с чего-то начать. Как правило разработчики поисковой системы загружают в нее какой-то первоначальный список адресов веб-страниц
(например, взятых из какого-либо каталога), а затем уже составная часть поисковой системы - поисковый робот собирает все гипертекстовые ссылки с заданных веб-страниц на другие веб-страницы
и добавляет найденные в ссылках адреса к своему первоначальному перечню адресов.
2. Выкачивание страниц
Поисковая система выкачивает текст веб-страницы, чтобы обработать его и составить из него индекс. Выкачивает текст веб-страницы поисковый робот (поисковый «паук»).
Поисковый робот обходит заданный перечень веб-страниц, выкачивает огромный объем текстового материала, хранит его на дисках своих компьютеров и передает на индексирование индексному роботу.
3. Составление индекса (индексирование)
Индексный робот поисковой системы выбирает все слова из всех выкачанных текстов, располагает их в алфавитном порядке вместе с номерами и прочей служебной информацией веб-страниц.
4. Поиск
Все предыдущие шаги выполняются в поисковой системе и незаметны пользователю. А вот сам поиск пользователь видит. Введя свой поисковый запрос - он получает список гипертекстовых ссылок на веб-страницы Интернета.
Как это происходит ? Когда пользователь вводит какое-либо слово или словосочетание в строку запроса поисковой системы, она обращается к индексу, находит запись о заданном слове, извлекает все номера веб-страниц, относящихся к заданному слову,
и показывает пользователю результат поиска - список веб-страниц. Поисковая система тем лучше, чем более «правильные» (релевантные) веб-страницы она выдает в результатах поиска.
