Поисковые системы в Интернете

На заре развития компьютерных технологий и Интернета вопрос поиска нужной информации на сайтах не стоял так остро, так как сайтов в то время по отношению к сегодняшним дням было совсем немного.

В те годы поиск осуществлялся по тематическим каталогам сайтов, и этого было достаточно. Первым таким каталогом в 1994 году стал Yahoo. Тогда этот ресурс еще не был поисковой машиной, а представлял собой каталог зарегистрированных на нем сайтов.

Также стоит отметить, что интернетом пользовались в основном сотрудники научных организаций и преподаватели университетов. Широкая аудитория во всемирную паутину пока не попала.

Прорыв начался во второй половине 90-х годов. В 1995 году появились первые полноценные поисковые системы – Lucos и Altavista. В 1997 году появились Google и Yandex – сегодняшние лидеры среди поисковых систем в России и в мире.

Далее – долгий путь совершенствования алгоритмов поиска, создание своих баз данных. В итоге оказалось, что успешно эти задачи могут решать лишь единицы – на сегодняшний день только три поисковых системы за рубежом обладают своими алгоритмами поиска и информационными базами - Google, Yahoo, MSN Search. В России это – Яндекс и Search.Mail.ru.

Поисковая система состоит из следующих компонентов:

· WEB сервер: компьютер, в котором находится поисковая машина;

· паук – программа, разработанная для сканирования и работающая с HTML кодом страницы напрямую, скачивает ее в базу данных поисковой машины;

· путешествующий паук – программа для анализа внешних ссылок страниц;

· индексатор – анализирует HTML код, то есть индексирует скачанные WEB страницы;

· база данных – здесь хранятся закаченные WEB страницы;

· поисковый движок, который выдает результаты – именно эта программа решает порядок соответствия WEB страниц запросам пользователей, то есть формирует выдачу.