Ключевые составляющие и функции поисковых систем
Spider - Первым важным компонентом любой поисковой системы, является так называемый паук. Этот сервис отвечает за «прощупывание» всей информации содержащейся на любом сайте. По сути, паук это обычный интернет браузер, с той лишь только разницей что он не работает с графическими, аудио и другими компонентами. Главное поле деятельности паука – это html-код, из которого, по сути, и состоит любой существующий веб-ресурс.
Crawler – эта составляющая, выполняет своеобразную роль проводника. Она исследует все ссылки находящиеся на сайте, тем самым помогая ориентироваться пауку. Исследуя содержимое, расположенное по ссылкам на странице, Crawler передает информацию о найденных объектах поисковой системе.
Indexer – работа, выполняемая этой службой, заключается в сортировке и дальнейшем изучении всех элементов входящих в состав сайта. Анализ каждого текстового, аудио, видео и других фрагментов, помогает поисковой системе распределять сайты.
Database – или, как её еще называют индекс поисковой системы, хранит в себе информацию обо всех элементах, найденных системой на сайтах. Именно в базе данных, находится все, что поисковая система, когда-либо скачивала или обрабатывала.
SearchEngineResultsEngine – система, с деятельностью которой обычный пользователь сталкивается чаще всего. Этот немаловажный компонент любой поисковой системы ранжирует, сортирует и оценивает страницы всех сайтов. От поставленной оценки или приоритета, зависит то, какое положение в поиске будет у страницы данного сайта. Оптимизаторы тратят уйму времени для придания внутренним ресурсам сайта максимально приятный, по меркам SearchEngineResultsEngine, вид.
Webserver – большинство современных сайтов, имеют отдельную html-страницу, на котором есть особое поле ввода. Введя ключевой запрос в это поле, пользователь получает перечень информации найденной на сайте. Такая информация, будет соответствовать заданному пользователем запросу. Кроме того, когда пользователь захочет получить результаты страницы в html-коде, веб-сервер выполнит все необходимые процессы для предоставления этой функции.
Конечно же, у каждого поискового сервиса, принципы работы отличаются от других подобных систем. И даже не смотря на значительные изменения и новации, общая структура механизмов отвечающих за поиск информации зачастую неизменна.