«Информационные поисковые системы в Интернет.»

Основные протоколы, используемые в Интернет, не обеспечены достаточными встроенными функциями поиска, не говоря уже о миллионах серверах, находящихся в ней. Протокол HTTP, используемый в Интернет, хорош лишь в отношении навигации, которая рассматривается только как средство просмотра страниц, но не их поиска. То же самое относится и к протоколу FTP, который даже более примитивен, чем HTTP. Из-за быстрого роста информации, доступной в Сети, навигационные методы просмотра быстро достигают предела их функциональных возможностей, не говоря уже о пределе их эффективности. Не указывая конкретных цифр, можно сказать, что нужную информацию уже не представляется возможным получить сразу, так как в Сети сейчас находятся миллиарды документов и все они в распоряжении пользователей Интернет, к тому же сегодня их количество возрастает согласно экспоненциальной зависимости. Количество изменений, которым эта информация подвергнута, огромно и, самое главное, они произошли за очень короткий период времени. Основная проблема заключается в том, что единой полной функциональной системы обновления и занесения подобного объема информации, одновременно доступного всем пользователям Интернет во всем мире, никогда не было. Для того чтобы структурировать информацию, накопленную в сети Интернет, и обеспечить ее пользователей удобными средствами поиска необходимых им данных, были созданы поисковые системы.

1.1 Как работают механизмы поиска

Средства поиска и структурирования, иногда называемые поисковыми механизмами, используются для того, чтобы помочь людям найти информацию, в которой они нуждаются. Средства поиска типа агентов, пауков, кроулеров и роботов используются для сбора информации о документах, находящихся в Сети Интернет. Это специальные программы, которые занимаются поиском страниц в Сети, извлекают гипертекстовые ссылки на этих страницах и автоматически индексируют информацию, которую они находят для построения базы данных. Каждый поисковый механизм имеет собственный набор правил, определяющих, как cобирать документы. Некоторые следуют за каждой ссылкой на каждой найденной странице и затем, в свою очередь, исследуют каждую ссылку на каждой из новых страниц, и так далее. Некоторые игнорируют ссылки, которые ведут к графическим и звуковым файлам, файлам мультипликации; другие игнорируют cсылки к ресурсам типа баз данных WAIS; другие проинструктированы, что нужно просматривать прежде всего наиболее популярные страницы.

Поисковая система - автоматическая система, ресурсы (сайты/сервера/порталы) заносятся в базу либо роботом - автоматически обнаруживаются в Интернет, либо пользователем (к примеру веб-мастером сайта). При этом, как правило, ее услуги бесплатны, база огромна, а добавляемый сайт не просматривается модератором при добавлении в поисковую систему.

Поисковые системы состоят из трех компонент:

- агент (паук или кроулер), который перемещается по Сети и собирает информацию;

- база данных, которая содержит всю информацию, собираемую пауками;

- поисковый механизм, который люди используют как интерфейс для взаимодействия с базой данных.

1. Тихонов В. Поисковые системы в сети Интернет // h**t://w*w.citforum.r*/internet/search/searchsystems.shtml#1

2. Храмцов П. Поиск и навигация в Internet // h**t://w*w.osp.r*/cw/1996/20/31.htm

3. Обзор поисковых систем и каталогов Рунета // h**t://w*w.4site.net.r*/Lit/lit-p.html

4. Аликберов Андрей Несколько слов о том, как работают роботы поисковых машин // h**t://w*w.citforum.r*/internet/search/art_1.shtml

5. Пасько В. Эффективная работа в Интернете. СПб.: «Питер», 2006.

6. Холмогоров В. Поиск в Интернете и сервисы Яндекс. СПб.: «Питер», 2006.