ВебРоботы

Несколько вопросов


Что такое ВебРобот?

ВебРобот - это программа, которая автоматически ходит по гипертекстовой Веб-структуре, получая и рекурсивно обрабатывая все документы, на которые присутствуют ссылки.

Обычные браузеры не являются веброботами, так как находятся под управлением человека.


Для чего создаются роботы?

 

ВебРоботы используются для различных нужд:

  • индексирование;
  • проверка документов;
  • проверка ссылок;
  • контроль за новостями;
  • создание копий документов.


Чем различаются Роботы, Пауки (Spiders), Бродилки (Crawler), Черви (Worms), Муравьи (Ants)?

  • Роботы - общее название;
  • Пауки, Бродилки - то же самое, что и роботы, но более красивые названия;
  • Черви - похожи на роботов, но имеют свойство воспроизведения;
  • Муравьи - распределенные взаимосвязанные роботы.


Почему некоторые люди относятся предвзято к роботам?

  • Некоторые реализации роботов могут "загружать" сети и серверы. Это обычная ошибка людей, начинающих писать робота. На данное время существует много документации, описывающей и предотвращающей ошибки в ВебРоботах.
  • ВебРоботы могут управляться людьми, допускающими ошибки в их конфигурировании.

Но все эти ошибки не от программ, а от людей.


Где можно увидеть работу робота?

Зайдите практически на любой поисковой сайт (например, на www.altavista.com, www.yandex.ru). Вся информация, находящаяся на этих ресурсах, получена с помощью программ-роботов.

На validator.w3.org Вы можете проверить свои HTML-документы на соответствие стандартам.

Вадим НАРЕЙКО,
ghost@belcaf.minsk.by,
www.belcaf.com

Версия для печатиВерсия для печати

Номер: 

15 за 1999 год

Рубрика: 

Internet
Заметили ошибку? Выделите ее мышкой и нажмите Ctrl+Enter!