Spider. браузероподобная
программа, которая скачивает веб-страницы.Паук - это программа, которая
скачивает веб-страницы тем же способом, что и браузер пользователя. Отличие состоит
в том, что браузер отображает информацию, содержащуюся на странице (текстовую,
графическую и т.д.), паук же не имеет никаких визуальных компонент и работает
напрямую с html-текстом страницы (вы можете сделать «просмотр html-кода» в
вашем браузере, чтобы увидеть «сырой» html-текст).
