Сканирование - это термин, используемый для описания процесса работы бота, сценария или программного обеспечения, который посещает веб-страницу и получает содержимое и ссылки на этой странице. После завершения программа посещает следующую ссылку в списке или одну из ссылок, полученных с веб-страницы, которую она только что посетила.

Интернет-термины, метакроулер, поисковая система, паук