Также «бот», «паук». Программа, являющаяся составной частью поисковой машины, и предназначенная для обхода страниц Интернета с целью занесения их в базу поисковика. Порядок обхода страниц, частота визитов регулируется алгоритмами поисковой машины. Запретить индексацию всего сайта или его части можно с помощью файла robots.txt, содержащего инструкции для поисковых роботов. Поисковый спаи. Различные методы обмана поисковиков и их посетителей, с целью повышения ранга страницы в результатах поиска. Различные поисковики имеют разные определении того, что считать спамом; наиболее общее определение гласит «поисковый спам» - это любые приёмы или тексты, рассчитанные только на роботы поисковых машин, а не предназначенные для “живого” посетителя.
