bot

bot — робот-паук. Специальные программы, которые обходят все ссылки заданной Web-страницы и вносят в базу данных новые ссылки, если таковые были найдены. «Пауки» обычно являются частью любой поисковой машины. Другое название для программы-паука — spider,