Что такое поисковые роботы Это обычные программы, которые работают на серверах поисковых систем, например Яндекс или Гугл. Задача этих программ ходить по ресурсам интернета, собирать информацию и передавать для обработки программам - анализаторам контента. Специально употребил слово "ресурс", поскольку оно включает в себя не только сайты интернета, но и всевозможный другой контент - от текстовых документов "без сайта" до баз данных и баз знаний. Конечно, когда сейчас говорю о роботах в первую очередь подразумеваю их как исследователей сайтов...

Роботы все больше входят в нашу жизнь, перейдя из фантастических книг в быт незаметно и прочно. Но что же именно мы называем этим словом? Робот — это машина, обычно запрограммированная, которая может выполнять сложную серию действий автоматически. Определение из международного стандарта ISO 8373:2012 гласит: «Робот (robot): исполнительный механизм, программируемый по двум или более степеням подвижности, обладающий определенной степенью автономности и способный перемещаться во внешней среде с целью выполнения задач по назначению»...