Метатег robots — для роботов! Иногда Яндекс.Дзен отключает поисковую индексацию для отдельных публикаций канала или для всего канала в целом. Проявляется это следующим образом. На странице канала (не путать с редактором) в исходном коде можно обнаружить строчку: А на статье такую: Эти теги служат для того, чтобы сказать поисковым система (роботам, которые занимаются сбором информации с сайтов), как поступать со страницами на сайте. Приведённые выше «команды» говорят поисковикам, что эти страницы не нужно включать в поисковую базу...

От чего зависит частота посещения сайта Яндекс-ботом Боты Яндекса и код для проверки прихода бота на сайт по ссылке в статье. Из практики, что главным и единственным критерием периодичности прихода бота на сайт для индексации является частота добавления материалов на главную страницу. Есть и еще один фактор, но он носит глобальный характер. И влияет скорее не на частоту индексации, а на ранжирование информации в поисковой выдаче. Это фактор наложения Яндексом фильтра АГС. Для подтверждения этого факта решил поставить эксперимент Уже писал про особенность индексации сайта яндексом...