Один файл в корне сайта решает, какие страницы попадут в поиск, а какие нет. Настроишь правильно - роботы Яндекса и Google не тратят время на мусорные страницы и быстрее находят нужные. Ошибёшься в одной строке - и весь сайт выпадает из выдачи, а владелец месяцами не понимает, почему трафика нет. Разберём по-человечески: что это за файл, как он устроен, как написать рабочий robots.txt и какие ошибки в нём встречаются чаще всего. robots.txt один файл в корне сайта 3 строки минимум, чтобы файл работал 2 минуты проверить, не закрыт ли сайт robots...

У каждого опубликованного сайта на Тильде robots.txt уже есть: платформа собирает его сама и кладет по адресу вашдомен.ru/robots.txt. Открыть этот файл и переписать в нем строки не получится ни на одном тарифе. Содержимое меняется окольно, через настройки сайта и отдельных страниц. robots.txt - текстовый файл в корне сайта, который говорит поисковому роботу, какие адреса не обходить. Тильда пересобирает файл при каждой публикации. По умолчанию в нем уже закрыты служебные адреса: пути с /tilda/ (виртуальные...