Причины, связанные с неиндексацией страниц
🔎 URL, отмеченный как 'noindex'
Это когда URL содержит директиву "meta robots", заявляющую, что его не следует индексировать.
❓ Когда это проблема?
- Если страница имеет ценность для конечных пользователей.
- Если на страницах есть внешние ссылки (потеря ссылочного веса).
- Если ключевые навигационные страницы заблокированы.
🔎 URL заблокирован в Robots.txt
Google утверждает, что URL заблокирован путем запрета на индексацию в Robots.
❓ Когда это проблема?
- Если страница имеет ценность для конечных пользователей.
- Если на страницах есть внешние ссылки (потеря ссылочного веса).
- Если ключевые навигационные страницы заблокированы.
🔎 Ошибка сервера (5xx)
Googlebot сделал запрос, который сервер не смог обработать.
❓ Когда это проблема?
- Если ключевые страницы, нормально загружаемые для пользователей, не загружаются для googlebot.
🔎 Ошибка перенаправления (редирект)
Это когда редирект ошибается. Обычно это перенаправление по цепочке редиректов или неправильные ответы.
❓ Когда это проблема?
- Если вы сменили домен или много URL.
- Если нет согласованности протокола.
🔎 Soft 404
Страница, которую Google видит, — это HTTP 200, но с минимальным или совсем отсутствующим содержанием, часто с сообщением, что что-то не найдено или результатов не найдено — Google воспринимает это как 404, где страница ничего не предлагает.
❓ Когда это проблема?
- Если таких страниц много на вашем сайте.
- Если у вас много статичных маршрутов на страницы с минимальным или отсутствующим содержанием.
🔎 Сканировано — в настоящее время не индексировано и обнаружено — в настоящее время не индексируется
Контент, о котором Google знает, но не индексировал, обычно из-за проблем с качеством и ценностью. Контент здесь обычно не считается достаточно ценным для подачи.
❓ Когда это проблема?
- Если много действительного контента не индексируется.
- Если есть много "тонких", устаревших и старых страниц.
- Если у любого из URL есть внешние ссылки.
🔎 Не найдено (404)
Страница больше не находится, часто раздувается устаревшими URL-адресами.
❓ Когда это проблема?
- Если 404 URL имеют внешние ссылки/трафик.
🔎 Заблокирован из-за запрещённого доступа (403) и заблокирован из-за несанкционированного запроса (401)
Google сделал запрос, в котором запрос был запрещён.
❓ Когда это проблема?
- Были ли найдены и обслужены сайты для размещения или разработчиков.
- Если запрошенные URL действительны и являются частью контента, который следует индексировать.
🔎 Дубликат, Google выбрал другой канонический от пользователя
Google выбрал другую каноническую директиву и проигнорировал. Обычно происходит, когда несколько страниц делятся похожим контентом.
🔎 URL заблокирован из-за другой проблемы с 4xx
Обычно заблокированы запросы (403) или URL исчезают (410).
🔎 Дубликат без выбранного пользователем каноникла
🔎 Страница с редиректом
🔎 Альтернативная страница с соответствующим каноническим тегом
***
Для проведения технического аудита сайта рекомендуем использовать программу SiteAnalyzer