193 подписчика

Дубли страниц на сайте: как определить и удалить дубли страниц

15 ноября 201915 ноя 2019

390

3 мин

Оглавление

Проблемы к которым приводят дубли страниц
Виды дублей
Как удалить дубли страниц на сайте

Привет друзья на связи Павел Гречко. В это статье я расскажу вам как найти и исправить дубли страниц. Это одна из критических ошибок которая мешает успешному продвижению вашего сайта. Так как любая админка будь то joomla, wordpress или битрикс обожают плодить дубли.

Дубли страниц это две или более страниц одного сайта, которые содержат идентичный или схожий контент. Довольно часто дубли — одна и та же страница сайта, доступная по разным url

Проблемы к которым приводят дубли страниц

Постоянная смена релевантной страницы
Обход роботом дублирующего контента
Затруднение сбора статистики
Неправильно распределяется внутренний ссылочный вес
Потеря внешнего ссылочного веса

Виды дублей

Явные дубли - полностью идентичный контент

Страницы со / и без /, .html, .php;
Один товар в двух категориях и разным url;
Страница версии для печати;
Сайт открывается с www и без;
Сайт открывается с https и без, если вы конечно не настроили переезд сайта на https;
Запутанная структура сайта;

site.ru/catalog/kraski
site.ru/catalog/brands/kraski
site.ru/brands/kraski/

7. Если вы крутите рекламу то обязательно используете UTM-метки, обычно такие страницы тоже попадают в индекс.

8. Админки сайта выводят некоторые страницы используя GET-параметры

site.ru/catalog/page/php?color=black

9. Страницы которые открываются с реферальной ссылкой.

10. Не правильно настроенная страница с выводом ошибки 404. Если вы в адресной строке после домена добавляете любое значение он становится ссылкой.

Все ошибки можно исправить спомощью программиста, настроить редирект или закрыть страницы от индексации.

Неявные дубли - Страницы с похожим содержимым, похожие товары

Страницы пагинации. Если ваша админка не правильно настроена то при переходе по каталогу, меняется URL в котором остаются те же самые мета-данные. Что бы избежать дублирования надо прописать rel=canonical на главный документ.

2. Характеристики, отзывы на карточке товара - Переключая вкладки на странице товара могут тоже возникать дубли.

Неявные дубли оказывают негативное влияние на ранжирование правдо не так сильно как явные дубли. Могут мешать продвижению конкретным запросам.

Смысловые дубли - это когда несколько страниц на сайте содержать один и тот же контент написанный разными авторами. Если это раздел в каталоге то можно его вынести из каталога и сделать например подборку товаров на отдельной странице. Если этот кластер под статью надо выбрать наиболее частотный, второй можно использовать на другом ресурсе.

Как удалить дубли страниц на сайте

Для страниц со / и без /, .html, .php настраиваем 301 редирект в .htaccess;
Для похожих товаров прописываем атрибут rel= «canonical» элемента link
Страницы версии для печати и страницы c Get параметрами закрываем в robots.txt использую директиву Disallow

Disallow: /catalog/ – директория catalog запрещена для индексации

Внимательно следите за тем что закрываете, если будут ошибки можно заблокировать весь сайт. Инструмент для проверки robots.txt

Как дубли страниц влияют на продвижение сайта

Эти вроде бы небольшие ошибки могут влиять на вывод сайта в топ 10. Я составил список недугов которые они создают.

Увеличивается время индексации важным документов. Так как робот тратить свои ресурсы на дубли.
Снижает релевантность документов. Если несколько страниц отвечают на один и то же запрос. Поисковик не может определить лучший и начинает обоих ранживаровать хуже.
Снижают уникальность вашего контента.

Поиск дублей страниц на сайте

Способ 1. Смотрим в вебмастере страницы в поиске

Способ 2. Смотрим выдачу с помощью оператора site:grechkopv.ru

Способ 3. С помощью программы скриминг фрог https://www.screamingfrog.co.uk/seo-spider

Способ 4. В Google Search Console во вкладке «Оптимизация Html» можно посмотреть список страниц с повторяющимися мета-описаниями, т.е. список потенциальных дублей.