Найти в Дзене
discript

Практические советы по Screaming Frog: кастомный поиск

Ранее мы рассмотрели поиск и работу с внутренними ссылками, поиск небезопасного контента и работу с цепочками редиректов. Пришла пора ознакомиться еще с одной важной возможностью программы Screaming Frog, а именно с поиском пользовательских данных. Данный способ позволяет эффективно искать необходимые фрагменты на сканируемых страницах. Вы можете настроить поиск любых элементов в коде страниц. Например это могут быть определенные теги, классы, любой текст и т.д. Для более сложных случаев можно задействовать регулярные выражения. Пример использования: В разные статьи на сайт вручную добавляли видео. Через некоторое время решили изменить это видео. Само видео было добавлено через <iframe…> поэтому при простом сканировании не попадало в список ссылок. В принципе можно было посадить человека, чтобы он нашел все страницы с этим видео путем их перебора (благо статей было всего около 100). Но в любом случае это труд и при этом труд бесполезный.
Решили найти все страницы с этим видео, пу

Ранее мы рассмотрели поиск и работу с внутренними ссылками, поиск небезопасного контента и работу с цепочками редиректов. Пришла пора ознакомиться еще с одной важной возможностью программы Screaming Frog, а именно с поиском пользовательских данных.

Данный способ позволяет эффективно искать необходимые фрагменты на сканируемых страницах.

Вы можете настроить поиск любых элементов в коде страниц. Например это могут быть определенные теги, классы, любой текст и т.д.

Для более сложных случаев можно задействовать регулярные выражения.

Пример использования:

В разные статьи на сайт вручную добавляли видео. Через некоторое время решили изменить это видео. Само видео было добавлено через <iframe…> поэтому при простом сканировании не попадало в список ссылок. В принципе можно было посадить человека, чтобы он нашел все страницы с этим видео путем их перебора (благо статей было всего около 100). Но в любом случае это труд и при этом труд бесполезный.
Решили найти все страницы с этим видео, путем сканирования и поиска URL этого видео через поиск пользовательских данных.

На 100 страницах прелесть поиска кастомных значений не так заметна и в принципе решается старым-добрым ручным трудом, но когда этих страниц 1000 или 10000, проработать такой объем без ошибок затруднительно.

Кстати для части задач может помочь поиск в Яндексе по оператору «site». Но тут есть нюансы, например таким образом искать можно только текст (найти HTML тег или участок кода уже не получиться) и все страницы сайта для этого должны быть проиндексированы. Тогда как в Скриминг Фрог можно искать любое содержимое страниц, включая фрагменты HTML или даже JS код со страницы.

Разберем подробнее, как именно производить поиск элементов

Запускаем Screaming Frog SEO Spider и в пункте меню “Configuration” выбираем пункт “Custom”, а уже из него переходим в “Search”:

Вы увидите вот такое окно:

-2

Кстати, на скриншоте представлены элементы проверяемые при проведении технического аудита. Подробнее об этом мы поговорим в отдельной статье. А в конце этой статьи мы дадим список параметров которые можно проверять через поиск пользовательских данных при проведении технического аудита.

И так, на скриншоте мы видим 10 строк, это фильры, те самые значения которые SFSS будет искать в коде страниц.

Если мы нажмем на пункт “Contains”, то увидим выпадающее меню:

-3

Выбрав или оставив без изменений параметр “Contains”, мы дадим команду фрогу показывать нам страницы, в коде которых есть указанное в поле ввода значение.

Выбрав же второй параметр “Does not Contain”, мы наоборот скажем искать для нас страницы, в коде которых нет указанного нами значения. Таким образом мы легко сможем найти страницы, у которых например, нерадивые программисты снесли код счетчика Яндекс Метрики или любого другого счетчика.

В принципе на этом все настройки заканчиваются.

После того как вы внесли все нужные вам значения, нажимаем “Ок”, и отправляем сайт сканироваться.

После окончания сканирования, в поле обзора мы увидим список из наших фильтров и какое количество страниц по ним было найдено:

-4

Далее выбирая тот или иной фильтр, в поле содержимого, слева, будут отображаться страницы на которых были найдены (или наоборот не были найдены) нужные нам вхождения и их количество на этих страницах:

-5

Далее этот список можно выгрузить в файл CSV и работать с ним в Excel.

Читайте также:

Инструкция по настройке Screaming Frog SEO Spider!

Практические советы по SFSS: как найти все ссылки на документ?