2 подписчика
Столкнулся с ситуацией, когда у клиента стоит защита от ПФ ботов на сайте и требуется просканировать сайт на скорость загрузки инструментом PageSpeed Insights.
Стал искать в сети параметры, по которым можно было бы добавить исключения для антибота, но ничего не сумел нарыть . В итоге путем проб и ошибок, выяснил, что гугл обращается к сайту с User-Agent: Chrome-Lighthouse
Тем самым, можно добавить в исключения роботов с данным юзер агентом и сможете спокойно сканировать свой сайт и улучшать скорость загрузки. Не благодарите 😉
Около минуты
22 января 2024