В мире поисковой оптимизации все чаще появляются вопросы, на какие боты стоит ставить ограничения. АИ‑агенты, такие как ChatGPT, Claude и GPTBot, могут сильно повлиять как на показатели SEO, так и на пользовательский опыт. В этой статье рассматриваются причины, по которым стоит ограничивать их поведение, как это реализовать через файл robots.txt, и какие дополнительные инструменты помогут управлять доступом к сайту. Базовый способ — добавить директивы для конкретных ботов: User‑agent: GPTBot Disallow:...

Изображение: recraft Ботнет-атаки и вредоносная активность ботов составляют около 40% трафика в интернете, паразитная нагрузка на инфраструктуру наносит прямой ущерб компаниям и организациям. О том, как эшелонированная защита помогает поставить надежный заслон перед ботоводами, рассказывают Евгений Воронцов, ведущий менеджер по продвижению решений ИБ компании «Мобиус Технологии», и Глеб Габитов, пресейл-инженер Servicepipe. Атаки на web-сервисы происходят постоянно, и кейсы, которые появляются в инфополе, в основном связаны с DDoS-атаками...