На протяжении десятилетий веб-страницы использовали файл robots.txt, который действует как своеобразный охранник: «Просматривайте наш сайт, но ничего не берите». Однако стартап по лицензированию контента TollBit утверждает, что компании, занимающиеся искусственным интеллектом, нарушают эти правила, забирая контент без разрешения. Недавно технические издания Wired и Forbes заявили, что их статьи были скопированы и опубликованы на платформе искусственного интеллекта Perplexity без указания авторства. По словам TollBit, проблема выходит за рамки отдельных случаев. Крупные игроки, такие как OpenAI и Anthropic, также игнорируют эти договоренности. «Чем больше мы принимаем журналов издателей, тем больше видим эту закономерность», — пишет TollBit. Некоторые компании ИИ утверждают, что они лишь ссылаются на контент, а не копируют его полностью, что можно сравнить с демонстрацией фотографий произведений искусства, чтобы поощрить людей увидеть оригинал. OpenAI, например, заявляет, что учитывает