Интернет-форум Reddit перестал корректно отображаться в результатах поиска всех поисковых систем, за исключением Google, после введения ограничительных мер по защите пользовательских данных. По данным издания 404 Media, ссылки с Reddit стали недоступны или отображаются в небольшом количестве в поисковых системах Microsoft Bing, DuckDuckGo и других. Это связано с тем, что Reddit установил запрет на сканирование и индексацию своего контента всеми поисковыми роботами, включая Яндекс.
Однако Google продолжает показывать свежие посты и комментарии с Reddit благодаря сделке стоимостью около 60 миллионов долларов в год, которая позволяет компании использовать данные Reddit для обучения своих моделей с искусственным интеллектом. Представитель Reddit Тим Ратшмидт заявил, что блокировка произошла из-за невозможности достичь соглашений с другими поисковыми системами об использовании контента Reddit.
Это решение было частью более широкой стратегии по защите пользовательских данных и поиску новых источников дохода для компании. В прошлом месяце Reddit уже обновил файл robots.txt на вашем сайте, чтобы предотвратить доступ веб-ботов без соглашения. Таким образом, Reddit стремится контролировать доступ к своим данным и получать вознаграждение за их использование.
]]>