Закрытие недавних результатов Reddit для поисковых систем, не связанных с Google

Недавние обсуждения на Reddit больше не отображаются в результатах поиска в поисковиках, не связанных с Google. Отсутствие связано с обновлениями в Политике содержимого Reddit, которые запрещают сбор информации с сайта без согласия с правилами Reddit, запрещающими использовать контент Reddit для обучения ИИ без явного согласия Reddit. Как сообщает 404 Media, использование "site:reddit.com" в поисковиках, не связанных с Google, включая Bing, DuckDuckGo и Mojeek, приводит к минимальным или отсутствию результатов Reddit за последнюю неделю. Ars Technica провел поиск по этим и другим поисковикам и может подтвердить эти выводы. Например, Brave иногда выдает несколько результатов Reddit (например, здесь и здесь), но не столько, сколько появляется в Google при использовании идентичных запросов. Особо выделяется Kagi, это платный поисковик, который платит Google за часть своих поисковых индексов и все еще отображает недавние результаты Reddit. Как отмечает 404 Media, файл robots.txt Reddit блокирует боты от сбора информации с сайта. В этом файле также говорится: "Reddit верит в открытый Интернет, но не в злоупотребление общедоступным контентом". Reddit одобрил сборщиков от Internet Archive и некоторых исследовательских учреждений.