Не блокируйте ботов. Постройте... Заметка
RSS Fast Company

Не блокируйте ботов. Постройте ворота

Большинство медиакомпаний блокируют краулеры ИИ-компаний, рассматривая их как источник нагрузки на ресурсы, не приносящий значительного человеческого трафика. Такой бинарный подход "блокировать или не блокировать" слишком упрощен для сложной проблемы интеграции ИИ. Хотя блокировка несанкционированных скрейперов необходима, издателям следует рассмотреть возможность разрешения определенных типов ИИ-ботов, таких как поисковые боты, которые извлекают информацию для пользовательских запросов. Отсутствие в ответах, сгенерированных ИИ, означает уступку авторитета конкурентам, делая присутствие в сводках ИИ вопросом установления авторитета, а не немедленного получения трафика. Издателям следует найти баланс между разрешением ИИ обнаруживать их контент и защитой своих наиболее ценных активов, требуя более глубокого взаимодействия для доступа.Стратегическое отношение к ИИ-ботам означает понимание их различных функций, таких как обучение, поиск и извлечение. Поисковые боты, необходимые для ответов ИИ в реальном времени, как правило, оказывают незначительное влияние и могут управляться с помощью ограничений скорости или кэшированного контента. Текущий сдвиг на рынке касается не столько контента для обучения моделей, сколько лицензирования контента для предоставления пользователям немедленных ответов. Издатели могут сделать свой контент машиночитаемым и доступным через контролируемые каналы, а не полагаться исключительно на лицензионные соглашения.Создание архивов, готовых к работе с ИИ, и контролируемых уровней извлечения позволяет издателям вести переговоры с позиции силы. Вместо того чтобы просто блокировать, издателям следует создавать "ворота" с четкими правилами, различая контент для обнаружения и контент для доступа. Управляя метаданными, фрагментами и элементами управления доступом, издатели могут гарантировать, что ИИ осведомлен об их ценности, не отдавая ее полностью. Конечная цель — быть понятным для систем ИИ, не делая контент бесплатным, позиционируя издателей как надежные источники, когда ИИ необходимо предоставить ответы.
CdXz5zHNQW_tJ9V4iivjU.jpeg