不要屏蔽机器人。建造城门
大多数媒体公司正在阻止 AI 公司爬虫,视其为资源消耗,却未带来显著的人流。这种“要么阻止,要么不阻止”的二元做法对于 AI 整合这一复杂问题而言过于简单化。虽然阻止未经授权的抓取是必要的,但出版商应考虑允许特定类型的 AI 机器人,例如检索机器人,这类机器人可获取用户查询所需的信息。若无法出现在 AI 生成的答案中,则将权威让渡给竞争对手,因此出现在 AI 摘要中关乎确立权威,而非即时的流量增长。出版商应在允许 AI 发现其内容与保护其最有价值的资产之间取得平衡,并对访问设置更深入的参与要求。战略性地对待 AI 机器人意味着理解其不同功能,如训练、搜索和检索。检索机器人对于实时 AI 答案至关重要,通常影响较小,可通过速率限制或缓存内容进行管理。当前的市场转变并非主要关于用于模型训练的内容,而是关于许可内容以向用户提供即时答案。出版商可以通过构建机器可读且可通过受控渠道访问的内容,而不仅仅依赖许可协议。创建 AI 就绪的档案和受控检索层,使出版商能够从强势地位进行谈判。出版商不应仅采取阻止措施,而应建立带有明确规则的“网关”,区分用于发现的内容与用于访问的内容。通过管理元数据、摘要片段和访问控制,出版商可确保 AI 系统知晓其价值,同时不将其完全公开。最终目标是使内容对 AI 系统可读,却不使其免费,从而在 AI 需要提供答案时,将出版商定位为可信来源。