CloudflareのDisallow AI Trainingは、検索のために混合使用クローラーを利用可能に保ちます。GoogleとAppleはトレーニングのオプトアウトを尊重します。Bingのrobots.txtサポートは保留中です。