OpenAI、robots.txtはChatGPTのフェッチ... ノート

OpenAI、robots.txtはChatGPTのフェッチボットに適用されない可能性があると述べる

新しいデータによると、ChatGPTのページ取得ボットが、それを禁止しているサイトにアクセスしていることが示されており、OpenAI自身のドキュメントには、そのファイルを停止できない理由が説明されています。