Google의 John Mueller는 작년에 Cloudflare가 발명한 새로운 Content Signals robots.txt directive가 "어떤 크롤러나 LLM에도 전혀 영향을 미치지 않는다"고 말했습니다. 그는 또한 "robots.txt 파일에 불필요한 내용만 추가하고 향후 유지보수를 어렵게 할 뿐"이라고 덧붙였습니다. 그가 아는 한, 어떤 크롤러나 LLM도 content-signal robots.txt directive를 사용하지 않는다고 그는 말했습니다.