Search Engine Journal 한국어 팔로우 OpenAI, ChatGPT의 Fetch Bot에는 robots.txt가 적용되지 않을 수 있다고 밝혀 새로운 데이터에 따르면 ChatGPT의 페이지 가져오기 봇이 접근을 금지한 사이트에 도달하고 있으며, OpenAI 자체 문서에서도 해당 파일이 이를 막지 못하는 이유를 설명하고 있습니다. OpenAI Says Robots.txt May Not Apply To ChatGPT’s Fetch Bot searchenginejournal.com Search Engine Journal 한국어 RSS thenote.app