RSS 搜索引擎杂志 关注 Google 解释为何 robots.txt 中禁止的 URL 仍可能被收录 搜索控制台报告有 51,000 个 URL 状态为“已索引，但被 robots.txt 阻止”，而 Google 表示这未必是个问题。 SEO and SMM News on Bluesky @seo.at.thenote.app bsky.app Google Explains Why URLs Blocked By Robots.txt Can Still Be Indexed searchenginejournal.com
