RSS クラウドフレア ブログ フォロー Perplexityは、ウェブサイトのクロール禁止指示を回避するために、ステルスかつ非公開のクローラーを使用しています。 Perplexityは、ウェブサイトが明示的に表明したクロール拒否の意思に直接反して、クローラーの活動を隠蔽するために、ユーザーエージェントを繰り返し変更し、IPアドレスやASNを変更しています。 Perplexity is using stealth, undeclared crawlers to evade website no-crawl directives blog.cloudflare.com AI and ML News on Bluesky @ai-news.at.thenote.app bsky.app