Perplexity、ウェブサイトのブロックを回避するために「ステルス」クローラーを使用とCloudflareが指摘
AIスタートアップのPerplexityが、ウェブサイトのクローリング制限を回避するために、実際のChromeブラウザとして偽装した未宣言のクローラーを使用しているとCloudflareが報告しました。
最新の更新
AIスタートアップのPerplexityは、公式のボットがアクセスを拒否されたウェブサイトからコンテンツを取得するために、未宣言のウェブクローラーを使用していると、Cloudflareが月曜日に公開した報告書で述べています。Perplexityの公式クローラーがrobots.txtによる制限やネットワークブロックに遭遇すると、同社はmacOS上で動作する「Chrome/124.0.0.0 Safari/537.36」というユーザーエージェントを偽装したMozillaのクローラーに切り替えて、制限を回避しているとのことです。
この行為は、特定のウェブサイトがそのボットのアクセスをブロックすることを意図して設定した制限を回避するために行われており、今後さらに議論を呼びそうです。
好きかもしれない
- アップル、iPhone向けに人間の目のようなダイナミックレンジを持つカスタムイメージセンサーを開発中
- テスラ、イーロン・マスクCEO維持のため290億ドルの報酬パッケージを提案
- Apple、iOS 26ベータ版でLiquid Glassデザインを再調整
- iOS 26、新しいロック画面デザイン「リキッドグラス」を搭載
- DeepMindのAlphaGenome AIがDNAの「ダークマター」を解明
- 衛星データと地域の知識を活用したアラスカの雪の監視強化
- FTC、MicrosoftのActivision Blizzard買収案件を取り下げ
- マイクロソフト、モバイルデバイス向けにXbox Copilotのテストを開始