top of page

人間に見えるエージェントを標的とするResemble AI Agent Detection

1 時間前
読了時間: 18分

Resemble AIは10月29日、人間の訪問者を装ってウェブサイトを利用するAIエージェントを対象としたAgent Detectionを公開した。Resemble AI Agent Detectionが扱うのは難しい区別だ。自動化された訪問者は正当な顧客を代理している可能性がある一方、その顧客のアカウントがどのように操作されているかを隠している場合もある。自動化を識別すればウェブサイトはその活動を把握できるが、その活動を許可すべきかどうかまでは判断できない。

この緊張関係こそ、この発表を通常のボット遮断製品の投入とは異なるものにしている。AIエージェント、すなわち目標に向けて行動を選択するソフトウェアは、商品を閲覧し、フォームを入力し、他者に代わって購入を試みることができる。ウェブサイトは、その委任を受け入れるのか、特定の行動を制限するのか、あるいはセッションを拒否するのかを決めなければならない。

CloudflareとHUMAN Securityはすでにエージェントトラフィックを識別・測定する手法を提供しており、Resembleには既存の競合企業と補完的な技術が存在する。Resembleの具体的な主張は、自動化を偽装するエージェントに関するものだ。同社が公表した結果は注目に値するが、人間のトラフィックで判明した誤りにも同等の重みを置く必要がある。

Resemble AI Agent Detectionは遮断判断の前にラベルを付与する

この製品が直ちにもたらす変化は、自動化された訪問への可視性であり、アクセスを自動的に拒否する判断ではない。

Resembleは公開時の分析で、社内テストにより偽装されたエージェント訪問の少なくとも98.8%を特定したと述べている。同社によれば、比較対象となった6つのツールは、このカテゴリーで3.1%から14.8%を特定した。

これらの数値はベンダーが実施したベンチマークを示すものであり、ウェブ全体で独立して確立された性能ではない。比較にはCloudflare Turnstile、BotD、F5、Google reCAPTCHA、Akamai、Vercel BotIDが含まれた。Resembleによれば、自動化が認識可能な痕跡を残した場合には、すべてが良好に機能した。

同社の最も強い結果は、あらゆる種類の自動化トラフィックではなく、隠蔽された自動化に関するものだから、この違いは重要だ。明白なスクリプトをすでに捕捉しているサイトには、追加の検出器が既存の制御では見逃す意味のある活動を見つけるという証拠が必要になる。

同じ発表では、デフォルト設定における誤検知率、すなわち人間の訪問をエージェントと誤ってラベル付けする割合が約5%から6%であるとも報告している。エージェントのみを対象とした比較では、この誤りは測定されていない。Resembleはまた、12と8のウェブサイトスタックの両方に言及しており、ベンチマークの範囲を一貫しない形で説明している。

これらの開示は、読者が導ける結論を限定する。この公開は特定の検出手法を調査することを支持する。しかし、ウェブサイトが返されたすべての分類を信頼すべきことや、現在の防御を置き換えるべきことを立証するものではない。

企業にとっては、観測専用の導入がこうした問いを切り分けられる。サイトが通常どおり運用を続ける一方で、検出器は訪問にラベルを付与できる。その後、担当者は疑わしいエージェントが認識可能な顧客導線に従うか、または確認済みの不正行為と相関するかを調べられる。

この取り組みはシステム間の判断の不一致も明らかにする。既存のセキュリティサービスは受け入れるセッションを、新しい検出器が自動化されたものとしてラベル付けするかもしれない。どちらの判断も、それだけで訪問者が何かを購入しようとしているのか、情報を取得しようとしているのか、アカウントを悪用しようとしているのかを説明するものではない。

したがって有用な変化は、ウェブサイトのトラフィック理解に新たなカテゴリーが加わることだ。ソフトウェアが実行していても、以前から許容されていた活動は許容され続けられる。人間がブラウザを操作しているように見えても、以前から疑わしい活動には引き続き調査が必要だ。

Resembleの発表は、この区別を商業的な提案の中心に据えている。エージェントを検出すると、ウェブサイトが活用できる情報が生まれる。その価値は、運営者がその情報から責任を持って何を推論できるかに左右される。

顧客アクセスは検出をビジネス上の判断に変える

圧力を受けるのは、不正を防ぎながら顧客が作業を完了できるようにする責任を負うチームである。

例として、あるチェックアウトセッションを考えてみよう。顧客がアシスタントに、承認済みの予算内で交換用のオフィスモニターを探し、注文を完了するよう依頼する。その結果生じるブラウザ活動は自動化されているが、購入は依然として本物の需要を表している可能性がある。

次に、攻撃者が自動化を使って盗まれたアカウント認証情報を試すケースを考える。どちらのセッションでも、ナビゲーション、入力、使い慣れたフォームとの繰り返しの操作が行われる可能性がある。検出器が同じ大まかなエージェントラベルを付けたとしても、ビジネス上の意味は異なる。

AIエージェントの識別がポリシーの問題になるのはここだ。セキュリティ担当者には疑わしい行動に関する証拠が必要である。コマース担当者は顧客に取引を完了してもらう必要がある。サポート担当者には、アシスタントが予期しない制限に遭遇したと報告された際の説明が必要になる。

一律の拒否ルールは、正当な自動アクセスを犠牲にして分類の問題を解決する。無制限に受け入れるルールはアクセスを維持する一方で、機微な行動をさらされたままにする。どちらの対応も、追加された情報を慎重に活用しているとは言えない。

より擁護しやすい区別は、そのセッションが何を試みるかに関するものだ。公開の商品説明を読むことは、アカウントの復旧用メールアドレスを変更することとは異なる結果をもたらす。同じ訪問者でも、こうした行動ごとに異なる要件に直面するのは合理的である。

この分析は小売以外にも当てはまる。職場のアシスタントは、参考資料を集めたり、サービスリクエストを送信したり、共有レコードを更新したりするかもしれない。作業を委任する本人が同じでも、それぞれの行動には固有の結果が伴う。

ナレッジワーカーにとって実務上の懸念は、継続性である。情報の収集には成功しても送信に失敗するアシスタントは、不完全なワークフローを残す。ユーザーは、どの行動が実行され、どの行動がなお注意を必要とするのかを知る必要がある。

そのため、検出と並んで追跡可能性も有用になる。検索可能なナレッジベースを維持するチームは、中断されたワークフローを見直す際に、ソース資料と判断を保存できる。これらの記録は、誰がブラウザを制御していたかを判断することとは別の目的に役立つ。

したがってエンタープライズの購入者は、トラフィック分類と取引の説明責任を区別すべきである。検出器は自動化に関する証拠に寄与できる。しかし分類だけでは、顧客の指示の範囲を確立したり、誤った行動の責任を確定したりすることはできない。

組織上の課題は、対応の責任者を割り当てることにある。セキュリティ部門がアクセスルールを変更する場合、コマース部門とサポート部門はその結果を理解する必要がある。そうでなければ、技術的に成功した検出が、誰も解決の準備をしていない顧客問題を生み出しかねない。

Resembleの機会は、この対話をより具体的にすることにある。測定されたエージェントカテゴリーは、チームに調査対象を与える。同時に、実際にどの自動化された顧客活動を支援するつもりなのかを説明するよう促す。

ブラウザのアイデンティティでは不十分な場合、行動が証拠を提供する

Resembleの技術的な提案は、ブラウザが通常のアイデンティティを提示していても、操作パターンが自動化を明らかにするというものだ。

製品の基盤となるモデルであるRAD-S1は、行動分析と追加のブラウザシグナルを組み合わせる。Resembleの行動検出モデルは、技術説明によれば、移動、クリック、スクロール、入力のパターンを検査する。

同社は、約25 KBの収集スクリプトが1.2秒ごとにバッチを送信すると説明している。初回のチェックは、およそ5回の操作または50回のポインター移動の後に行われる。スコアリングはResembleのサーバー上で実行される。

Resembleは、サーバーチェックの応答時間の中央値が約120ミリ秒で、95%が200ミリ秒以内に応答すると報告している。これらの数値は証拠収集後の個別チェックに関するものだ。ページ到着から利用可能な分類に至るまでの総時間として解釈すべきではない。

この時間差は、結果が重要な行動において意味を持つ。ウェブサイトは、訪問者がフォームを送信する前に証拠が常に届くとは想定できない。アクセスポリシーには、分類がまだ利用できない期間を考慮する必要がある。

RAD-S1 detectionは、ウェブサイトが訪問者について行う主張の種類も変える。ブラウザのアイデンティティは、クライアントが自らを何として提示しているかを説明する。行動分類は、それを操作しているように見える主体がどのような種類かを推定する。

どちらのカテゴリーも意図を確立するものではない。人間らしい行動は不正なセッションに伴うことがあり、目に見えて自動化された行動は正当な購入に伴うことがある。ウェブサイトは、こうした問いを分けて扱うことで、調査のより強い基盤を得られる。

独立研究は、Resembleの具体的な結果を検証するものではないが、複数のシグナルを調査することを支持している。6月のプレプリントで、Iliana Fayolleらはネットワーク、リクエスト、ブラウザの証拠を用いて6つのウェブエージェントを研究した。彼らの多層フィンガープリンティング研究では、一部のエージェントは評価対象の防御を回避したものの、組み合わせたシグナルを通じて依然として識別可能であることが示された。

研究者らは、ステルス技術が時に検出可能性を高めることも見出した。この発見は、偽装されたブラウザが従来の検査では見えなくなるという単純な主張を複雑にする。隠蔽は馴染みのある手がかりを消す一方で、別の手がかりを生む可能性がある。

このため購入者には、自社のトラフィックで手法を比較する理由がある。重要な問いは、行動の証拠がすでに利用可能なシグナルを超えて有用な情報を加えるかどうかだ。大きな単独の検出スコアは、その追加的な問いには答えない。

同じ論理は、競合プラットフォーム全体に関する結論も制限する。名前を挙げたチャレンジまたは検出製品とのベンチマークは、テストされた構成を評価する。それは、そのサプライヤーが別の場所で提供するすべての能力を自動的に説明するものではない。

開発者にとって、この仕組みは証拠収集と保護対象の行動との間に依存関係を生む。受動的な閲覧では、訪問者を観察する時間が残される。セッションの開始直後に行われる機微な行動では、別の問題が生じる。

より広い意味では、ブラウザの見た目はアクセスを決める不完全な基盤になっている。Resembleは別の証拠源を提案する。購入者はなお、その証拠がいつ届くのか、どの程度一貫して役立つのか、どのような判断を支えられるのかを確立する必要がある。

宣言されたアイデンティティと行動検出は異なる問題を解決する

競争上の分岐点は、ウェブサイトが自動化を歓迎するかどうかではなく、アイデンティティと許可をどのように確立するかにある。

Cloudflareは、暗号署名を用いて自動化されたリクエストを認証する手法であるWeb Bot Authを文書化している。暗号署名は、リクエストが特定の署名鍵の保有者から来たことを検証可能な形で示す証拠を提供する。

この手法は、宣言された自動化を扱う。協力的なクライアントに対し、編集可能なブラウザ説明より強い証拠を通じて自らを識別する方法を与える。行動検出が扱うのは異なる状況だ。すなわち、訪問者が信頼できる識別情報を提供しない場合である。

これらのアプローチは相互に補完し得ます。ウェブサイトは、申告されたエージェントの発信元を検証すると同時に、そのセッションが許容範囲内で振る舞っているかを別途確認できます。また、検証済みのIDを提示しない自動化についても調査できます。

認証後にも、権限に関する問題は残ります。どのサービスがリクエストを送ったかを知っても、顧客が要求されたすべての操作を承認したことにはなりません。ウェブサイトは、認証されたサービスが当該アカウントで何を実行できるかを別途判断する必要があります。

これがAIエージェント識別の根本的な限界です。発信元、自動化、顧客の同意、許可された操作は、関連しながらも異なる事実を表します。それらを「信頼できる/できない」という単一のラベルに集約すると、実際の判断に必要な証拠が見えにくくなります。

HUMAN Securityは、agentic visibilityを通じて市場にアプローチし、分類とエージェントのジャーニー測定を重視しています。同社の資料では、人間、ボット、エージェントによるエンゲージメントの識別や、自動化されたジャーニーがどこでコンバージョンまたは停止するかが説明されています。

この位置付けは、トラフィック理解をめぐるResembleの事業上の主張と重なります。また、エージェントの可視化が、単純なブロック分類をすでに超えていることも示しています。ベンダー各社は、ウェブサイトが自動化された顧客活動をどう解釈するべきかをめぐって競争しています。

公開されている製品説明だけでは、これらの企業間の中立的な性能順位は確立されません。各社が掲げる能力、導入状況、評価方法は異なります。購入者は、あるベンダーの主張を別のベンダーに対する結論として扱う前に、条件を揃えた証拠を必要とします。

したがって、エンタープライズ向けの比較は、未解決の課題から始めるべきです。協調するエージェントの認識に苦慮するサイトは、隠蔽された自動化を調査するサイトとは異なるギャップに直面します。支援された購入を測定しようとするサイトには、また別の課題があります。

この違いは、成功の定義にも影響します。ID検証の改善は、操作者に関する不確実性を低減できます。行動検知の改善は、隠された制御を明らかにできます。ジャーニー測定の改善は、正当な自動化された顧客がなぜタスクを放棄するのかを説明できます。

Resembleは、エージェントアクセス問題全体の所有権を主張するのではなく、特定の行動上の主張を掲げてこの市場に参入しています。その機会が最も大きいのは、この証拠が観測可能なギャップを埋める場面です。その後の判断においても、既存のIDおよび権限システムは引き続き重要です。

顧客にとって望ましい結果は、予測可能な委任です。アシスタントは対応している場所では自身を識別し、理解しやすい制約を受け、何が起きたかを明確に報告すべきです。検知は、その予測可能な体験に寄与するときに有用になります。

誤検知と最終判定が限界を定める

検知器の有用性は、見出しとなるベンチマークの範囲外の誤りも含め、その誤りがもたらす結果に左右されます。

Resembleのintegration documentationでは、人間、エージェント、レビューの判定について説明されています。また、十分なインタラクションがない訪問は、判定なしで終了する場合があるとされています。したがって、証拠の欠如は、訪問者が人間であるという証拠とは区別すべきです。

同ドキュメントによれば、判定が確定すると、その訪問に対する収集は停止します。これは、後から制御主体が変わるセッションについての評価上の問いを提起します。購入者は、製品のセッション境界と最終分類が、人間からエージェントへの引き継ぎとどのように作用するかを確認すべきです。

この問いは脆弱性を示すものでも、同社のテストに反するものでもありません。重要な顧客ジャーニー全体で初期分類に依存する前に、明確な説明に値する挙動を特定するものです。

Resembleはまた、意図的な攻撃者がブラウザ提供のシグナルを偽造できると警告しています。同社のドキュメントは、このシステムを助言的なものとして位置付けています。この留保は、返された分類を決定的な証明として解釈することに明示的な境界を設けています。

プライバシーも別の境界を導入します。Resembleは、入力されたテキストではなく主要なカテゴリーを記録し、訪問者のIPアドレスを保存前にハッシュ化し、選択したイベントストリームを保持すると述べています。これらは独立したプライバシー評価ではなく、同社による収集慣行の説明です。

購入者は依然として、導入の目的と保持に関する選択を理解する必要があります。行動データは、メッセージ内容を除外しているからといって、プライバシーとの関係がなくなるわけではありません。組織は、何を収集し、なぜ必要とするのかを評価すべきです。

顧客向けの判断では、公開された人間に関するエラー率に特に注意を払う必要があります。誤った分析ラベルはレポートを歪める可能性があります。同じ誤ラベルが自動的なアカウント制限に結び付くと、必要な作業を完了できなくなる人が生じる可能性があります。

これが、適合率の評価が重要である理由です。適合率は、フラグ付けされたセッションのうち、実際にフラグ付け対象のカテゴリーに属するものがどれだけあるかを測定します。これは、検知器が実際のエージェントセッションをどれだけ捉えるかを測定する再現率とは異なります。

エージェントトラフィックの比率は、これらの指標の関係に影響します。人間の訪問がエージェントの訪問を大きく上回る場合、人間に対する誤りがレビューキューの大半を占める可能性があります。検知器は大半のエージェントを捉えつつも、大幅な確認を要するラベルを生成する場合があります。

この観察から、導入時の推定が自動的に導かれるわけではありません。購入者には、自らのトラフィック分布と、独立して確立されたラベルが必要です。要点は、エージェントの捕捉率が高いだけでは、施行に伴う作業量や顧客への影響を予測できないことです。

カバレッジも重要です。インタラクションの多いセッションだけを分類する検知器は、大半の訪問を評価する検知器とは異なるギャップを残します。レポートでは、未分類トラフィックを分母から黙って除外するのではなく、可視化すべきです。

アクセシビリティについても、意図的な評価が必要です。購入者は、サポートされている入力方法と、顧客行動における通常の変動をテストすべきです。レビューした情報源は特定のアクセシビリティ障害を確立していませんが、こうした条件下での性能も確定していません。

これらの問いにより、RAD-S1検知は単一の割合をめぐる競争ではなく、運用上の評価となります。有用な閾値は、実行する操作、利用可能な裏付け証拠、判断を誤るコストに依存します。

検証、顧客成果、委任アクセスを注視する

次に必要な証拠は、Resembleのラベルが実際の顧客条件下で意思決定を改善するかを示すものです。

最初に注視すべきシグナルは、人間とエージェントの双方を含む再現可能な評価です。テストした構成、エラー率、未分類の訪問、これまで見られなかった自動化に対する性能を開示すべきです。より大きな見出し上のスコアよりも、比較可能な条件の方が重要です。

そのような評価で、条件を揃えたテストにおいても優位性が維持されれば、ローンチにおける競争上の主張は強化されます。新しい条件下で大幅に低下すれば、この主張はモデルが有用な結果を示した環境に限定されることになります。

独立したテストでは、検知速度と意思決定カバレッジも区別すべきです。十分な活動の後に素早く応答できても、すべての機微な操作の前に分類が完了するとは限りません。購入者には、実際のワークフローのタイミングに合致する証拠が必要です。

2つ目のシグナルは、顧客成果の報告です。有用な導入では、エージェントトラフィックへのラベル付けが、完了したタスク、中断、サポートへの問い合わせ、確認済みの不正利用を運用者が理解するうえで役立つかを示すべきです。検知件数だけでは、事業価値を確立できません。

制限を導入する前に、観察のみのロールアウトによってこうした関係を調査できます。運用者は不一致を調べ、疑わしいエラーをレビューし、追加の証拠が判断を改善する操作を特定できます。得られた知見に基づいて、施行を拡大するかを決めるべきです。

不必要な顧客中断を生まずに有害な取引が減少したという証拠は、導入の根拠を強めます。一方、サポートへの苦情の増加や説明のつかない離脱は、根本の検知器が引き続きエージェントを捕捉していたとしても、選択した対応方針に疑問を投げかけます。

3つ目のシグナルは、ウェブサイトとエージェントプロバイダー間でより明確な委任アクセスが実現することです。検証済みの発信元は問題の一部に対処します。明示的かつ限定的な顧客の許可は、別の部分に対処します。進展には、識別されたエージェントに何を許可するかをウェブサイトが伝えることが求められます。

これは、すべてのウェブサイトが同じ商業的取り決めを採用することを意味しません。アシスタントのIDと権限をより明確に区別することを意味します。ある商品を調査してほしいという顧客の依頼は、無制限のアカウントアクセスを意味するべきではありません。

協力が進めば、より少ない正当なエージェントが、サポートされたタスクを完了するために通常の人間トラフィックに似せる必要がなくなります。行動検知は、未申告または欺瞞的な活動を調査する役割を保ちます。その役割は、より具体的で評価しやすいものになります。

Resemble AI Agent Detectionは、隠されたブラウザ自動化を測定可能なカテゴリーとして扱うことで、この議論に具体的な貢献をしています。現時点の証拠は、このアプローチを検討することを支持しつつ、そのベンチマークの限界と公開された人間に関する誤りを視野に入れるべきことも示しています。

エージェントのアカウントやビジネスワークフローへのアクセスを拡大する前に、ウェブサイトが実際に何を認識しているかを問いましょう。操作者、顧客の許可、それともインタラクションが自動化されているように見えるという事実だけを認識しているのでしょうか。依頼したタスクの記録を保持し、アシスタントが何を完了したかを確認してください。このローンチを評価する購入者は、人間に関するエラーや未決定の訪問を含め、自らのトラフィックに似た証拠を求めるべきです。有用な結果とは、その影響に見合う証拠に裏付けられた、アクセスに関するより明確な判断です。組織がすでにソフトウェアに委任しているワークフローでは、その判断のどの部分が未解決のままであり、次の制限が発効する前に誰がそれをレビューするのでしょうか。

 
 

無料で始めましょう

ローカルファーストのパーソナル知識管理付きAIアシスタント

より良いAI体験のために、

remio は現在、 Windows 10+ (x64)とM-Chip Mac のみをサポートしています。

仕事のAIパートナー
remioでもっと仕事が進む

計画・作成・仕上げまで
すべてをひとつに

bottom of page