エージェント分析

ユーザーが質問応答エンジンに質問をすると、エンジンは回答を構築するための情報を見つける必要があります。そのために、AIクローラーと呼ばれる特殊なボットを送り出し、ウェブページを読み取ります。これには、ChatGPT用のGPTBot、Claude用のClaudeBot、PerplexityBot、GoogleのAIモデル用のGoogle-Extendedなどが含まれます。

あなたのウェブサイトのrobots.txtファイルは最初のゲートキーパーです。このファイルは、どのボットにサイトのどの部分へのアクセスを許可するかを指示します。AIクローラーのrobots.txtチェックとは、このファイルを監査し、どのボットを歓迎し、どのボットをブロックしているかを確認するプロセスです。これは、AI検索における技術的SEOの基礎的な要素です。重要なページがブロックされていると、それらは読み取られず、AI回答の引用として表示されることはありません。

従来のSEOは、10個の青いリンクリストでの順位付けに焦点を当てていました。AI検索、またはアンサーエンジン最適化はこれとは異なります。その目標は、生成された単一の段落の中で、数少ない引用元の一つになることです。検索エンジンは選択的であり、クローラーが読み取りを許可されたページのみを引用します。

AIクローラーを許可することは、最初の、絶対条件となるステップです。GPTBotがあなたのブログにアクセスできなければ、ChatGPTはそこから学習できません。Google-Extendedがブロックされていれば、あなたのコンテンツはGoogle AI Overviewsから見えなくなります。このチェックはトラフィック量ではなく、資格に関するものです。あなたは、AI回答が書かれる競技場へのチケットを確認しているのです。

Agent Analyticsは、/dashboard/crawlersにあり、AI検索に特化した技術的なレポートを提供します。AIボットが行うのと同じ方法で、外部からサイトを読み取ることで機能します。robots.txtや設定されているllms.txtファイルを確認し、その結果を報告します。

画面は3つのエリアに分かれています。「AIクローラーの可視性」では、GPTBotやClaudeBotなどの既知のAIボットの一覧を表示し、現在のルールがそれらを許可しているか否かを明確に示します。「クローラビリティ」は、ページの取得をシミュレートし、応答時間、ブロックされたリソース、JavaScriptなしでのページのレンダリング状況を報告し、コンテンツが読み取れなくなる可能性のある問題点を強調します。「コンテンツパフォーマンストラッキング」は、AI関連サービスによってインデックスされているページを表示し、ウェブ上であなたのサイトに向けられたアンカーテキストに関するデータを収集します。

マーケターにとって、これは診断と監視のツールです。典型的なワークフローは監査から始まります。Agent Analyticsを開き、AIクローラーの可視性リストを確認します。新製品ローンチサイトの場合、主要なランディングページやドキュメントページで全ての主要ボットが許可されているかチェックします。

次に、クローラビリティレポートを使用します。自社の主力サービスの説明ページなど、優先度の高いページに絞り込みます。ボットがページを正しくレンダリングできない原因となる、ブロックされたCSSやJavaScriptファイルに関する警告がないか確認します。コード内でそれらの問題を修正します。最後に、コンテンツパフォーマンスを毎週チェックします。AIサービスに拾われ始めたことを示す「インデックス済み」リストに新たに追加されたページを探し、アンカーテキストレポートを確認して、他のサイトがあなたのブランドへのリンクをどのように説明しているかを把握します。

GPTBotのステータスが緑色の「許可済み」であることは、あなたのrobots.txtがそれを許可していることを意味します。これは、GPTBotが訪問したことや、あなたのコンテンツが引用されることを意味しません。単に扉が開いているだけです。クローラビリティレポートにおける遅い応答時間は直接的な問題です。ボットには時間制限があり、応答の遅いページは放棄される可能性があります。

「インデックス対象範囲」の指標は、システムが認識しているページを示します。この数値の増加は、AIからの可視性が高まっているというポジティブなシグナルです。アンカーテキストレポートは、ブランドの認知度を理解するのに役立ちます。他社があなたへのリンクに使用する文言が「ソフトウェアツール」から「AIマーケティングプラットフォーム」へと変化することは、市場の認識が変化していることを反映しています。これらは先行指標であり、トラフィックや引用の保証ではないことを覚えておいてください。

制限事項を明確に述べることが重要です。Agent Analyticsは公開インターネットからあなたのサイトを読み取ります。サーバーログを取り込むことはありません。サーバーログを取り込めば、どのボットがいつ、何を取得したのかを正確に把握できます。そのレベルの詳細は実装されていません。

また、この機能はあなたのサイトを他サイトと比較してベンチマークすることもできません。クローラビリティが80パーセンタイルにあると言うには、比較可能な多数のサイト群を測定対象とする必要があります。当社はそのような母集団を持っておらず、誤解を招くようなパーセンタイルを提示するよりも、何も表示しないことを選びます。

無料プランには、最大3つの質問と3ページの保存済みスナップショットが含まれます。カード不要。有効期限なし。 Lite $29/月 · Growth $99/月 · Agency $249/月 (USD).

Growth: 50件の質問 · 40件の共有ドラフトおよびエージェントクレジット/月 · $99/月 (USD)。