LLMOチェキの計測方法
指標の定義と95%信頼区間
AIの回答は、同じ質問でも実行のたびに変わります。LLMOチェキは1回の結果ではなく、 同じ質問を複数回くり返した結果を割合と信頼区間で記録することで、 「たまたま出た・出なかった」と「本当の変化」を区別できるようにしています。 このページでは、その指標の定義と計算方法を説明します。
1. 指標の定義
| 指標 | 定義 |
|---|---|
| 露出率（言及率） | 成功した計測ショットのうち、AIの回答テキストに追跡ブランド名（自社の会社名・サービス名）が登場したショットの割合。 |
| 首位獲得率 | 成功した計測ショットのうち、回答に登場したブランドの中で自社が最初（言及順位1位）に言及されたショットの割合。 |
| 引用率（サイクル集計） | 成功した計測ショットのうち、AIの回答に引用ソース（参照URL）が付与されたショットの割合。 |
| シェア型引用率 | AI回答が引用したURL全体のうち、自社ドメインのURLが占める割合（自社引用URL数 ÷ 全引用URL数）。引用ソース分析画面で使用します。 |
※「ショット」は、1つの質問（プロンプト）を1つのAIエンジンに1回実行することを指します。
2. 分母の扱いと欠測時のルール
- 割合の分母は「成功したショット数」です。エンジン側のエラーなどで結果を取得できなかったショット（欠測）は、分母に含めません。欠測を「出なかった（0%）」として扱うことはありません。
- 計画したショット数の過半数が欠測になったサイクルは「計測不能」として記録し、割合を算出しません。
- 日別の系列は、その日の成功ショットを合算した分子・分母から算出します。7日移動平均は、窓内の有効な日が4日未満の場合は表示しません。
3. 95%信頼区間（Wilsonスコア区間）
割合にはWilsonスコア95%信頼区間（z=1.96）を併記します。 計測回数が少ない場合（n=3〜10）でも区間が0〜100%の範囲に収まり、 正規近似よりも小標本に適した方法です。
p̂ = k / n（k: 該当ショット数、n: 成功ショット数）
denom = 1 + z²/n
center = (p̂ + z²/2n) / denom
margin = (z/denom) × √( p̂(1−p̂)/n + z²/4n² )
区間 = [ center − margin, center + margin ]（0〜1にクリップ）
denom = 1 + z²/n
center = (p̂ + z²/2n) / denom
margin = (z/denom) × √( p̂(1−p̂)/n + z²/4n² )
区間 = [ center − margin, center + margin ]（0〜1にクリップ）
例：10回中4回で言及された場合
露出率 = 4/10 = 40%、95%信頼区間は約17〜69%（16.8〜68.7%）になります。 Wilson区間は40%を中心にした左右対称の幅にはなりません。 次の計測で例えば60%が出ても区間の内側なので、「誤差の範囲」と判断できます。
露出率 = 4/10 = 40%、95%信頼区間は約17〜69%（16.8〜68.7%）になります。 Wilson区間は40%を中心にした左右対称の幅にはなりません。 次の計測で例えば60%が出ても区間の内側なので、「誤差の範囲」と判断できます。
※ 2つの計測の信頼区間が重ならない場合に、有意な変化の可能性があると判定します。
4. 計測の実行条件
- 対応AIエンジンは8種類（ChatGPT・Gemini・Claude・Perplexity・Grok・Google AIモード・Google AI Overview・Copilot）です。プランにより計測対象は異なります（料金・提供条件）。
- 定期のn回計測では、Web検索（グラウンディング）付きの実行はサイクルの初回ショットのみで、2回目以降は検索なしで言及を計測します。オンデマンド計測（n=10）は全ショットで検索を実行します。
- 登録した質問は毎日自動で計測されます。日次の系列と、サイクル確定時の値は別々に記録されます。
5. 観測値と推定値の区別
- 観測値: 露出率・首位獲得率・引用率・信頼区間など、実際のAI回答から算出した値。
- 推定値: 検索需要量やCTR・ゼロクリック率の推定など、モデルや外部データに基づく参考値。管理画面・レポートでは推定値である旨を明記します。
- 施策の前後で数値が動いた場合も、信頼区間が重なる範囲の変動は「誤差の可能性がある」として扱い、施策効果と断定しません。
本ページは計測エンジンの実装仕様（2026年9月7日時点）に基づいています。仕様を変更した場合は本ページも更新します。