計測・監視基礎

PR-245 複数の担当者が同じ指標を見ているのに、微妙に定義が違って数字が合わない——指標定義書(メトリクス・ディクショナリー)をAIと一緒に作る方法

Claude

こんな悩みはありませんか？

「言及率」「可視性スコア」といった指標を複数の担当者がそれぞれの理解で計算していて、報告のたびに数字が微妙に食い違う——ということはないでしょうか。誰かに直接聞かないと正確な定義が分からない状態のまま、なんとなく運用が続いていることも少なくありません。

この記事でできるようになること

現在使っている指標名と各担当者の認識をもとに、全員が同じ定義を参照できる指標定義書（メトリクス・ディクショナリー）のたたき台を作れるようになります。

使うプロンプト

入力に必要な素材

現在使っている指標名の一覧（言及率・引用率・可視性スコア・SoV等、思いつく範囲で）
各指標について、担当者ごとに認識している定義・計算方法（バラバラなままでよい）

【役割】
【使用AI】Claude
あなたはAIO指標の定義を整理する担当です。「言及率」「可視性スコア」等の指標を複数の担当者がそれぞれの理解で計算していて、報告のたびに数字が食い違う担当者を支援してください。

【入力情報の確認】
使われている指標名が1件も貼り付けられていない場合は処理を進めず、先に入力を求めてください。担当者間で定義が異なる場合も統一しようとせず、そのまま両方貼り付けるよう案内してください。

# 使われている指標名と、担当者ごとの認識
【指標名ごとに、分かっている範囲の定義・計算方法を貼り付ける。担当者によって違う場合はそのまま両方貼り付けてよい】

【作業手順】
1. 指標ごとに「定義（何を測っているか）」「計算方法（分かる範囲で）」「計測頻度（分かる範囲で）」を1行にまとめる
2. 担当者間で定義が割れている指標があれば、それぞれの認識を併記し「定義が割れています」と明記する
3. 一般的にどう定義されることが多いかの参考情報があれば、あくまで「一般的な考え方の一例」として補足する（自社の正式な定義として断定しない）
4. 貼り付けられていない指標について定義を創作しない
5. 出力前に、定義が割れている指標を「どちらかが正しい」と勝手に決めていないか自己点検する

【出力形式】
指標名｜定義｜計算方法｜計測頻度｜定義が割れているか（Yes/No）、の表にしてください。

【品質ガード】
- 貼り付けられていない指標について定義を創作しないでください。
- どの定義を採用するかの最終判断は人間が行う旨を出力の末尾に明記してください。

実行手順

社内で使われている指標名を思いつく限り洗い出す（言及率・引用率・可視性スコア・SoV等）
各指標について、担当者ごとの認識・計算方法をヒアリングし、統一しようとせずそのまま貼り付ける
プロンプトを実行し、指標定義書のたたき台を作成する
「定義が割れています」と指摘された指標について、どちらの定義を正とするか会議で決定する
決定した定義書を、計測担当者全員がアクセスできる場所に常設保存し、更新ルールを決める

結果の読み解き方

AIが提示する「一般的な定義」はあくまで参考情報であり、自社の目的に照らして最適とは限りません。最終的にどの定義を採用するかは、事業として何を測りたいかを踏まえて人間が決定してください。「定義が割れています」の件数が多い指標ほど、社内で最優先に議論すべき指標だと判断できます。

注意点

指標の定義を統一しても、過去に集計したデータまで遡って修正されるわけではありません。定義変更前後のデータを単純比較すると、実態とは異なる傾向（急な悪化・改善に見える等）を招く可能性があります。定義を変更した日付を必ず記録し、比較する際は「定義変更前」「定義変更後」を区別してください。

確認テスト

選択肢をクリックすると、その場で正誤と解説が表示されます。

Q1. 指標の定義を変更した場合、定義変更前後のデータを単純比較すると実態とは異なる傾向に見える可能性があるため、変更日を記録し区別して比較する必要がある。

Q2. 担当者間で定義が割れている指標にはどう対応するよう指示されているか。

Q3. AIが提示する「一般的な定義」の扱いとして正しいものはどれか。

よくある質問

Q. 「定義が割れています」の件数が多い指標は何を示すか。

社内で最優先に議論すべき指標だと判断できる。

Q. 定義書はどこに保存し、どう運用すべきか。

計測担当者全員がアクセスできる場所に常設保存し、更新ルールを決める。

Q. 貼り付けられていない指標について、プロンプトはどう対応するよう指示しているか。

貼り付けられていない指標について定義を創作しないよう指示している。