「同業のあの会社は何点?」比べる前に知っておきたいこと
結論
条件がそろっていない点数どうしは、比べられません。AIの答えは、同じ質問でも毎回入れ替わるからです。 診断した日・聞いたAI・業種と地域の言い方が違えば、点の差は実力の差とは限りません。 比べるなら、同じ条件で何度か測った「傾向」どうしで比べてください。
根拠の強さ:●●●○ 第三者の調査・実測がある(この表示は、やる価値の確からしさであり、効果の保証ではありません。)/ 読了 3分/ 確認日 2026-10-06
「同業のあの会社は、何点だったんだろう」 点数が出ると、つい誰かと比べたくなりますよね。 でも、その点数は、同じ条件で測ったものでしょうか。
AIの答えは、毎回そろいません
英語圏の調査では、同じ質問を同じAIに60〜100回くり返しても、同じ並びが2回続けて出る確率は100回に1回未満でした。 調査した人たちは、「順位は測れないが、何度か聞いたときに名前が挙がる割合なら測れる」と書いています(「AIの答えは毎回変わる?」)。
比べる前に、そろえたい4つの条件
| 条件 | ずれていると… |
|---|---|
| 診断した日 | AIの答えが変わっている |
| 聞いたAI(どれを・いくつ) | 無料診断(1つのAI)と有料レポート(現在は準備中。3つのAI)は比べられない |
| 業種と地域の言い方 | 質問そのものが違う |
| 採点の版 | 点の付け方が違う |
比べるなら、こんなふうに
- 条件をそろえる:同じ日・同じAI・同じ業種と地域の言い方で
- 1回で決めない:何度か測って、傾向で見る
- 点の差より「何が違うか」を見る:文字で書いてある事実や、登録情報のそろい方など
他社の点数は「その会社の評価」ではありません
診断の結果は、その日にAIがどう答えたかの記録です。会社の良し悪しや信用を評価するものではありません。 他社の点数が低くても高くても、それをその会社の評価として受け取らないでください。
ことばのメモ
| よく見かける言葉 | この記事での言い方 |
|---|---|
| ベンチマーク | 他社との比べ方 |
| 再現性 | 何度測っても同じになるか |
関連記事
出典
- SparkToro/Gumshoe「AIs are highly inconsistent when recommending brands or products」(SparkToro/Gumshoe)
https://sparktoro.com/blog/new-research-ais-are-highly-inconsistent-when-recommending-brands-or-products-marketers-should-take-care-when-tracking-ai-visibility/ 確認日 2026-09-19
同じ質問を同じAIに繰り返しても、挙がる会社の顔ぶれは毎回そろわなかった、という調査
御社のサイトでは、どうなっているか。
URLと会社名を入れると、AIが御社をどう答えるかを無料で調べます(A4一枚・0円)。