コンテンツにスキップ
Radineer

AI活用

AIO対策の効果測定で、当社が実際にはまった5つの落とし穴(2026年11月)

Radineer編集部読了 5分

この記事の内容

AIO対策の効果測定で、当社が実際にはまった5つの落とし穴(2026年11月)

AIO対策の効果は、AIに質問して自社の名前が出るか、サイトが引用されるかで測るのが基本です。

当社は2026年8月から、自社サイトについてAIに毎週質問をして記録してきました。

その中で、測り方を間違えると「効果が出た」「効果が落ちた」と誤って読んでしまう場面に何度も出会いました。

実際の記録から5つを紹介します。

1. 失敗した計測を「被引用0%」として記録していた

2026年8月22日と23日の計測で、自社サイト5つの被引用率がそろって0%になりました。

前週は60%のサイトもあったので、一斉に引用されなくなったように見えました。

実際には、AIを呼び出す道具の認証が切れていて、回答の代わりに「認証に失敗しました」という文が返っていました。

当社の計測はこれを回答として受け取り、どのサイトも引用されていない、と記録していたのです。

外から分かった手がかりは所要時間だけでした。

正常な週は1サイトあたり60〜170秒かかっていたのに、この週は12〜16秒で終わっていました。

測った数字が急に変わったときは、まず回答の中身と所要時間を見ます。

いまは、短い失敗の文を回答として数えないようにしています。

2. 同じ時期に、複数のサイトの数字がそろって動いた

当社が何も変えていなくても、数字が動くことがあります。

当社の記録では、自社サイト3つの1回答あたりの数字が次のように変わりました。

サイト9月19日9月26日10月31日11月14日
A(回答の文字数)2,4421,3581,2431,081
A(引用したサイトの数)8.79.88.23.6
B(回答の文字数)2,2701,2761,7291,150
B(引用したサイトの数)6.88.28.41.6
C(回答の文字数)1,8251,0541,320653
C(引用したサイトの数)7.97.39.02.2

9月19日から26日にかけて、回答の文字数が3つのサイトで同時にほぼ半分になりました。

11月14日には、1回答あたりの引用サイトが8〜9件から1〜4件に減り、この3サイトはそろって引用される問いが減りました。

この3サイトに、この時期に入れたAI向けの変更の記録はありません。

施策の前後で数字を比べるときは、同じ時期にほかのサイトや別の質問でも同じ動きが出ていないかを確かめます。

複数のサイトが同時に同じ向きに動いていたら、施策よりもAIの側の変化を先に疑います。

3. 毎週、質問を入れ替えていた

検索での表示回数が多い語から質問を作っていたため、サイトによっては毎週質問が入れ替わっていました。

あるサイトでは9週の質問の組み合わせがすべて違っていました。

これでは、数字が上がっても、施策の効果なのか、引用されやすい質問に入れ替わっただけなのかを区別できません。

前後を比べる質問は、施策の前に決めて固定します。

当社がいま公開で測っている12問も、11月13日に決めてから変えていません。

4. 保存した回答が途中で切れていた

当社のツールは、回答の本文を一定の文字数までしか保存していませんでした。

Geminiの回答は本文の途中にリンクのURLを長く埋め込むため、保存した範囲のほとんどがURLで埋まり、読める本文は400字ほどしか残っていませんでした。

名前が出たかの判定は保存前の全文で行っていたので影響を受けませんでしたが、どの会社が挙がったかの集計は、Geminiの分が少なく出ていました。

直した後に同じ質問で測り直すと、Geminiの1回答あたりに挙がった名前は0〜2件から6〜12件になりました。

いまはリンクのURLを外した本文を保存しています。

数え方を直した後の数字と直す前の数字は、混ぜて比べないようにしています。

5. AIからの訪問が、施策なしでも増えていた

当社サイトへのAI経由の訪問(ChatGPT・Gemini・Copilotなど)は、10月前半まで週16〜27回でした。

それが10月後半には、週45〜58回まで増えています。

この時期に当社が入れた変更は、地価データのページへの統計の追加でした。

そのページへの訪問を除いても、10月後半は週28回と50回で、ほかのページでも増えていました。

AIを使う人が増えれば、施策をしていないページへの訪問も増えます。

全体の前後だけを見ると、こうした増加を施策の効果と取り違えます。

施策をしたページと、していないページを同じ期間で比べる必要があります。

なお、Googleアナリティクスでは同じChatGPTからの訪問でも、流入元の表示が「chatgpt.com」と「openai」に分かれていました。

10月12日〜11月8日の4週では chatgpt.com が84回、openai が47回で、chatgpt.com だけを数えるとこの2つの合計の約36%を見落とします。

当社の測り方

この5つを踏まえて、いまは次の条件で測っています。

  • 質問は12問に固定し、施策の前に決める
  • Claude、ChatGPT、Gemini、GoogleのAIによる概要の4つに、毎週同じ条件で聞く
  • 名前が出たかと、サイトが引用されたかを分けて数える
  • 回答が得られなかった質問(GoogleのAIによる概要が表示されないなど)は分母から外す
  • AI経由の訪問は、流入元の表記の違いをまとめて数え、全体の増加と施策をしたページの増加を分けて見る

12問の結果は、11月13日の記録から公開しています。

https://radineer.asia/media/aio-company-ai-answer-record-2026-11

測りたい会社名と業種を入れると、同じ方法で4つのAIに聞ける無料のチェックも準備しています。

関連記事

Radineer編集部

執筆:Radineer編集部

デジタルマーケティング・AI活用の専門チーム

Radineer編集部は、SEO・LLMO・生成AI活用の専門家チームです。最新のデジタルマーケティングトレンドと実践的なノウハウを、わかりやすくお届けします。

AIツール1本、毎週火曜(無料)

中小企業向けAIツール1本の料金と向き不向き。創刊は11月11日(火)

生成AI研修・導入支援

AI活用でビジネスを変革しませんか?実践的なカリキュラムで、貴社の業務に最適化されたAI活用スキルを習得できます。

AI活用の記事

もっと見る →