支援内容・進め方
LLMOの効果はどのように測定しますか?
AIチャットに対して定期的にプロンプト(質問)を投げ、回答内容の変化をモニタリングします。
具体的には、以下のような観点で測定します。
- 自社名で質問したときの回答内容の正確性
- 競合との比較質問での言及のされ方
- サービス・製品に関する回答の好意度
- ネガティブな情報が回答に含まれるか
ChatGPT、Claude、Geminiなど複数のAIサービスで測定を行います。AIサービスによって回答内容が異なることもあるためです。
ただし、LLMOの効果測定はまだ確立された手法がありません。AIの学習サイクルも不透明な部分が多く、施策から効果が出るまでのタイムラグも読みにくいのが現状です。
そのため、効果測定は「傾向を把握する」という位置づけで、SEOのようなKPI管理とは異なるアプローチが必要です。