ホテルのLLMO効果測定──AI検索の引用をどう測り、何をもって成果とするか

「で、効果は出てるのか」。支配人のこの一言に、あなたはその場で数字を返せませんでした。LLMO（AI検索最適化）を始めて2か月、施策は動いているのに、成果を説明する言葉がまだ手元にありません。

必要なのは、来月から何をどの頻度で記録するかを1つ決めることです。効果測定は「AIに引用されたか」の一択ではありません。引用の有無・引用のされ方・AI経由の流入・予約への接続という4つの指標を、エンジンごとに固定した質問文で定点観測し、月次で残します。LLMOの基本から確認したい場合は、先にホテルのAI検索対策とはを読んでおくと位置づけがつかめます。

AI検索の回答は、同じ質問でも毎回わずかに揺れます。モデルが更新されると、推薦される施設が入れ替わることもあります。だからこそ、単発の結果に一喜一憂せず、質問文と頻度を固定して傾向で読む。これが測定設計の芯になります。

測る指標を4つに分ける──引用・流入・予約を混ぜない

効果測定がぼやける原因は、本来別々の4つの指標を「効果」の一語に丸めているためです。「AIに載ったか」だけを見ていると、名前は出るのに流入がない、流入はあるのに予約につながらない、という切り分けができません。次の4つを別々に定義します。

この4つは、どれも別々の指標で、しかも順番に依存しています。引用されなければ流入は生まれず、流入がなければ予約にもつながりません。だから上流の「引用」から順に埋めていきます。

「引用のされ方」まで記録する理由

「名前が出た／出ない」の二択だけでは足りません。AIは回答の中で複数の施設を並べ、順番と添える一言で推す度合いを変えます。1番目に理由つきで挙げられるのと、3施設の最後に名前だけ添えられるのとでは、読者が予約に動く確率がまったく違うためです。さらに、古い料金や誤った設備情報とセットで引用されることもあります。並び順・文脈・情報の正誤まで記録して初めて、次に直す場所が見えます。ChatGPTがどの条件で引用先を選ぶかは、ChatGPTが引用を選ぶ条件にまとめています。

エンジン別の測定手順──質問文と頻度を固定する

AI検索の回答は揺れます。同じ質問を同じAIに投げても、言い回しや挙がる施設が毎回少しずつ変わります。ここで毎月違う聞き方をすると、前月と比べられません。比較できる数字を残すために、質問文・エンジン・頻度の3つを固定します。

固定する3つ

• 質問文: 指名（施設名）1本と、一般ワード（エリア＋ニーズ）2本の計3本。指名は「認識されているか」、一般ワードは「知らない人に見つかるか」を測る、別々の問いです
• エンジン: ChatGPT・Gemini・Perplexityの3つ。ChatGPTで出てもGeminiでは出ないことは珍しくないため、1つに絞りません
• 頻度: 月1回、毎月第1営業日。質問文3本×3エンジンで9パターンを同じ日に回し、同じ日付軸で並べます

聞き方の例文

次の3本をそのまま使えます。施設名・エリア・ニーズを自館のものに置き換えてください。

指名: 「〇〇（施設名）はどんな宿ですか。特徴と客層を教えてください」
一般ワード1: 「〇〇温泉で露天風呂のある宿を3つ、選んだ理由つきで教えてください」
一般ワード2: 「△△駅の近くで、出張向けの朝食付きホテルを教えてください」

会話を深掘りする追加質問はしません。1問1回答で揃え、返ってきた回答本文をそのままコピーして、日付とエンジン名をつけて保存します。画面の写真よりも本文テキストのほうが、後から検索も比較もできます。

月次で残す記録の型

記録が続かないのは、項目が多すぎるためです。1行に1観測、9パターンで9行を1枚の表に積むだけにします。次の列を用意します。

引用の列と、流入・予約の列は別々に埋めます。毎月すべてが埋まらなくても構いません。まだ観測できていない項目は、それらしい数字で埋めず、空欄のまま「未観測」と残します。空欄も「まだそこは測れていない」という事実の記録です。

何をもって成果とし、どう報告するか

成果を最後の1つの数字に丸めないでください。引用・流入・予約は別々に育つため、段階に分けて報告します。

上への報告の型

支配人に渡すのは、次の3行を月次で並べた表です。

• 引用に入った回数（前月比）
• AI経由のセッション数（前月比、下限値）
• そこからの予約・問い合わせ件数

グラフは傾向を見せるもの、数字は判断の根拠になるもので、役割が違います。報告では前月との差で語ります。ただし、1回名前が出たことを「定着した」と書かないでください。AI回答は揺れるため、複数回の観測でならした「傾向」と明記します。数字の確からしさまで添えるほうが、次の質問に強くなります。

GA4だけでは全部は追えない──限界と、測れる範囲

AI経由の流入は、GA4で完全には追えません。理由は参照元の出方にあります。ChatGPTのアプリ経由やGoogleのAI Overview経由は、参照元が空になったり、通常のGoogle検索と同じ値になったりします。GA4は参照元が空の流入を「direct」に分類するため、AI経由の一部が直接流入や通常検索に紛れます。ここから導かれる結論は1つ、「AI経由の流入」は実数ではなく下限値として読むということです。

それでも測れる範囲はあります。参照元がchatgpt.com・gemini.google.com・perplexity.aiとして残る分は、GA4の集客レポートで識別できます。この分だけでも月次で並べれば、増減の傾向はつかめます。AI流入をツール別・国別・デバイス別に分解する詳細手順はAI流入ダッシュボード仕様書に、GA4そのものの初期設定はホテルのGoogleアナリティクス設定ガイドにまとめています。

引用側にも限界があります。回答は揺れ、モデル更新で推薦施設が入れ替わります。だから単発の結果を成果と読み違えないよう、固定した質問文で複数回観測し、傾向で判断します。流入は下限値、引用は傾向。この2つの性質を添えて報告すれば、「で、効果は？」に対して、確実に言える範囲と、まだ言えない範囲を分けて答えられます。

来月やることは1つです。指名1本と一般ワード2本の質問文を決め、ChatGPT・Gemini・Perplexityで第1営業日に回し、9行の記録を始めてください。最初の基準値を取れば、次に支配人へ渡す数字が手元に残ります。初回の現状把握だけを外部に任せる方法もあります。