問い合わせが減らないとき、最初に見るのはどこですか?
最初に見るのは回答ログです。利用がそもそも少ないのか、使われているが解決していないのかを分けます。この2つは原因も直し方も違います。
ログを見ずに設置場所を変えたり、回答を増やしたりすると、効いたかどうかが分かりません。
利用が少ない場合と解決しない場合の見分け方
判定は会話の開始件数から始めます。
| ログの状態 | 想定される原因 | 直す対象 |
|---|---|---|
| 会話の開始が少ない | 気づかれていない、選ばれていない | 設置場所と表示の条件 |
| 開始は多いが途中で離脱 | 回答が質問に合っていない | 回答範囲と文面 |
| 回答後に電話が来る | 解決まで到達していない | 回答の具体度と次の導線 |
3つが同時に起きている場合もあります。その場合は上から順に直します。設置の問題を残したまま回答を増やしても、見てもらえる数が増えません。
切り分けに必要な3つの数値
次の3つを同じ期間で取り出します。
- 会話の開始件数(目安15分)。つまずきやすい点は、表示回数と開始件数を混同することです。表示されただけの数では、選ばれたかが分かりません。
- 回答できなかった質問の件数と内容(目安30分)。つまずきやすい点は、件数だけを見て内容を読まないことです。直す優先順位は内容から決まります。
- 電話とメールの問い合わせ件数(目安30分)。つまずきやすい点は、導入後しか数えていないことです。導入前の件数がないと比較ができません。
実装の立場で付け加えると、管理画面の集計期間の初期値が短い製品があります。先月だけを見て判断すると、季節の影響を分離できません。期間を揃えて取り出してください。
各原因の直し方は、次の見出しから順に扱います。
そもそも使われていない原因は何ですか?
設置場所と起動の条件が合っていないことが多い原因です。問い合わせ先の電話番号と並んで置かれていない場合、読者はチャットボットを選びません。
導入の目的が効率化に置かれている点も関係します。総務省「令和7年版情報通信白書」では、生成AIの活用による自社への影響として日本で最も多く挙げられたのは「業務効率化や人員不足の解消につながる」で32.8%でした(出典: 総務省「令和7年版情報通信白書」第1部第1章第2節 図表Ⅰ-1-2-16、https://www.soumu.go.jp/johotsusintokei/whitepaper/ja/r07/pdf/n1120000.pdf)。効率化を期待して入れても、読者に選ばれなければ件数は動きません。
設置ページと表示のタイミング
見るのは、どのページに出ているかと、いつ出るかの2点です。
| 確認する箇所 | よくある状態 | 直し方 |
|---|---|---|
| 設置ページ | トップページだけに出ている | 料金ページとよくある質問にも出す |
| 表示の条件 | 読み込み直後に自動で開く | 一定の滞在またはスクロール後に出す |
| 閉じた後の挙動 | 一度閉じると再表示されない | 小さいアイコンとして残す |
| スマートフォン | 画面下部の他の要素と重なる | 重なりを避けて配置する |
実装の立場で注意が必要なのは、読み込み直後に自動で開く設定です。本文を読む前に閉じられると、そのまま電話に流れます。
電話とメールの導線との関係
電話番号のそばにチャットボットが無いと、使われません。次の順で直します。
- 問い合わせ導線の棚卸しをする(目安1時間)。つまずきやすい点は、ヘッダの電話番号を忘れることです。固定ヘッダの番号が最も押されます。
- 電話番号の近くに案内文を置く(目安30分)。つまずきやすい点は、「チャットで質問」だけの表記です。答えられる内容を1行添えると選ばれます。
- 営業時間外の表示を変える(目安1時間)。つまずきやすい点は、時間外も電話番号だけを出し続けることです。時間外はチャットボットを前に出します。
費用への懸念も、設置後の調整が止まる背景にあります。同白書の生成AI導入に際しての懸念事項では、「ランニングコストが掛かる」が24.9%、「初期コストが掛かる」が22.1%でした(出典: 総務省「令和7年版情報通信白書」第1部第1章第2節 図表Ⅰ-1-2-15、https://www.soumu.go.jp/johotsusintokei/whitepaper/ja/r07/pdf/n1120000.pdf)。導入時に運用の工数を見積もっていないと、設置したまま調整されない状態になります。
使われているのに解決しない原因は何ですか?
回答範囲が実際の問い合わせ内容と一致していないことが原因です。ログに出ている質問と、用意した回答のずれを見ます。
この状態は、導入時に回答範囲を決めきれていない場合に起こります。総務省「令和7年版情報通信白書」の生成AI導入に際しての懸念事項では、「効果的な活用方法がわからない」が30.1%で最も多い回答でした(出典: 総務省「令和7年版情報通信白書」第1部第1章第2節 図表Ⅰ-1-2-15、https://www.soumu.go.jp/johotsusintokei/whitepaper/ja/r07/pdf/n1120000.pdf)。使い方の設計が定まらないまま設置すると、回答範囲が実際の質問とずれます。
ログに出る質問と用意した回答のずれ
ずれは3つの型に分かれます。
| ずれの型 | ログに出る様子 | 直す内容 |
|---|---|---|
| 想定外の質問 | 回答できなかった質問に集まる | 回答を新しく追加する |
| 言い回しの違い | 近い質問に別の回答が返る | 表現の揺れを登録する |
| 粒度が粗い | 回答は返るが追加の質問が続く | 条件別に回答を分ける |
最も多いのは粒度の問題です。「料金はいくらですか」に対して「案件により変動します」と返すと、読者はそのまま電話をかけます。条件別の目安まで示すと、そこで止まります。
回答範囲外へ誘導する設計の有無
答えられない質問を放置すると、読者は離脱します。次の順で整えます。
- 回答できない質問の受け止め方を決める(目安30分)。つまずきやすい点は、「分かりません」で終える文面です。次に取る行動を必ず示します。
- フォームへの受け渡しを用意する(目安2時間)。つまずきやすい点は、入力済みの内容が引き継がれないことです。入力し直しが発生すると離脱します。
- 有人対応への切り替え条件を決める(目安1時間)。つまずきやすい点は、営業時間内でも切り替え先が無い状態です。
実装の立場では、回答の粒度を上げるほど更新の手間が増えます。件数の多い質問だけを細かくし、件数の少ない質問はフォームへ渡す設計が現実的です。改善の着手順は次の見出しで扱います。
改善は何から着手しますか?
件数の多い質問から順に回答を直します。少ない工数で解決率が動くためです。回答の総数を増やすことから始めると、手間が増えるだけで件数は変わりません。
件数順に直す手順
ログから上位の質問を取り出して進めます。
- 回答できなかった質問を件数順に並べる(目安30分)。つまずきやすい点は、言い回しの違う質問を別物として数えることです。同じ意図はまとめて数えます。
- 上位5件の回答を作る(目安3時間)。つまずきやすい点は、1件ずつ完璧にしようとすることです。まず全部に回答を置き、精度は次の周で上げます。
- 2週間後に同じ集計を取り直す(目安30分)。つまずきやすい点は、期間の長さを変えてしまうことです。前回と同じ日数で比較します。
- 上位が入れ替わっていれば次の5件に進む(目安3時間)。つまずきやすい点は、入れ替わっていないのに次へ進むことです。入れ替わらない場合は回答の粒度が足りていません。
当社のAIチャットボット導入では、業種別に応答を最適化し、24時間の一次対応を実現しています。業種によって質問の型が異なるため、上位の質問を押さえると残りの質問も近い型に収まります。この性質があるため、件数順の改善が効きやすくなります。
1回の改善でどこまで変えるか
同時に多くを変えると、何が効いたか分かりません。
| 1回で変える範囲 | 変えてよいもの | 同時に変えないもの |
|---|---|---|
| 回答の中身 | 上位5件までの文面 | 設置場所や表示条件 |
| 表現の揺れ | 同じ意図の言い回しの登録 | 回答の分岐の構造 |
| 導線 | 回答後の次の行動の示し方 | フォームの項目 |
設置場所と回答の両方を同時に変えると、会話の開始件数が増えた理由を切り分けられません。先に設置を直し、数値が落ち着いてから回答に入ります。
実装の立場で注意が必要なのは、表現の揺れの登録です。登録を増やすと、別の意図の質問にも同じ回答が返るようになります。追加した後は、既に正しく答えられていた質問が崩れていないかを確認してください。