- コラム
チャットボットを導入したあと、「利用されているから順調」「問い合わせが減ったから成功」と感じることはあります。しかし、利用回数だけでは、本当に自己解決につながったのか、有人対応の負担が変わったのか、次にどこを改善すべきかまでは分かりません。
効果測定で大切なのは、たくさんの数字を追うことではなく、導入目的に合わせて見る数字を決め、同じ条件で比べることです。この記事では、チャットボットのKPIを決める順番と、結果を改善につなげる考え方を、初めて運用を担当する方にも分かるように整理します。
先に決めるべきなのは指標ではなく、改善したい業務や利用者体験です。
たとえば、電話やメールの問い合わせを減らしたいのか、営業時間外にも必要な案内を届けたいのか、社内の「どこに聞けばよいか」を減らしたいのかで、見るべき数字は変わります。目的が曖昧なまま利用数だけを追うと、利用が増えた理由も、改善の優先順位も判断しにくくなります。
最初に「対象となる質問」「利用者」「困っている状態」「人が対応する例外」を一枚に整理しましょう。導入前に確認したい項目は生成AIチャットボット導入前に確認したい3つの準備でも解説しています。目的と対象範囲が決まれば、KPIはその目的を確かめるための観測値として選べます。
KPIは「利用」「解決」「業務」「次の行動」の4つに分けると、選びやすくなります。
利用を見るなら、利用者数、質問数、よく聞かれるテーマを確認します。解決を見るなら、チャットボットだけで案内が完了した割合、有人対応へ引き継いだ割合、回答後に同じ質問が繰り返されたかを確認します。業務の負担を減らす目的なら、問い合わせ件数、対応時間、担当者が確認・更新に使う時間を、導入前後で比べます。
Webサイト上の案内が目的の場合は、回答後に資料ページや問い合わせページへ進んだかも確認材料になります。ただし、すべての企業で同じKPIや目標値が正解になるわけではありません。自社で継続して取れるデータだけを選び、定義を担当者間でそろえることが重要です。
比較する期間・質問範囲・流入経路が違うと、数字の差だけでは効果を判断できません。
繁忙期だけを導入前とし、閑散期だけを導入後にすると、問い合わせ数の変化が季節要因なのかチャットボットによるものなのか分かりません。できるだけ近い期間、同じ問い合わせ対象、同じ案内経路で比較しましょう。キャンペーン、料金改定、サイト改修など大きな変更があった場合は、その事実も記録しておきます。
数値は「前月より増えた・減った」で終わらせず、分子と分母を確認します。たとえば自己解決を測るなら、何を自己解決と数えたのか、対象となる問い合わせ総数は何かを事前に決めます。小さな変化を過大評価せず、一定の期間で傾向を見ます。
測定の目的は評価表を作ることではなく、次に改善する質問や導線を見つけることです。
回答できなかった質問、すぐ有人対応になった質問、同じ言い換えが繰り返される質問には、情報不足や質問の表現、案内先の分かりにくさといった改善の手がかりがあります。ログは個人情報や顧客情報の扱いに注意しながら、テーマごとに分類すると確認しやすくなります。
問い合わせから潜在的なニーズを読み取る方法は、チャットボットは顧客の本音が集まる場所で詳しく紹介しています。数値の変化と質問内容の両方を見ると、「回答を追加する」「既存情報を直す」「有人対応へつなぐ条件を変える」といった具体的な次の一手に落とし込みやすくなります。
毎日すべてを判定するのではなく、日次は異常確認、週次・月次は改善判断と役割を分けると続けやすくなります。
日次では、計測が止まっていないか、急な問い合わせ増加や回答不備がないかを確認します。週次では、よく見られた質問と解決しにくいテーマを振り返り、FAQや案内文の改善候補を決めます。月次では、導入目的に対する変化をまとめ、対象範囲を広げるか、運用方法を見直すかを判断します。
変更した内容、変更日、比較する指標を残しておくと、何が数字に影響した可能性があるかを後から確認できます。チャットボットを定着させるための見直し方は、チャットボットが使われない理由とは？定着させるために見直した3つのことも参考にしてください。
チャットボットの効果測定では、利用数だけで成功を決めず、改善したい目的に対応するKPIを選ぶことが出発点です。導入前後を近い条件で比べ、数値と質問ログを組み合わせて見ることで、次に直すべき情報や導線が見えてきます。
自社の情報を活用したチャットボット導入や、問い合わせ対応の進め方を検討したい方は、chabee®の公式サイトで機能や導入方法をご確認ください。