- 品質
- トーン
- ユーザー
- 有人対応
すぐに答え
チャットボットの会話をどのように監査できますか?
AIがChatflyから最新のチャットログや特定のメッセージ履歴を取得します。取得したデータに基づき、エラーの特定、ユーザー感情の要約、ボットの定型回答のフラグ立てなどをAIに指示できます。
監査による成果
得られるインサイト
このタスクを実行することで、ボットの実際のパフォーマンスに関する具体的な知見が得られます。
品質
ボットの誤回答を特定
AIがメッセージログをスキャンし、ボットのハルシネーション(もっともらしい嘘)や誤った回答を見つけ出します。修正すべき具体的な失敗箇所がリストアップされます。
トーン
ブランドボイスの確認
ボットの話し方をAIがレビューします。ブランドイメージに合わないトーンや、一貫性のない表現を検知します。
ユーザー
ユーザーの離脱ポイントを特定
ユーザーが不満を感じたり、行き詰まったりしているパターンをAIが分析します。会話がどこで破綻しているのかを正確に把握できます。
有人対応
有人介入が必要なケースを抽出
人間のスタッフによる対応が必要なチャットをAIが判別します。解決に至らなかった会話を明確に特定できます。
ワークフロー
監査開始時にAIが行うプロセス
AIはChatflyのツールを使用して、分析に必要なデータを取得します。
会話リストの取得
まずAIが最新のやり取りのリストを取得し、監査の対象範囲を把握します。
list_fly_conversations特定ログの抽出
対象となるチャットを特定した後、AIはそれらのセッションの全メッセージ履歴を読み込みます。
get_conversation_historyやり取りの分析
AIがテキスト内容を精査し、パターン、エラー、またはトーンの問題を見つけ出します。
get_conversation_history分析結果のレポート
AIが結果を要約し、特に注意が必要なメッセージをハイライトして報告します。
get_conversation_history
試してみる
以下のプロンプトをコピーして開始
Chatflyとの接続が完了したら、これらのプロンプトを活用してください。
出発点
これらは開始用のテンプレートです。必要に応じて会話IDや期間を書き換えて使用してください。
CHATFLY Connector
準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。
https://edge.vinkius.com/vk_preview_g5Jpcnhe3wKDzdOk7FPTVWgbtYJ0bn7BpbvqugJz/mcpClaude Desktop
以下の手順で数秒で接続できます。
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — CHATFLY capabilities are ready to use.
{
"mcpServers": {
"chatfly-mcp": {
"url": "https://edge.vinkius.com/vk_preview_g5Jpcnhe3wKDzdOk7FPTVWgbtYJ0bn7BpbvqugJz/mcp"
}
}
}最新のChatflyの会話リストを表示し、問題がありそうなものがあるか教えてください。
会話ID 12345 の履歴を取得し、ボットの対応が丁寧だったか確認してください。
Chatflyの直近10件の会話をレビューし、ボットが誤った情報を提供した箇所を見つけてください。
サポートボットの会話履歴を確認し、ユーザーからの主な不満点を要約してください。
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
ここから始める
一度接続すれば、あとはAIに聞くだけです
リンクをクリックしてアカウントを連携してください。認証情報は暗号化されて保護されます。連携後は、お使いのAIクライアントですぐに監査を開始できます。
ChatflyをAIに接続するFAQ
監査の動作について
- 01
AIがChatfly上のボットの回答を書き換えることはできますか?
いいえ。AIができるのは会話データの読み取りのみです。Chatfly内のメッセージを編集または削除することはできません。
- 02
先月の会話を監査することは可能ですか?
はい。Chatflyの履歴にデータが残っており、AIが取得可能な状態であれば可能です。
- 03
AIはボットの誤回答を自動的に修正しますか?
いいえ。AIはエラーを特定して報告しますが、ボットの設定を更新するのはユーザー自身で行う必要があります。
- 04
AIはチャット内のユーザーの個人情報を見ることができますか?
AIはChatflyから提供された会話履歴に含まれるすべての内容を参照します。
- 05
AIに不適切な会話を削除するよう指示できますか?
いいえ。このMCPは会話リストの取得と履歴の取得を行うためのツールのみを提供しており、データを削除する権限は持っていません。
CHATFLYについてさらに詳しく知りたいですか? CHATFLY MCPコネクターの全機能を見る
『CHATFLY』を Claude、Cursor、ChatGPT などに接続
