• 正確性
  • エンゲージメント
  • 指標
  • 有人対応

AIでチャットボットの会話ログを監査する方法 Stammer.ai MCPコネクター

Stammer.aiをエージェントに一度接続するだけ。AIがログとパフォーマンスデータを取得し、ボットの改善すべきポイントを自動で見つけ出します。

このページについてAIに聞く

すぐに答え

AIを使ってどのように会話を監査できますか?

AIがStammer.aiを利用して、最新のチャットログとパフォーマンス指標を取得します。ボットの回答が脱線した箇所や、ユーザーとのやり取りが途切れたポイントを特定。ボットの正確性や改善が必要な箇所を明確に把握できます。

監査結果の分類

分析結果の出力内容

AIは分析結果を以下の4つの領域に分類します。

正確性

ハルシネーションの特定

チャットログとボットの設定を照合します。事実と異なる回答や、設定されたキャラクターから逸脱した応答をフラグ立てします。

エンゲージメント

離脱ポイントの検出

ユーザーの反応が止まったパターンを分析します。会話の流れがどこで途切れているかを可視化します。

指標

パフォーマンスデータの確認

特定のエンゲージメント統計を取得します。ボットが時間の経過とともにどのように機能しているかの要約を提供します。

有人対応

手動レビューの指示

AIが修正不可能な重大なエラーを見つけた場合、その会話をマークします。その後、ボットのロジックをどう調整するかを判断できます。

ワークフロー

監査リクエストを受けた際のAIの動き

AIはデータアナリストとして機能し、生のログを取得して実行可能なインサイトへと変換します。

  1. チャット履歴の取得

    最新の会話スレッドを取得し、ユーザーがボットとどのようにやり取りしているかを確認します。

    list_messages
  2. ボット設定の解析

    現在の設定を確認し、ボットが意図されている動作や制約条件を理解します。

    get_chatbot
  3. エラーの検出

    ログとボットの設定を比較することで、ボットが指示から逸脱した箇所を特定します。

    list_messages
  4. 分析結果の要約

    検出されたエラーやエンゲージメントの欠落をまとめ、確認用のレポートを作成します。

    get_chatbot

試してみる

以下のプロンプトをコピーして開始

これらのプロンプトを使って監査を開始できます。

出発点

これらは開始用の文章です。必要に応じてボット名や期間を書き換えて使用してください。

Stammer.ai Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_BsbZsjHXqS8Vr6BKOBbHzHsxhDI7cNJHmrTctkZ7/mcp

Claude Desktop

以下の手順で数秒で接続できます。

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Stammer.ai capabilities are ready to use.
設定 · claude_desktop_config.jsonコピー
{
  "mcpServers": {
    "stammerai-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_BsbZsjHXqS8Vr6BKOBbHzHsxhDI7cNJHmrTctkZ7/mcp"
    }
  }
}
チャットにコピー04
  • SupportBotの最新のメッセージを50件取得して、回答の正確性を確認してください。

  • 過去24時間におけるSalesBotのパフォーマンス指標を取得してください。

  • FAQBotの最近のチャットログを分析し、ユーザーが不満を感じている箇所を教えてください。

  • OnboardingBotの設定を確認し、最近のチャット履歴と比較してください。

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

ここから始める

Stammer.aiを一度接続すれば、あとは指示するだけです。

リンクをクリックして接続してください。ログイン情報は暗号化され、接続後は使い慣れたAIクライアントからすぐに監査を開始できます。

Stammer.aiをAIに接続する

FAQ

機能の詳細

  • 01

    AIがチャットボットの設定を変更することはありますか?

    いいえ。AIはボットの振る舞いを理解するために設定を読み取ることはできますが、設定を書き換えることはできません。

  • 02

    AIが古いチャットログを削除することはありますか?

    いいえ。AIには監査目的でメッセージを読み取ったり一覧表示したりする権限しかありません。

  • 03

    AIはどのくらい最近のデータまで見ることができますか?

    list_messagesツールを通じて取得可能な、最新のメッセージであれば取得できます。

  • 04

    AIがユーザーに代わって返信することはありますか?

    いいえ。このタスクは監査と分析専用です。AIがお客様へメッセージを送信することはありません。

  • 05

    特定のユーザーを指定して監査することはできますか?

    はい。プロンプトの中で特定のコンテキストやメッセージIDを指定していただければ可能です。

  • Stammer.aiについてさらに詳しく知りたいですか? Stammer.ai MCPコネクターの全機能を見る

『Stammer.ai』を Claude、Cursor、ChatGPT などに接続