AIでテストエラーとコードのバグを正確に判別する方法

エージェントがログの出力結果とテストスイートで定義された期待値を比較します。コードのロジックに欠陥があるのか、あるいはアサーション自体が間違っているのかを特定するため、修正すべき箇所が明確になります。

1. 01

   ログの取り込み

   エージェントが生の失敗ログと関連するソースファイルを読み込み、状況を把握します。

   diagnose_test_failure
2. 02

   パターン照合

   エラーメッセージを、既知のアサーションミスやエンジン欠陥のパターンと照合します。

   diagnose_test_failure
3. 03

   ロジック検証

   実行パスを追跡し、コードが意図したロジックから実際に逸脱しているかを確認します。

   diagnose_test_failure
4. 04

   判定の提示

   問題がバグなのか、テストエラーなのか、あるいは環境による一時的なものなのかを最終判断します。

   diagnose_test_failure

QA Arbiter Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_X69TXPHsdjAfNffcyFTnx1dWNUhv3RVHL0mSZM7p/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — QA Arbiter capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "qa-arbiter-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_X69TXPHsdjAfNffcyFTnx1dWNUhv3RVHL0mSZM7p/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

ワンクリックでMCPをクライアントに接続できます。認証情報は暗号化されるため、すぐにデバッグを開始できます。

• 01

  AIがコードを修正してくれることはありますか？

  いいえ。AIは問題がバグなのかアサーションのミスなのかを特定しますが、実際の修正コードの記述とコミットはユーザーが行う必要があります。

• 02

  コードベース全体にアクセスしますか？

  いいえ。指定された失敗を診断するために必要なファイルとログのみを読み取ります。

• 03

  AI自身でテストを実行することはできますか？

  いいえ。このMCPは既存の失敗データを分析するためのものであり、新しいテストを実行するためのものではありません。

• 04

  テストファイルが削除されることはありますか？

  いいえ。AIの権限は、診断を行うためのログおよびコードの読み取りのみに制限されています。

• 05

  テストの失敗が間欠的（再現性が低い）な場合はどうなりますか？

  AIはログからパターンを見つけようと試みますが、一貫した原因が見つからない場合は、ユーザーによる手動レビューが必要であると通知します。

• QA Arbiterについて他に質問がありますか？ QA Arbiter Connectorの全機能を見る