AIを活用してモデルのフィードバックを自動化する方法

エージェントがDify.AI SDKを使用し、ユーザーが評価やコメントを行った瞬間にフィードバックを送信します。これにより、RLHFやモデルチューニングのための直接的なパイプラインが構築されます。チャット画面からDifyのダッシュボードへデータが流れる仕組みを確認してください。

1. 01

   入力のキャプチャ

   エージェントは、ユーザーによる「高評価」の操作や、回答に対するテキストによる指摘などの信号を検知します。

   submit_feedback
2. 02

   評価の処理

   エージェントは、ユーザーの評価とそれに関連する会話IDを構造化されたデータに変換します。

   submit_feedback
3. 03

   Difyへの送信

   エージェントは、指定されたツールを使用して、整形されたフィードバックをDifyワークスペースへ直接送信します。

   submit_feedback
4. 04

   完了の確認

   エージェントは送信が成功したかを確認し、必要に応じてユーザーにフィードバックを受け付けたことを通知します。

   submit_feedback

Dify.AI Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_esFwQvD1BTqmueeHwIOlGHPDJ8Oq0FzvLe2J4jkV/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Dify.AI capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "difyai-sdk-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_esFwQvD1BTqmueeHwIOlGHPDJ8Oq0FzvLe2J4jkV/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

一度接続するだけで、エージェントとDify APIが連携します。詳細な設定手順はコネクターのページで確認できます。

• 01

  送信したフィードバックをAIが削除することはできますか？

  いいえ。このツールはDifyへ新しいフィードバックを送信することのみを許可しています。

• 02

  どの評価が重要かをAIが判断しますか？

  いいえ。AIはユーザーが提供したフィードバックをそのまま送信するだけです。チューニングに利用するデータは、Dify上で人間が確認して判断する必要があります。

• 03

  特定のメッセージIDに対してフィードバックを送ることはできますか？

  はい。特定のやり取りに対してフィードバックを送信するよう、エージェントに指示することが可能です。

• 04

  これを実行すると、モデルは自動的に再学習されますか？

  いいえ。このツールはデータをDifyに転送するだけです。学習やチューニングのプロセス自体は、ご自身で開始する必要があります。

• 05

  ユーザーの入力なしに、エージェントがフィードバックを送信することはありますか？

  いいえ。送信ツールを起動するには、ユーザーによる評価またはコメントが必要です。

• Dify.AI SDKについて他に質問がありますか？ Dify.AI SDK コネクターの全機能を見る