• 自動化
  • 整理
  • 確認
  • 完了

AIを活用してモデル検証用データセットを自動作成する方法

Arize AIをエージェントに接続すれば、チャットでの指示だけで構造化された評価セットを作成できます。接続後は、必要なデータの詳細を伝えるだけです。

このページについてAIに聞く

すぐに答え

モデル評価用のデータセット作成を自動化するには?

作成したいデータセットの内容を自然な言葉で伝えるだけで、エージェントがArize AIを使用して構築します。手動でのデータ収集やアップロードの手間が省け、チャットを通じてすぐに使える検証セットが手に入ります。

実行結果

データの保存先

技術的な設定はエージェントがすべて行うため、あなたはテストに集中できます。

自動化

新しいデータセットの準備完了

AIがArize AI内に検証セットを直接構築します。ダッシュボードを操作することなく、新しいデータセットが作成されます。

整理

既存データの確認

エージェントが既存のデータセットを確認します。これにより、誤って同じセットを二重に作成してしまうのを防ぎます。

確認

内容のレビューと修正

品質を確保するために、データセットの内容をあなたが確認します。構造の構築はAIが行いますが、データの正当性はあなたが判断します。

完了

評価の開始

AIによる作成完了の報告後、データセットは即座に利用可能になります。すぐにモデルの評価を開始できます。

ワークフロー

データセットを依頼した際、AIが行うこと

エージェントはあなたの意図を解釈し、Arize AIへの具体的なAPIコールへと変換します。

  1. 既存データの照会

    エージェントは現在のArize AI環境を確認し、どのようなデータセットが既に存在するかを調べます。これにより、重複した作成を回避します。

    list_datasets
  2. 新しいセットの構築

    エージェントは指示内容に基づき、新しい検証用データセットを生成するコマンドを実行します。新しい項目の技術的なセットアップも自動で行います。

    create_dataset
  3. 作成の検証

    エージェントは再度リストを確認し、新しいデータセットが正しく表示され、指定通りの名前で作成されているかを確かめます。

    list_datasets
  4. 完了報告

    エージェントが新しいデータセット名を伝え、モデル評価の準備が整ったことを報告します。その後、すぐにテストを進められます。

    list_datasets

試してみる

以下のプロンプトをコピーして開始できます。

これらのプロンプトを使用して、Arize AI connectorを起動できます。

出発点

括弧内のテキストを、実際のデータセット名や条件に書き換えて使用してください。

Arize AI Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcp

Claude Desktop

以下の手順で数秒で接続できます。

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Arize AI capabilities are ready to use.
設定 · claude_desktop_config.jsonコピー
{
  "mcpServers": {
    "arize-ai-alternative-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcp"
    }
  }
}
チャットにコピー04
  • Arize AIに 'customer_support_v1' という名前の新しいデータセットを作成して。

  • 利用可能なデータセットを確認するために、現在のデータセットをすべてリストアップして。

  • Arize AIに 'llm_safety_test' という名前の検証用データセットを作成して。

  • 重複がないか確認したいので、Arize AIにあるデータセットを表示して。

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

ここから始める

一度接続すれば、あとは指示するだけです。

リンクから接続を承認してください。認証情報は暗号化されて安全に管理されます。設定完了後、すぐにエージェントとの対話を開始できます。

Arize AIをAIに接続する

FAQ

動作について

  • 01

    AIは既存のデータセットを削除できますか?

    いいえ。このconnectorには、データセットのリスト表示と作成を行うツールのみが備わっています。既存のデータの削除や変更はできません。

  • 02

    データセットに含めるデータの内容はAIが決めるのですか?

    AIはあなたの具体的な指示に従います。データセットの名前や目的を明確に伝える必要があります。

  • 03

    データセットの中身を編集するために使用できますか?

    いいえ。現在のツールでは、新しいデータセットの作成または既存のリスト表示のみが可能です。

  • 04

    Arize AIのウェブダッシュボードを使う必要はありますか?

    データセットの作成や一覧表示については、AIがconnectorを通じて実行するため、ダッシュボードを使用する必要はありません。

  • 05

    AIはモデルのパフォーマンス指標を確認できますか?

    いいえ。このconnectorの機能は、作成やリスト表示といったデータセット管理タスクに限定されています。

  • Arize AIに関するその他の質問 Arize AI Connectorの全機能を見る

『Arize AI』を Claude、Cursor、ChatGPT などに接続