- 自動化
- 整理
- 確認
- 完了
すぐに答え
モデル評価用のデータセット作成を自動化するには?
作成したいデータセットの内容を自然な言葉で伝えるだけで、エージェントがArize AIを使用して構築します。手動でのデータ収集やアップロードの手間が省け、チャットを通じてすぐに使える検証セットが手に入ります。
実行結果
データの保存先
技術的な設定はエージェントがすべて行うため、あなたはテストに集中できます。
自動化
新しいデータセットの準備完了
AIがArize AI内に検証セットを直接構築します。ダッシュボードを操作することなく、新しいデータセットが作成されます。
整理
既存データの確認
エージェントが既存のデータセットを確認します。これにより、誤って同じセットを二重に作成してしまうのを防ぎます。
確認
内容のレビューと修正
品質を確保するために、データセットの内容をあなたが確認します。構造の構築はAIが行いますが、データの正当性はあなたが判断します。
完了
評価の開始
AIによる作成完了の報告後、データセットは即座に利用可能になります。すぐにモデルの評価を開始できます。
ワークフロー
データセットを依頼した際、AIが行うこと
エージェントはあなたの意図を解釈し、Arize AIへの具体的なAPIコールへと変換します。
既存データの照会
エージェントは現在のArize AI環境を確認し、どのようなデータセットが既に存在するかを調べます。これにより、重複した作成を回避します。
list_datasets新しいセットの構築
エージェントは指示内容に基づき、新しい検証用データセットを生成するコマンドを実行します。新しい項目の技術的なセットアップも自動で行います。
create_dataset作成の検証
エージェントは再度リストを確認し、新しいデータセットが正しく表示され、指定通りの名前で作成されているかを確かめます。
list_datasets完了報告
エージェントが新しいデータセット名を伝え、モデル評価の準備が整ったことを報告します。その後、すぐにテストを進められます。
list_datasets
試してみる
以下のプロンプトをコピーして開始できます。
これらのプロンプトを使用して、Arize AI connectorを起動できます。
出発点
括弧内のテキストを、実際のデータセット名や条件に書き換えて使用してください。
Arize AI Connector
準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。
https://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcpClaude Desktop
以下の手順で数秒で接続できます。
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — Arize AI capabilities are ready to use.
{
"mcpServers": {
"arize-ai-alternative-mcp": {
"url": "https://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcp"
}
}
}Arize AIに 'customer_support_v1' という名前の新しいデータセットを作成して。
利用可能なデータセットを確認するために、現在のデータセットをすべてリストアップして。
Arize AIに 'llm_safety_test' という名前の検証用データセットを作成して。
重複がないか確認したいので、Arize AIにあるデータセットを表示して。
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
ここから始める
一度接続すれば、あとは指示するだけです。
リンクから接続を承認してください。認証情報は暗号化されて安全に管理されます。設定完了後、すぐにエージェントとの対話を開始できます。
Arize AIをAIに接続するFAQ
動作について
- 01
AIは既存のデータセットを削除できますか?
いいえ。このconnectorには、データセットのリスト表示と作成を行うツールのみが備わっています。既存のデータの削除や変更はできません。
- 02
データセットに含めるデータの内容はAIが決めるのですか?
AIはあなたの具体的な指示に従います。データセットの名前や目的を明確に伝える必要があります。
- 03
データセットの中身を編集するために使用できますか?
いいえ。現在のツールでは、新しいデータセットの作成または既存のリスト表示のみが可能です。
- 04
Arize AIのウェブダッシュボードを使う必要はありますか?
データセットの作成や一覧表示については、AIがconnectorを通じて実行するため、ダッシュボードを使用する必要はありません。
- 05
AIはモデルのパフォーマンス指標を確認できますか?
いいえ。このconnectorの機能は、作成やリスト表示といったデータセット管理タスクに限定されています。
Arize AIに関するその他の質問 Arize AI Connectorの全機能を見る
『Arize AI』を Claude、Cursor、ChatGPT などに接続
