- バージョニング
- データ処理
- 検証
- 意思決定
すぐに答え
AIでモデルのテストを自動化するには?
AIクライアントを通じて、特定のモデルバージョンやタグに対してJSONペイロードを渡します。これにより、チャット画面から離れることなく、異なるイテレーションがデータをどのように処理するかを検証できます。各バージョンの実行結果を即座に確認可能です。
テスト結果のメリット
テストによって得られるもの
技術的な実行はAIが行うため、あなたは結果の分析に集中できます。
バージョニング
特定のモデルタグを指定
AIが指定された通りのバージョンやタグにアクセスします。誤ったモデルのイテレーションに対してテストしてしまうミスを防ぎます。
データ処理
JSON形式の自動生成
エージェントが自然言語を呼び出しに必要なJSON形式に変換します。テストのために生のコードを書く必要はありません。
検証
出力結果の直接比較
モデルのレスポンスがチャットに直接表示されます。挙動の変化やデグレードを容易に発見できます。
意思決定
最終判断は人間が実施
テストの実行はAIが行いますが、どのモデルバージョンを本番環境に投入するかはあなたが決定します。デプロイのライフサイクルを完全に制御できます。
ワークフロー
テストリクエストが届いた際のAIの動き
エージェントがあなたの指示とデプロイ済みモデルの間のインターフェースとして機能します。
ペイロードの構造化
エージェントがテスト内容を読み取り、有効なJSONオブジェクトに変換します。
get_inferenceタグへのルーティング
指定されたモデルタグを使用して、リクエストが正しいバージョンに届くように制御します。
get_inference推論の実行
構造化されたデータを使用して、Modelbitエンドポイントへの呼び出しを実行します。
get_inferenceレスポンスの提供
モデルの出力をチャットウィンドウに返し、内容を確認できるようにします。
get_inference
試してみる
以下のプロンプトをコピーして開始
これらのプロンプトを使って最初のテストを実行しましょう。
出発点
モデルタグやJSONオブジェクトを、実際のテストケースに合わせて書き換えて使用してください。
Modelbit Connector
準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。
https://edge.vinkius.com/vk_preview_U02S7R70GaoTP6dztOIIMDtmgDyuN2GTH3Or66r0/mcpClaude Desktop
以下の手順で数秒で接続できます。
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — Modelbit capabilities are ready to use.
{
"mcpServers": {
"modelbit-ml-model-deployments-mcp": {
"url": "https://edge.vinkius.com/vk_preview_U02S7R70GaoTP6dztOIIMDtmgDyuN2GTH3Or66r0/mcp"
}
}
}以下のJSONを使用して、'v2-beta'タグに対して推論を実行してください: {"prompt": "Summarize this text"}
このペイロードで'production-stable'タグをテストしてください: {"input": "test_case_01"}
このJSONを'experimental-v3'タグがどのように処理するか確認してください: {"query": "extract entities"}
このデータを使用して'legacy-model'タグにテストリクエストを送信してください: {"text": "classify this"}
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
ここから始める
Modelbitを接続して、指示を出すだけ
アカウントを連携することで、AIがあなたのデプロイメントにアクセスできるようになります。ログイン情報はVinkius側で暗号化して保持されます。
ModelbitをAIに接続するFAQ
テストの動作について
- 01
AIが新しいモデルをデプロイすることはできますか?
いいえ。AIができるのは、すでにデプロイされているモデルに対して推論を実行することのみです。
- 02
チャットを通じてモデルタグを変更できますか?
いいえ。AIはリクエストをルーティングするために既存のタグを使用することはできますが、Modelbitの設定自体を変更することはできません。
- 03
JSONを手動で作成する必要がありますか?
いいえ。エージェントがあなたの自然言語の指示に基づいて、JSON形式への変換を自動で行います。
- 04
AIがモデルバージョンを削除することはできますか?
いいえ。AIには推論を実行する権限のみが付与されており、デプロイメントの管理や削除を行う権限はありません。
- 05
複数のタグを一度にテストできますか?
はい。同じペイロードを使用して、異なるタグに対して順番にテストを実行するようエージェントに指示できます。
Modelbitに関するその他の質問 Modelbit MCPコネクターの全機能を見る
『Modelbit』を Claude、Cursor、ChatGPT などに接続
