AIを活用してComet MLの実験メトリクスを比較する方法

エージェントがComet MLのツールを使用して、さまざまなトレーニング実行から数値データを取得します。その後、トレンドの特定、差分の計算、あるいは最も優れた実行の抽出などをAIに依頼できます。このプロセスにより、Comet MLからチャット画面へスムーズにデータが渡されます。

1. 01

   実験の特定

   エージェントはプロジェクト履歴をスキャンし、分析したい特定のトレーニング実行を特定します。

   list_experiments
2. 02

   数値データの取得

   実行が特定されると、エージェントは要求された特定のメトリクス値を抽出します。

   get_experiment_metrics
3. 03

   差分の計算

   選択した実行間の値を比較し、改善点や性能低下を見つけ出します。

   get_experiment_metrics
4. 04

   結果の要約

   エージェントはメトリクスの比較結果をチャットウィンドウに分かりやすく表示します。

   get_experiment_metrics

Comet ML Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Comet ML capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "comet-ml-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

一度接続するだけで、エージェントがComet MLのデータにアクセスできるようになります。認証情報は、当社の環境で暗号化され安全に管理されます。

• 01

  AIが実験の設定を変更することはできますか？

  いいえ。AIができるのはメトリクスの読み取りと実験のリストアップのみです。トレーニング実行の変更やハイパーパラメータの修正はできません。

• 02

  AIが古い実験を削除することはできますか？

  いいえ。ツールはデータの読み取りのみを許可しています。実験の削除はComet ML上で手動で行う必要があります。

• 03

  事前にCSVをエクスポートしておく必要はありますか？

  いいえ。AIが提供されたツールを使用して、Comet MLから直接データを取得します。

• 04

  異なる2つのプロジェクトのメトリクスを比較できますか？

  はい。エージェントが list_experiments ツールを通じて両方のプロジェクトにアクセスできれば可能です。

• 05

  AIが新しいハイパーパラメータを提案することはありますか？

  どのハイパーパラメータがメトリクスの向上に寄与したかを特定することはできますが、AIが新しいトレーニングを実行することはありません。

• Comet MLについて他に質問がありますか？コネクターの専用ページで確認できます。 Comet MLコネクターの全機能を見る