• DATEN
  • ANALYSE
  • EINSICHT
  • MENSCH

Experiment-Metriken mit Ihrer KI vergleichen

Verbinden Sie Comet ML mit Ihrem Agenten, um Daten aus bestimmten Trainingsläufen abzurufen. Sobald die Verbindung steht, kann Ihre KI direkte Vergleiche der Modellleistung durchführen.

Fragen Sie die KI zu dieser Seite

Kurzantwort

Wie kann ich Experiment-Metriken mit meiner KI vergleichen?

Ihr Agent nutzt Comet ML Tools, um numerische Werte aus verschiedenen Trainingsläufen abzurufen. Sie können ihn dann bitten, Trends zu erkennen, Differenzen zu berechnen oder den besten Lauf zu finden. Dieser Ablauf zeigt, wie die Daten von Comet ML in Ihren Chat fließen.

Die Ergebnisse

Was Sie durch diese Vergleiche gewinnen

Die KI übernimmt die Datenabfrage, damit Sie sich auf die Ergebnisse konzentrieren können.

DATEN

Direkte Metrik-Extraktion

Die KI zieht exakte Werte für Loss, Accuracy oder benutzerdefinierte Metriken aus Ihren Läufen. Sie erhalten saubere Daten ohne manuellen Export.

ANALYSE

Vergleich von Durchläufen

Bitten Sie Ihren Agenten, zwei spezifische Experimente zu vergleichen. Er berechnet die Unterschiede in der Performance automatisch.

EINSICHT

Trend-Erkennung

Die KI analysiert mehrere Experimente, um zu prüfen, ob bestimmte Änderungen der Hyperparameter Ihre Ergebnisse verbessert haben.

MENSCH

Entscheidungsfindung

Die KI liefert die Zahlen und Differenzen. Sie entscheiden, welche Modellversion tatsächlich bereit für das Deployment ist.

Der Ablauf

Was Ihre KI tut, sobald die Daten vorliegen.

Der Agent fungiert als Brücke zwischen Ihrem Comet ML Dashboard und Ihrem Chat-Interface.

  1. Experimente finden

    Der Agent identifiziert die gewünschten Trainingsläufe, indem er Ihren Projektverlauf durchsucht.

    list_experiments

  2. Numerische Daten abrufen

    Sobald die Läufe identifiziert sind, zieht der Agent die von Ihnen angeforderten Metrik-Werte.

    get_experiment_metrics

  3. Differenzen berechnen

    Der Agent vergleicht die Werte der ausgewählten Läufe, um Verbesserungen oder Verschlechterungen zu finden.

    get_experiment_metrics

  4. Ergebnisse zusammenfassen

    Der Agent stellt einen klaren Vergleich der Metriken direkt in Ihrem Chat-Fenster dar.

    get_experiment_metrics

Probieren Sie es

Kopieren Sie diese Beispiele zum Start.

Nutzen Sie diese Prompts für Ihre Analyse.

Startpunkte

Ersetzen Sie die Experimentnamen und Metrik-Keys durch Ihre tatsächlichen Comet ML Daten.

Comet ML Connector

Alles bereit. Wählen Sie Ihren MCP-Client und folgen Sie den Einrichtungsschritten.

Connector-Linkhttps://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcp

Claude Desktop

Folgen Sie den Schritten unten, um sich in Sekunden zu verbinden.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Comet ML capabilities are ready to use.
Konfiguration · claude_desktop_config.jsonKopieren
{
  "mcpServers": {
    "comet-ml-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcp"
    }
  }
}
In den Chat kopieren04

  • Vergleiche die Accuracy-Metrik zwischen den Experimenten 'run_v1' und 'run_v2'.

  • Liste alle Experimente in meinem aktuellen Projekt auf und sag mir, welches den niedrigsten Validation Loss hatte.

  • Wie groß war der Unterschied in der Trainingszeit zwischen meinen letzten drei Durchläufen?

  • Finde das Experiment mit dem höchsten F1-Score in meinem aktuellen Trainingsverlauf.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Starten Sie hier

Einmal verbinden, dann fragen.

Eine einzige Verbindung verknüpft Ihren Agenten mit Ihren Comet ML Daten. Ihre Zugangsdaten werden bei uns verschlüsselt und sicher gespeichert.

Comet ML mit Ihrer KI verbinden

FAQ

Verhalten und Grenzen

  • 01

    Kann die KI meine Experiment-Einstellungen ändern?

    Nein. Die KI kann Metriken nur lesen und Experimente auflisten. Sie kann keine Trainingsläufe modifizieren oder Hyperparameter ändern.

  • 02

    Kann die KI alte Experimente löschen?

    Nein. Die Tools dienen ausschließlich dem Lesen von Daten. Das Löschen von Experimenten muss manuell in Comet ML erfolgen.

  • 03

    Muss ich vorher CSV-Dateien exportieren?

    Nein. Die KI ruft die Daten direkt über die bereitgestellten Tools aus Comet ML ab.

  • 04

    Kann sie Metriken aus zwei verschiedenen Projekten vergleichen?

    Ja, sofern der Agent über das Tool list_experiments Zugriff auf beide Projekte hat.

  • 05

    Schlägt die KI neue Hyperparameter vor?

    Die KI kann erkennen, welche Hyperparameter zu besseren Metriken geführt haben, aber sie kann keine neuen Trainingsläufe für Sie ausführen.

  • Weitere Fragen zu Comet ML? Die Connector-Seite liefert Antworten. Alle Funktionen des Comet ML Connectors ansehen

Verbinde Comet ML mit Claude, Cursor, ChatGPT & mehr