• NEUE DATEN
  • INVENTAR
  • AUDIT
  • MENSCH

Modell-Evaluierungsdatensätze mit KI verwalten

Verbinde Arize AI mit deinem Agenten, um das Erstellen und Organisieren von Validierungsdaten zu automatisieren. Sobald die Verbindung steht, übernimmt deine KI die gesamte Arbeit beim Datensatzmanagement.

Fragen Sie die KI zu dieser Seite

Kurzantwort

Wie kann ich meine KI zur Verwaltung von Evaluierungsdatensätzen nutzen?

Deine KI nutzt Arize AI, um neue Datensätze zu erstellen oder bestehende für die Modellvalidierung aufzulisten. So gelangst du per einfachem Chat-Befehl von Rohdaten zu strukturierten Evaluierungssets. Du erhältst eine effiziente Methode, um die Leistung neuer Modellversionen gegen spezifische Benchmarks zu prüfen.

Das Ergebnis deiner Anfrage.

Wohin deine Daten fließen.

Je nach deiner Anfrage liefert deine KI eines dieser Ergebnisse.

NEUE DATEN

Sofort nutzbare Datensätze

Die KI nutzt das Erstellungstool, um einen spezifischen Datensatz für deine aktuelle Validierungsaufgabe zu bauen. Du erhältst einen sauberen Datensatz, der bereit für Tests ist.

INVENTAR

Übersicht der Datensätze

Deine KI ruft eine Liste aller aktuellen Datensätze aus Arize AI ab. So siehst du genau, was für deine Evaluierungsläufe verfügbar ist.

AUDIT

Validierungsbereitschaft

Die KI organisiert Daten so, dass du verschiedene Modellversionen vergleichen kannst. Das stellt sicher, dass deine Testumgebung konsistent und zuverlässig bleibt.

MENSCH

Manuelle Prüfung nötig

Die KI übernimmt den Datentransfer, aber du entscheidest, welche Datensätze qualitativ hochwertig genug für die Produktion sind. Du behältst die volle Kontrolle über die finale Auswahl.

Der Ablauf

Was deine KI bei der Verwaltung von Datensätzen tut.

Die KI fungiert als Brücke zwischen deinem Chat-Interface und deiner Arize AI Umgebung.

  1. Bestehende Daten scannen

    Deine KI prüft dein Arize AI Konto, um zu sehen, welche Datensätze bereits gespeichert sind.

    list_datasets

  2. Neue Sets erstellen

    Wenn du beschreibst, welche Daten du benötigst, generiert die KI einen neuen Datensatz für deine spezifische Modellversion.

    create_dataset

  3. Für Tests organisieren

    Die KI nutzt das Erstellungstool, um Daten gezielt für Validierungs-Workflows zu strukturieren.

    create_dataset

  4. Verfügbarkeit prüfen

    Die KI bestätigt, dass die neuen oder bestehenden Datensätze korrekt in deinem Konto abgelegt wurden.

    list_datasets

Probieren Sie es

Kopiere diese Befehle zum Start.

Nutze diese Prompts, um Aktionen in Arize AI auszulösen.

Startpunkte

Ersetze den Text in den Klammern durch deine tatsächlichen Datensatznamen oder die Anforderungen an die Modellversion.

Arize AI Connector

Alles bereit. Wählen Sie Ihren MCP-Client und folgen Sie den Einrichtungsschritten.

Connector-Linkhttps://edge.vinkius.com/vk_preview_wKJSgGsb2EgJmks5PzM3V0jknb7nFZgbwB0CaRFP/mcp

Claude Desktop

Folgen Sie den Schritten unten, um sich in Sekunden zu verbinden.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Arize AI capabilities are ready to use.
Konfiguration · claude_desktop_config.jsonKopieren
{
  "mcpServers": {
    "arize-ai-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_wKJSgGsb2EgJmks5PzM3V0jknb7nFZgbwB0CaRFP/mcp"
    }
  }
}
In den Chat kopieren04

  • Liste alle meine aktuellen Datensätze in Arize AI auf.

  • Erstelle einen neuen Datensatz namens [Dataset Name] für meine neueste Modellversion.

  • Zeige mir die Datensätze, die für die [Model Name] Evaluierung verfügbar sind.

  • Erstelle einen Validierungsdatensatz unter Verwendung der Parameter aus [Specific Data Source].

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Starten Sie hier

Einmal verbinden, dann fragen.

Verknüpfe dein Konto einfach einmalig. Deine Zugangsdaten werden verschlüsselt und sicher gespeichert, sodass du sofort über deinen bevorzugten KI-Client Daten verwalten kannst.

Arize AI mit deiner KI verbinden

FAQ

So funktioniert die Aufgabe.

  • 01

    Kann die KI meine bestehenden Datensätze löschen?

    Nein. Die KI verfügt nur über Werkzeuge zum Auflisten und Erstellen von Datensätzen. Sie kann deine Daten weder löschen noch überschreiben.

  • 02

    Entscheidet die KI, welche Modellversion besser ist?

    Nein. Die KI verwaltet die für den Test verwendeten Datensätze, aber die eigentliche Evaluierung und Entscheidung musst du selbst durchführen.

  • 03

    Kann ich den Inhalt eines Datensatzes über die KI einsehen?

    Nein. Die KI kann Datensätze auflisten und neue erstellen, verfügt aber über kein Werkzeug, um einzelne Zeilen oder Einträge innerhalb eines Datensatzes zu lesen.

  • 04

    Woran erkenne ich, ob ein Datensatz erfolgreich erstellt wurde?

    Die KI bestätigt die Aktion, sobald das Erstellungstool fertig ist. Du kannst sie auch bitten, deine Datensätze aufzulisten, um die Existenz zu prüfen.

  • 05

    Kann die KI lokale Dateien nutzen, um Datensätze zu erstellen?

    Nein. Die KI kann ausschließlich über die bereitgestellten Tools mit Arize AI interagieren. Sie kann keine Daten von deiner lokalen Festplatte oder anderen externen Apps abrufen.

  • Weitere Fragen zu Arize AI? Die Connector-Seite liefert Antworten. Alle Funktionen des Arize AI Connectors ansehen

Verbinde Arize AI mit Claude, Cursor, ChatGPT & mehr