• LOGS
  • THREADS
  • REPAIR
  • HUMAN

KI-Modellfehler mit Ihrer eigenen KI debuggen

Verbinden Sie Chainlit mit Ihrem Agenten, um die interne Logik jeder Konversation zu prüfen. Sie sehen genau, welche Schritte zu einer Halluzination oder einem fehlerhaften Tool-Aufruf geführt haben.

Fragen Sie die KI zu dieser Seite

Kurzantwort

Wie finde ich heraus, wo meine KI in einer Konversation einen Fehler gemacht hat?

Ihr Agent nutzt Chainlit, um die spezifischen Ausführungsschritte und den Thread-Verlauf aus Ihren Logs abzurufen. So können Sie den exakten Moment bestimmen, in dem das Modell von seinen Anweisungen abgewichen ist. Sie erhalten eine klare Übersicht über den Logikfluss und die Tool-Inputs, die den Fehler verursacht haben.

Debugging-Ergebnisse

Wo Ihre Debugging-Daten landen.

Die KI strukturiert Ihre Chainlit-Daten in diese spezifischen Ergebnisse.

LOGS

Ausführungsschritte verfolgen

Die KI ruft die detaillierte Abfolge der Ereignisse eines bestimmten Durchlaufs ab. Sie sehen den exakten Logikpfad, den der Agent vor dem Fehler genommen hat.

THREADS

Problematische Chats identifizieren

Die KI durchsucht Ihren Konversationsverlauf nach bestimmten Threads. Das hilft Ihnen, den genauen Kontext zu isolieren, in dem Fehler auftreten.

REPAIR

Logikfehler beheben

Sobald Sie den fehlerhaften Schritt gefunden haben, können Sie Ihre Prompts oder Tool-Definitionen anpassen. Die KI hilft Ihnen, den Fehler einer bestimmten Anweisung zuzuordnen.

HUMAN

Manuelle Prüfung nötig

Einige Logiklücken erfordern eine Überarbeitung der Kerninstruktionen Ihres Agenten. Die KI markiert diese Bereiche, damit Sie wissen, wo Sie eingreifen müssen.

Der Ablauf

Was Ihre KI tut, wenn die Debugging-Anfrage eingeht.

Ihr Agent fungiert als forensischer Analyst für Ihre Chainlit-Logs.

  1. Konversation lokalisieren

    Die KI findet die relevanten Chat-Sessions, um den Suchbereich einzugrenzen.

    list_threads

  2. Spezifischen Chat isolieren

    Die KI ruft den vollständigen Kontext einer einzelnen Konversation ab, um die Absicht des Nutzers und die Antwort des Agenten zu prüfen.

    get_thread

  3. Logikpfad prüfen

    Die KI analysiert jede einzelne Aktion und jeden Gedankengang, der in dieser Session aufgezeichnet wurde.

    list_steps

  4. Fehlerpunkt identifizieren

    Die KI vergleicht den beabsichtigten Tool-Aufruf mit dem tatsächlichen Ergebnis, um die Halluzination zu finden.

    list_steps

Probieren Sie es

Kopieren Sie diese Vorlagen zum Start.

Nutzen Sie diese Prompts, um Ihre Untersuchung zu beginnen.

Startpunkte

Ersetzen Sie die spezifischen Thread-IDs oder Namen durch die IDs, die Sie gerade untersuchen.

Chainlit Connector

Alles bereit. Wählen Sie Ihren MCP-Client und folgen Sie den Einrichtungsschritten.

Connector-Linkhttps://edge.vinkius.com/vk_preview_MmtPPSL0UTrjhdbRcUoAgAc4xQjkgFcCDdx0WVam/mcp

Claude Desktop

Folgen Sie den Schritten unten, um sich in Sekunden zu verbinden.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Chainlit capabilities are ready to use.
Konfiguration · claude_desktop_config.jsonKopieren
{
  "mcpServers": {
    "chainlit-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_MmtPPSL0UTrjhdbRcUoAgAc4xQjkgFcCDdx0WVam/mcp"
    }
  }
}
In den Chat kopieren04

  • Liste alle aktuellen Threads in Chainlit auf, damit ich den finden kann, in dem der Agent einen Fehler gemacht hat.

  • Rufe die Details für die Thread-ID 'chat_8829' ab und sag mir, was der Nutzer gefragt hat.

  • Prüfe die Schritte im Thread 'session_alpha' und finde heraus, warum der Tool-Aufruf fehlgeschlagen ist.

  • Überprüfe die Ausführungsschritte der letzten Konversation, um zu sehen, warum der Agent einen falschen Tool-Output halluziniert hat.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Starten Sie hier

Einmal mit Chainlit verbinden, dann fragen.

Verknüpfen Sie einfach Ihre Chainlit-Instanz. Ihre Zugangsdaten bleiben verschlüsselt und Sie können sofort über Ihren bevorzugten KI-Client mit dem Debugging beginnen.

Chainlit mit Ihrer KI verbinden

FAQ

Verhalten dieser Aufgabe.

  • 01

    Kann die KI meine Chainlit-Einstellungen ändern?

    Nein. Die KI kann nur Threads, Thread-Details und Ausführungsschritte lesen.

  • 02

    Kann die KI eine Konversation löschen, wenn sie einen Fehler findet?

    Nein. Die KI besitzt keine Werkzeuge, um Ihre Chainlit-Daten zu löschen oder zu modifizieren.

  • 03

    Wie erkennt die KI, welcher Schritt fehlgeschlagen ist?

    Sie nutzt die Schritt-Daten, um die beabsichtigte Aktion des Modells mit dem tatsächlichen Ergebnis in den Logs zu vergleichen.

  • 04

    Kann ich dies nutzen, um den Code meines Agenten zu korrigieren?

    Die KI kann den Fehler identifizieren, aber Sie müssen Ihren Code oder Ihre Prompts manuell in Ihrer eigenen Entwicklungsumgebung aktualisieren.

  • 05

    Sieht die KI meine tatsächlichen Nutzerdaten?

    Die KI sieht den Inhalt der Threads und Schritte, die sie untersuchen soll, genau wie Sie es im Chainlit-Dashboard tun würden.

  • Weitere Fragen zu Chainlit? Die Connector-Seite liefert Antworten. Alle Funktionen des Chainlit Connectors ansehen

Verbinde Chainlit mit Claude, Cursor, ChatGPT & mehr