• DETECCIÓN DE ERRORES
  • CALIDAD DE DATOS
  • FEEDBACK DE USUARIOS
  • REVISIÓN HUMANA

Cómo auditar el historial de chat RAG con tu IA

Conecta Vectara a tu cliente de IA para extraer sesiones pasadas. Una vez conectado, tu agente puede analizar interacciones previas para detectar errores o verificar hechos.

Pregunta a la IA sobre esta página

Respuesta rápida

¿Cómo puedo auditar mi historial de chat RAG?

Tu IA utiliza el MCP de Vectara para obtener una lista de tus sesiones de chat anteriores. Después, puedes pedirle a tu agente que analice sesiones específicas en busca de errores de precisión o de contexto. Esto te permite identificar fallos en tu implementación de RAG.

Resultados de la auditoría

Dónde verás tus hallazgos

Lo que obtienes tras el análisis de tu historial por parte de la IA.

DETECCIÓN DE ERRORES

Detectar alucinaciones

Tu IA compara las respuestas pasadas con los datos originales. Identifica los momentos en que el modelo se desvió del contexto proporcionado.

CALIDAD DE DATOS

Verificar precisión de recuperación

El agente analiza qué documentos se recuperaron para preguntas específicas. Así sabrás si realmente se está encontrando la información correcta.

FEEDBACK DE USUARIOS

Revisar tendencias de sesiones

Tu IA identifica patrones en la interacción de los usuarios con tu sistema RAG. Verás qué temas generan más confusión o respuestas erróneas.

REVISIÓN HUMANA

Identificar correcciones manuales

La IA señala las sesiones que requieren la intervención de una persona. Sabrás exactamente qué registros necesitan corrección manual o un mejor fundamento de datos.

El flujo

Lo que hace tu IA cuando recibe la solicitud.

La IA gestiona la recuperación de datos para que tú te centres en el análisis.

  1. Obtener registros de sesiones

    El agente accede a Vectara para extraer una lista de todas las interacciones de chat recientes. Esto constituye la materia prima para tu auditoría.

    list_chat_sessions

  2. Aislar chats específicos

    Tu IA filtra la lista de sesiones para encontrar las conversaciones exactas que quieres inspeccionar, ya sea por periodos de tiempo o IDs de sesión.

    list_chat_sessions

  3. Analizar el fundamento

    El agente compara las respuestas del chat con el contexto recuperado. Busca discrepancias entre lo que se dijo y lo que los datos respaldan.

    list_chat_sessions

  4. Resumir hallazgos

    Tu IA compila los errores o aciertos encontrados en un informe legible. Obtendrás una visión clara del rendimiento de tu RAG.

    list_chat_sessions

Pruébalo

Copia estos ejemplos para empezar.

Usa estos prompts para iniciar tu auditoría.

Puntos de partida

Estas son frases iniciales. Sustituye los IDs de sesión o las fechas por tus datos reales de Vectara.

Vectara Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_P55Xdk6UU5XMN3cdVPORquufduaGCfpEWSemsNQg/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Vectara capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "vectara-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_P55Xdk6UU5XMN3cdVPORquufduaGCfpEWSemsNQg/mcp"
    }
  }
}
Copia en el chat04

  • Lista mis sesiones de chat recientes de Vectara para que pueda elegir una para auditar.

  • Revisa las últimas cinco sesiones de chat de Vectara y dime si alguna de ellas tuvo alucinaciones.

  • Busca la sesión de chat de ayer y comprueba si el contexto recuperado respaldaba realmente la respuesta.

  • Revisa mi historial de chat de Vectara y resume las razones más comunes de las respuestas incorrectas.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Empieza aquí

Conecta Vectara una vez y luego pregunta.

Solo tienes que hacer clic en el enlace para conectar tu cuenta. Tus credenciales permanecen cifradas y podrás empezar a preguntar a tu IA sobre tus registros de chat de inmediato.

Conectar Vectara a tu IA

FAQ

Cómo funciona esta tarea

  • 01

    ¿Puede la IA eliminar sesiones de chat en Vectara?

    No. La IA solo puede listar y leer las sesiones existentes para realizar la auditoría.

  • 02

    ¿Puede mi IA cambiar las respuestas en mi historial de chat?

    No. La IA puede analizar el historial, pero no puede modificar ni reescribir los registros almacenados en Vectara.

  • 03

    ¿Cómo sabe la IA si una respuesta fue una alucinación?

    La IA compara la respuesta del chat con el contexto específico recuperado durante esa sesión para ver si los hechos coinciden.

  • 04

    ¿La IA ve todos mis datos o solo el historial de chat?

    A través de este MCP específico, la IA solo accede a los datos de las sesiones de chat proporcionados por la herramienta list_chat_sessions.

  • 05

    ¿Puedo auditar sesiones de un usuario diferente?

    La IA solo puede acceder a las sesiones que tu cuenta conectada de Vectara tiene permiso para ver.

  • ¿Tienes más dudas sobre Vectara? La página del conector las responde. Ver todo lo que puede hacer el conector de Vectara

Conecta Vectara a Claude, Cursor, ChatGPT y más