• VALIDACIÓN
  • DETECCIÓN DE ERRORES
  • AUDITORÍA
  • REVISIÓN HUMANA

Cómo probar la precisión de RAG con tu IA

Conecta Haystack a tu agente para ejecutar pipelines específicos y validar que el contexto recuperado sea el correcto.

Pregunta a la IA sobre esta página

Respuesta rápida

¿Cómo puedo probar la precisión de mi pipeline RAG?

Tu agente utiliza el conector de Haystack para activar pipelines específicos y comparar los resultados con tus documentos indexados. Esto permite detectar errores de recuperación o alucinaciones al verificar si las respuestas del agente coinciden con tus datos reales.

Resultados de las pruebas

Lo que obtienes al realizar pruebas

El agente se encarga de la ejecución y la comparación.

VALIDACIÓN

Recuperación verificada

El agente ejecuta un pipeline y comprueba si los fragmentos recuperados contienen los datos necesarios. Así sabrás si tu indexación funciona correctamente.

DETECCIÓN DE ERRORES

Identificar alucinaciones

Al comparar los resultados del pipeline con tus datos fuente, el agente señala cuando inventa información. Esto ayuda a localizar fallos lógicos exactos.

AUDITORÍA

Inventario de pipelines

Tu agente puede ver todos los pipelines disponibles en tu configuración de Haystack. Esto asegura que pruebes las versiones correctas de tus flujos.

REVISIÓN HUMANA

Corrección manual

El agente identifica fallos específicos que requieren ajustar tu estrategia de fragmentación o el modelo de embeddings. Tú decides cómo corregir los datos.

El flujo

Lo que hace tu IA al iniciar la prueba.

El agente asume la ejecución y la comparación de tus flujos de Haystack.

  1. Inventariar pipelines

    El agente revisa tu instancia de Haystack para ver qué pipelines específicos están listos para ser probados.

    list_pipelines

  2. Ejecutar la prueba

    Tu agente activa el pipeline seleccionado con entradas específicas para generar una respuesta o un conjunto de resultados.

    run_pipeline

  3. Obtener datos fuente

    Para verificar la respuesta, el agente extrae los documentos originales de tu índice y comprueba la coherencia factual.

    search_documents

  4. Comparar e informar

    El agente evalúa el resultado del pipeline frente a los documentos recuperados para encontrar discrepancias.

    run_pipeline

Pruébalo

Copia estos comandos para empezar.

Usa estos prompts para comenzar a probar tus pipelines.

Puntos de partida

Sustituye los nombres de los pipelines y los IDs de los documentos por tus identificadores reales de Haystack.

deepset Cloud Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_Tf2g8zLZroyDlliFU39whBZWkEDykSKQVz38t3zr/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — deepset Cloud capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "haystack-deepset-cloud-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_Tf2g8zLZroyDlliFU39whBZWkEDykSKQVz38t3zr/mcp"
    }
  }
}
Copia en el chat04

  • Lista todos mis pipelines de Haystack para que pueda elegir uno para probar.

  • Ejecuta el 'qa_pipeline' y dime si los resultados coinciden con los documentos de mi índice.

  • Comprueba el pipeline 'retrieval_test' y busca documentos relacionados con la consulta del usuario.

  • Ejecuta el 'summarization_pipeline' y verifica el resultado comparándolo con el texto fuente.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Empieza aquí

Conecta Haystack una vez y luego pregunta.

Solo necesitas tus credenciales de Haystack. La conexión es cifrada y podrás ejecutar pipelines de inmediato.

Conectar Haystack a tu IA

FAQ

Cómo funcionan las pruebas

  • 01

    ¿Puede la IA cambiar mi configuración de pipelines en Haystack?

    No. El agente solo puede ejecutar o listar los pipelines existentes. No puede modificar tu código ni tus ajustes.

  • 02

    ¿Puede el agente eliminar mis documentos indexados?

    No. Las herramientas solo permiten listar pipelines, ejecutarlos y buscar documentos. No es posible eliminarlos.

  • 03

    ¿Cómo sabe el agente si un resultado es una alucinación?

    El agente usa la herramienta de búsqueda para extraer el texto real del documento y lo compara con el resultado del pipeline para hallar discrepancias.

  • 04

    ¿Debo activar cada prueba manualmente?

    Puedes pedirle a tu agente que las ejecute mediante el chat, lo que automatiza la ejecución del pipeline.

  • 05

    ¿Puedo probar varios pipelines a la vez?

    Puedes pedirle al agente que los ejecute de forma secuencial, pero procesa cada llamada al pipeline de manera individual.

  • ¿Tienes más dudas sobre Haystack? La página del conector tiene todas las respuestas. Ver todas las funciones del conector de Haystack

Conecta deepset Cloud a Claude, Cursor, ChatGPT y más