• EJECUCIONES
  • MÉTRICAS
  • RESULTADOS
  • HUMANO

Cómo evaluar RAG con tu cliente de IA usando Ragas

Conecta Ragas una sola vez para que tu agente pruebe tus procesos RAG y traiga los resultados directamente a tu conversación.

Pregunta a la IA sobre esta página

Respuesta rápida

¿Cómo puedo realizar evaluaciones RAG con mi IA?

Le pides a tu agente que inicie una evaluación en un conjunto de datos específico y este usará Ragas para calcular métricas como fidelidad o relevancia. Recibirás los resultados de rendimiento en tu ventana de chat de inmediato. Así podrás ajustar tus prompts y la recuperación de contexto sin salir de tu espacio de trabajo.

Los resultados.

Dónde aterrizan tus datos de evaluación.

La IA se encarga de todo el procesamiento de datos y cálculos matemáticos.

EJECUCIONES

Nuevos ciclos de prueba

La IA inicia una nueva ejecución de evaluación en los conjuntos de datos que proporciones. Obtienes un estado limpio en cada iteración.

MÉTRICAS

Tipos de puntuación disponibles

Tu agente puede verificar qué métricas específicas están disponibles para tu configuración actual. Esto te ayuda a decidir qué medir.

RESULTADOS

Puntuaciones de rendimiento

La IA trae las puntuaciones finales directamente al chat. Verás exactamente cómo funciona tu sistema RAG.

HUMANO

Ajustes manuales

Tú decides qué conjuntos de datos probar y qué métricas son prioritarias. La IA no modificará tus datos ni los parámetros de prueba sin tu permiso.

El flujo

Lo que hace tu IA cuando solicitas una evaluación.

La IA actúa como puente entre tu interfaz de chat y el motor de Ragas.

  1. Identificar métricas

    La IA comprueba qué métricas de evaluación son compatibles con tu tarea RAG específica.

    list_metrics
  2. Iniciar la prueba

    La IA pone en marcha el proceso de evaluación utilizando el conjunto de datos indicado.

    run_evaluation
  3. Obtener puntuaciones

    Una vez realizados los cálculos, la IA extrae los datos de rendimiento resultantes.

    get_results
  4. Informar hallazgos

    La IA presenta las puntuaciones finales y el desglose de métricas en tu ventana de chat.

    get_results

Pruébalo

Copia estos ejemplos para empezar.

Usa estos prompts para lanzar tu primera evaluación.

Puntos de partida

Sustituye el texto entre corchetes por los nombres reales de tus conjuntos de datos o los requisitos de métricas específicos.

Ragas Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Ragas capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "ragas-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcp"
    }
  }
}
Copia en el chat04
  • Ejecuta una evaluación en mi conjunto de datos 'customer_support_v2'.

  • ¿Qué métricas puedo usar con Ragas para este conjunto de datos?

  • Obtén los resultados de la última ejecución de evaluación que inicié.

  • Realiza una nueva evaluación en 'product_docs_final' usando métricas de fidelidad y relevancia.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Empieza aquí

Conecta Ragas una vez y luego pregunta.

Solo tienes que seguir la configuración de un solo clic para vincular Ragas con tu cliente. Tus credenciales se mantienen cifradas y seguras en nuestro sistema.

Conectar Ragas a tu IA

FAQ

Cómo funciona el conector de Ragas

  • 01

    ¿Puede la IA cambiar mi conjunto de datos original?

    No. La IA solo puede leer los conjuntos de datos para realizar evaluaciones; no puede modificar ni eliminar tus datos de origen.

  • 02

    ¿Puedo realizar evaluaciones con cualquier archivo aleatorio?

    No. La IA solo puede ejecutar evaluaciones en los conjuntos de datos que ya son accesibles a través de la conexión de Ragas.

  • 03

    ¿La IA elige las métricas por mí?

    La IA puede sugerir métricas usando la herramienta de listado, pero tú debes indicarle cuáles usar para una ejecución específica.

  • 04

    ¿Puede la IA arreglar mi pipeline RAG automáticamente?

    No. La IA proporciona las puntuaciones e identifica los problemas, pero tú debes realizar los cambios reales en tu código o datos.

  • 05

    ¿Cómo veo las puntuaciones?

    Simplemente pídele a tu IA que obtenga los resultados de la ejecución de evaluación más reciente.

  • ¿Tienes más dudas sobre Ragas? Ver todo lo que puede hacer el conector de Ragas

Conecta Ragas a Claude, Cursor, ChatGPT y más