- EJECUCIONES
- MÉTRICAS
- RESULTADOS
- HUMANO
Respuesta rápida
¿Cómo puedo realizar evaluaciones RAG con mi IA?
Le pides a tu agente que inicie una evaluación en un conjunto de datos específico y este usará Ragas para calcular métricas como fidelidad o relevancia. Recibirás los resultados de rendimiento en tu ventana de chat de inmediato. Así podrás ajustar tus prompts y la recuperación de contexto sin salir de tu espacio de trabajo.
Los resultados.
Dónde aterrizan tus datos de evaluación.
La IA se encarga de todo el procesamiento de datos y cálculos matemáticos.
EJECUCIONES
Nuevos ciclos de prueba
La IA inicia una nueva ejecución de evaluación en los conjuntos de datos que proporciones. Obtienes un estado limpio en cada iteración.
MÉTRICAS
Tipos de puntuación disponibles
Tu agente puede verificar qué métricas específicas están disponibles para tu configuración actual. Esto te ayuda a decidir qué medir.
RESULTADOS
Puntuaciones de rendimiento
La IA trae las puntuaciones finales directamente al chat. Verás exactamente cómo funciona tu sistema RAG.
HUMANO
Ajustes manuales
Tú decides qué conjuntos de datos probar y qué métricas son prioritarias. La IA no modificará tus datos ni los parámetros de prueba sin tu permiso.
El flujo
Lo que hace tu IA cuando solicitas una evaluación.
La IA actúa como puente entre tu interfaz de chat y el motor de Ragas.
Identificar métricas
La IA comprueba qué métricas de evaluación son compatibles con tu tarea RAG específica.
list_metricsIniciar la prueba
La IA pone en marcha el proceso de evaluación utilizando el conjunto de datos indicado.
run_evaluationObtener puntuaciones
Una vez realizados los cálculos, la IA extrae los datos de rendimiento resultantes.
get_resultsInformar hallazgos
La IA presenta las puntuaciones finales y el desglose de métricas en tu ventana de chat.
get_results
Pruébalo
Copia estos ejemplos para empezar.
Usa estos prompts para lanzar tu primera evaluación.
Puntos de partida
Sustituye el texto entre corchetes por los nombres reales de tus conjuntos de datos o los requisitos de métricas específicos.
Ragas Connector
Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.
https://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcpClaude Desktop
Sigue los pasos siguientes para conectarte en segundos.
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — Ragas capabilities are ready to use.
{
"mcpServers": {
"ragas-mcp": {
"url": "https://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcp"
}
}
}Ejecuta una evaluación en mi conjunto de datos 'customer_support_v2'.
¿Qué métricas puedo usar con Ragas para este conjunto de datos?
Obtén los resultados de la última ejecución de evaluación que inicié.
Realiza una nueva evaluación en 'product_docs_final' usando métricas de fidelidad y relevancia.
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
Empieza aquí
Conecta Ragas una vez y luego pregunta.
Solo tienes que seguir la configuración de un solo clic para vincular Ragas con tu cliente. Tus credenciales se mantienen cifradas y seguras en nuestro sistema.
Conectar Ragas a tu IAFAQ
Cómo funciona el conector de Ragas
- 01
¿Puede la IA cambiar mi conjunto de datos original?
No. La IA solo puede leer los conjuntos de datos para realizar evaluaciones; no puede modificar ni eliminar tus datos de origen.
- 02
¿Puedo realizar evaluaciones con cualquier archivo aleatorio?
No. La IA solo puede ejecutar evaluaciones en los conjuntos de datos que ya son accesibles a través de la conexión de Ragas.
- 03
¿La IA elige las métricas por mí?
La IA puede sugerir métricas usando la herramienta de listado, pero tú debes indicarle cuáles usar para una ejecución específica.
- 04
¿Puede la IA arreglar mi pipeline RAG automáticamente?
No. La IA proporciona las puntuaciones e identifica los problemas, pero tú debes realizar los cambios reales en tu código o datos.
- 05
¿Cómo veo las puntuaciones?
Simplemente pídele a tu IA que obtenga los resultados de la ejecución de evaluación más reciente.
¿Tienes más dudas sobre Ragas? Ver todo lo que puede hacer el conector de Ragas
Conecta Ragas a Claude, Cursor, ChatGPT y más
