• ANALYSE
  • IDENTIFICATION
  • RAPPORTS
  • HUMAIN

Comparer vos expériences RAG avec votre IA

Connectez Ragas à votre client IA pour analyser les performances de vos différentes versions de modèles ou configurations de prompts.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment comparer mes tests RAG avec mon IA ?

Vous pouvez importer les données et les métriques de vos expériences directement dans votre chat pour effectuer des comparaisons côte à côte. Votre IA se charge de l'analyse pour déterminer quelle configuration obtient les meilleurs scores. Vous aurez une vision claire de l'impact de vos changements sur la récupération ou la génération.

Où vos données arrivent.

Les résultats de votre analyse.

L'IA organise vos données Ragas selon ces différents axes.

ANALYSE

Comparaisons de performance

L'IA extrait les résultats de vos tests pour montrer précisément comment les différentes versions se comparent.

IDENTIFICATION

Tests les plus performants

Votre agent identifie les configurations qui atteignent le plus régulièrement vos objectifs de métriques.

RAPPORTS

Synthèse des résultats

Obtenez un récapitulatif clair des métriques pour l'ensemble de vos expériences enregistrées.

HUMAIN

Ajustement manuel

L'IA repère les points faibles de votre pipeline RAG, mais vous décidez des modifications de prompts ou de modèles à appliquer.

Le flux

Ce que fait votre IA une fois les données reçues.

L'IA agit comme votre analyste de données pour l'évaluation RAG.

  1. Trouver vos tests

    L'IA parcourt votre historique Ragas pour trouver les suites de tests spécifiques que vous souhaitez comparer.

    list_experiments

  2. Sélectionner une expérience

    Une fois le test choisi, l'IA récupère les détails de la configuration correspondante.

    get_experiment

  3. Extraire les métriques

    L'IA récupère les scores et les données d'évaluation du test terminé.

    get_results

  4. Comparer les performances

    L'IA utilise les résultats pour mettre en évidence les différences de fidélité, de pertinence ou d'autres métriques.

    get_results

Essayez

Copiez ces commandes pour commencer.

Utilisez ces prompts pour lancer votre analyse.

Points de départ

Remplacez les noms ou identifiants d'expériences par vos propres identifiants Ragas.

Ragas Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Ragas capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "ragas-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_mQUV7klN4rh09rRcp9ld3cwceCP25oL5Lk8res4B/mcp"
    }
  }
}
Copiez dans le chat04

  • Liste toutes mes expériences RAG récentes pour que je puisse voir lesquelles comparer.

  • Compare les résultats de l'expérience 'rag_v1_test' et 'rag_v2_test'.

  • Montre-moi les résultats de l'expérience nommée 'production_baseline'.

  • Quelle expérience dans ma liste possède le score de fidélité le plus élevé ?

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez Ragas une fois, puis interrogez.

Liez simplement votre compte Ragas. Vos identifiants restent chiffrés et vous pouvez immédiatement interroger votre IA sur vos données d'expérience.

Connecter Ragas à votre IA

FAQ

Fonctionnement de la tâche.

  • 01

    L'IA peut-elle modifier mes paramètres d'expérience ?

    Non. L'IA peut uniquement lire et analyser les données d'expérience existantes. Vous devez modifier vos configurations manuellement dans votre environnement Ragas.

  • 02

    L'IA peut-elle supprimer d'anciens résultats ?

    Non. Ce MCP est en lecture seule pour vos données d'expérience. Il ne peut ni supprimer ni modifier vos enregistrements Ragas.

  • 03

    Puis-je comparer deux frameworks RAG différents ?

    Oui, à condition que les deux séries d'expériences soient enregistrées dans Ragas et accessibles via le connecteur.

  • 04

    L'IA calcule-t-elle elle-même les métriques ?

    Non. L'IA récupère les métriques déjà calculées par Ragas et les interprète pour vous.

  • 05

    Puis-je voir les données brutes d'un test spécifique ?

    Oui. L'IA peut extraire les résultats précis de n'importe quelle expérience que vous identifiez.

  • D'autres questions sur Ragas ? Voir toutes les capacités du connecteur Ragas

Connectez Ragas à Claude, Cursor, ChatGPT et d'autres