• VALIDATION
  • DÉTECTION D'ERREURS
  • AUDIT DE PIPELINE
  • RÉVISION HUMAINE

Tester la précision du pipeline RAG avec votre IA

Connectez Haystack à votre agent pour exécuter des pipelines spécifiques et valider l'exactitude du contexte récupéré.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment tester la précision de mon pipeline RAG ?

Votre agent utilise le connecteur Haystack pour déclencher des pipelines précis et comparer les résultats avec vos documents indexés. Cela permet de détecter les erreurs de récupération ou les hallucinations en vérifiant si les réponses de l'agent correspondent à vos données réelles.

Résultats des tests

Ce que vous obtenez

L'agent s'occupe de l'exécution et de la comparaison.

VALIDATION

Récupération vérifiée

L'agent exécute un pipeline et vérifie si les segments récupérés contiennent les faits nécessaires. Vous voyez immédiatement si votre indexation est efficace.

DÉTECTION D'ERREURS

Identifier les hallucinations

En comparant les sorties du pipeline à vos données sources, l'agent signale lorsqu'il invente des informations. Cela aide à cibler l'origine des erreurs logiques.

AUDIT DE PIPELINE

Inventaire des pipelines

Votre agent peut lister tous les pipelines disponibles dans votre configuration Haystack. Cela garantit que vous testez les bonnes versions de vos workflows.

RÉVISION HUMAINE

Correction manuelle

L'agent identifie les échecs spécifiques qui nécessitent un ajustement de votre stratégie de découpage (chunking) ou de votre modèle d'embedding. Vous décidez ensuite de la correction à apporter.

Le flux

Ce que fait votre IA lors du test.

L'agent prend en charge l'exécution et la comparaison de vos workflows Haystack.

  1. Inventorier les pipelines

    L'agent analyse votre instance Haystack pour identifier les pipelines prêts à être testés.

    list_pipelines

  2. Exécuter le test

    Votre agent déclenche le pipeline sélectionné avec des entrées spécifiques pour générer une réponse ou un ensemble de résultats.

    run_pipeline

  3. Récupérer les données sources

    Pour vérifier la réponse, l'agent extrait les documents originaux de votre index afin de contrôler la cohérence factuelle.

    search_documents

  4. Comparer et rapporter

    L'agent évalue la sortie du pipeline par rapport aux documents récupérés pour identifier les écarts.

    run_pipeline

Essayez

Copiez ces commandes pour commencer.

Utilisez ces prompts pour débuter vos tests de pipelines.

Points de départ

Remplacez les noms de pipelines et les ID de documents par vos propres identifiants Haystack.

deepset Cloud Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_Tf2g8zLZroyDlliFU39whBZWkEDykSKQVz38t3zr/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — deepset Cloud capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "haystack-deepset-cloud-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_Tf2g8zLZroyDlliFU39whBZWkEDykSKQVz38t3zr/mcp"
    }
  }
}
Copiez dans le chat04

  • Liste tous mes pipelines Haystack pour que je puisse en choisir un à tester.

  • Exécute le 'qa_pipeline' et dis-moi si les résultats correspondent aux documents de mon index.

  • Vérifie le pipeline 'retrieval_test' et cherche les documents liés à la requête utilisateur.

  • Exécute le 'summarization_pipeline' et vérifie la sortie par rapport au texte source.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez Haystack une fois, puis posez vos questions.

Fournissez simplement vos identifiants Haystack. Votre connexion est sécurisée et vous pouvez lancer vos pipelines immédiatement.

Connecter Haystack à votre IA

FAQ

Fonctionnement des tests

  • 01

    L'IA peut-elle modifier la configuration de mes pipelines Haystack ?

    Non. L'agent peut uniquement exécuter ou lister les pipelines existants. Il ne peut pas modifier votre code ou vos paramètres.

  • 02

    L'agent peut-il supprimer mes documents indexés ?

    Non. Les outils permettent uniquement de lister les pipelines, de les exécuter et de rechercher des documents. La suppression est impossible.

  • 03

    Comment l'agent sait-il si un résultat est une hallucination ?

    L'agent utilise l'outil de recherche pour extraire le texte réel du document et le compare à la sortie du pipeline pour détecter les incohérences.

  • 04

    Dois-je déclencher chaque test manuellement ?

    Vous pouvez demander à votre agent de les lancer via le chat, ce qui automatise l'exécution du pipeline.

  • 05

    Puis-je tester plusieurs pipelines à la fois ?

    Vous pouvez demander à l'agent de les exécuter les uns après les autres, mais il traite chaque appel de pipeline individuellement.

  • D'autres questions sur Haystack ? La page du connecteur y répond. Voir toutes les capacités du connecteur Haystack

Connectez deepset Cloud à Claude, Cursor, ChatGPT et d'autres