• LECTURE
  • ÉCRITURE
  • VÉRIFICATION
  • SYNCHRONISATION

Étendre vos jeux de données d'évaluation avec votre IA

Connectez Braintrust à votre client IA pour enrichir vos jeux de tests par simple conversation. Indiquez simplement à votre agent ce qu'il faut ajouter, il s'occupe de la saisie.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment ajouter de nouveaux cas de test à mes jeux de données Braintrust ?

Demandez simplement à votre client IA d'ajouter des lignes spécifiques ou de nouveaux cas de test à vos matrices Braintrust existantes. L'IA utilise vos instructions en langage naturel pour récupérer les données actuelles et injecter les nouvelles données de référence directement dans vos jeux de tests. Vous enrichissez votre bibliothèque de tests sans aucune manipulation de fichiers CSV.

Destination des données.

Résultats de votre demande.

L'IA gère le transfert de données entre votre chat et votre environnement Braintrust.

LECTURE

État actuel du jeu de données

L'IA récupère vos lignes d'évaluation existantes pour comprendre le contexte. Cela garantit que les nouvelles entrées respectent votre schéma actuel.

ÉCRITURE

Nouveaux cas de test

Votre agent insère de nouvelles lignes contenant les entrées et les sorties attendues. Votre couverture de test s'élargit instantanément.

VÉRIFICATION

Révision humaine requise

Vous décidez si un cas de test généré est pertinent. L'IA attend votre validation avant de finaliser les mises à jour sensibles des données de référence.

SYNCHRONISATION

Matrices mises à jour

Vos jeux d'évaluation restent synchronisés avec vos dernières itérations de modèles. Les nouvelles données sont prêtes pour votre prochain passage d'évaluation.

Le flux

Ce que fait votre IA lors de la requête.

L'IA sert de pont entre votre conversation et l'API Braintrust.

  1. Récupérer les données existantes

    L'agent consulte votre jeu d'évaluation actuel pour comprendre les entrées et les sorties attendues déjà présentes.

    get_dataset

  2. Préparer les nouvelles lignes

    L'IA convertit votre demande en langage naturel en une ligne structurée conforme aux exigences de votre jeu de données.

    get_dataset

  3. Insérer les cas de test

    L'agent injecte les nouvelles données de référence dans votre matrice Braintrust.

    insert_dataset_row

  4. Confirmer les mises à jour

    L'IA vérifie que la nouvelle ligne a bien été ajoutée au jeu de données.

    insert_dataset_row

Essayez

Copiez ces exemples pour commencer.

Utilisez ces commandes pour interagir avec vos données Braintrust.

Points de départ

Remplacez le texte entre crochets par les noms réels de vos jeux de données Braintrust ou par les détails de vos cas de test.

Braintrust Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_cr8T7CpPGy155EtBgklGtlDgFsTWLRLYfzKoHIOF/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Braintrust capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "braintrust-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_cr8T7CpPGy155EtBgklGtlDgFsTWLRLYfzKoHIOF/mcp"
    }
  }
}
Copiez dans le chat04

  • Montre-moi les lignes actuelles de mon jeu de données 'customer_support_eval'.

  • Ajoute un nouveau cas de test à 'chatbot_v2' où l'utilisateur pose une question sur les politiques de remboursement.

  • Regarde mon 'qa_test_set' et ajoute une ligne avec cette entrée : 'Comment réinitialiser mon mot de passe ?'

  • Trouve le jeu de données 'llm_benchmarks' et ajoute une nouvelle donnée de référence pour la question sur les tarifs.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez Braintrust une fois, puis demandez.

Liez votre compte une seule fois. Vos identifiants restent chiffrés et vous pouvez immédiatement gérer vos jeux de données via votre client IA.

Connecter Braintrust à votre IA

FAQ

Fonctionnement de la tâche.

  • 01

    L'IA peut-elle supprimer des lignes de mon jeu de données ?

    Non. L'IA peut uniquement récupérer des données et insérer de nouvelles lignes. Elle ne peut ni supprimer ni modifier les entrées existantes.

  • 02

    L'IA décide-t-elle seule quels cas de test sont corrects ?

    Non. Bien que l'IA puisse suggérer des données de référence, vous gardez le contrôle total sur ce qui est réellement validé dans vos jeux d'évaluation.

  • 03

    Puis-je utiliser cet outil pour lancer une évaluation ?

    Non. Ce connecteur spécifique sert à gérer les données au sein de vos jeux de données, pas à exécuter les processus d'évaluation eux-mêmes.

  • 04

    Dois-je formater mes données en CSV au préalable ?

    Non. Décrivez simplement le nouveau cas de test en langage naturel, et l'IA se chargera du formatage pour le jeu de données.

  • 05

    L'IA peut-elle mettre à jour une ligne existante si je trouve une erreur ?

    Non. Les outils actuels ne permettent que l'insertion de nouvelles lignes. Pour corriger une erreur, vous devrez ajouter une version rectifiée ou passer par l'interface Braintrust.

  • D'autres questions sur Braintrust ? Voir toutes les capacités du connecteur Braintrust

Connectez Braintrust à Claude, Cursor, ChatGPT et d'autres