• ANALYSE
  • TENDANCES
  • DÉTECTION
  • DÉCISION

Suivre la performance de vos modèles avec votre IA

Connectez Braintrust à votre client IA une seule fois. Votre agent pourra ensuite extraire les scores d'expérimentation et les données de projet pour analyser le comportement réel de vos modèles.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment savoir si mes modifications ont amélioré la précision ?

Votre IA interroge Braintrust pour extraire les scores d'expérimentation et les analyses de projet. Elle compare ces métriques pour vous montrer l'impact exact des changements récents sur le comportement du modèle. Voici comment cela fonctionne.

Les résultats

Ce que les données vous apportent

Votre IA transforme les métriques Braintrust en réponses claires.

ANALYSE

Comparer les scores

L'IA extrait les données de vos derniers tests pour comparer les performances de différentes versions.

TENDANCES

Suivre l'historique

Votre agent analyse les données de projet pour identifier les évolutions de performance dans le temps.

DÉTECTION

Repérer les dérives

L'IA détecte quand un changement de modèle provoque une chute de précision ou une modification du style de réponse.

DÉCISION

Déploiement piloté

L'IA présente les résultats, mais vous gardez le contrôle final pour décider quel modèle mettre en production.

Le flux

Ce que fait votre IA une fois les données reçues.

L'IA sert de pont entre votre tableau de bord Braintrust et votre interface de chat.

  1. Localiser les projets

    L'IA identifie les projets Braintrust spécifiques que vous souhaitez analyser.

    list_projects

  2. Récupérer les scores

    Elle extrait les métriques et les scores précis de vos derniers tests.

    list_experiments

  3. Comparer les versions

    L'agent analyse les résultats des différentes expérimentations pour trouver les écarts de performance.

    list_experiments

  4. Rapporter les résultats

    Votre IA synthétise les analyses de projet pour expliquer l'évolution du comportement.

    list_projects

Essayez

Copiez ces exemples pour commencer.

Utilisez ces prompts pour lancer vos analyses.

Points de départ

Remplacez les noms de projets et les IDs d'expérimentation par vos propres données Braintrust.

Braintrust Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_cr8T7CpPGy155EtBgklGtlDgFsTWLRLYfzKoHIOF/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Braintrust capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "braintrust-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_cr8T7CpPGy155EtBgklGtlDgFsTWLRLYfzKoHIOF/mcp"
    }
  }
}
Copiez dans le chat04

  • Liste tous mes projets Braintrust pour que je voie ce qui est disponible.

  • Montre-moi les scores de l'expérience 'v2-test-run' dans mon projet 'Customer-Bot'.

  • Compare les scores de précision entre mes trois dernières expérimentations.

  • Les changements récents dans le projet 'Search-Optimization' ont-ils amélioré les performances de mon modèle ?

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez Braintrust une fois, puis interrogez.

Connectez votre compte en une étape. Vos identifiants restent chiffrés de notre côté, et vous pouvez immédiatement interroger votre IA sur la performance de vos modèles.

Connecter Braintrust à votre IA

FAQ

Fonctionnement de la tâche

  • 01

    L'IA peut-elle modifier mes paramètres d'expérimentation ?

    Non. L'IA peut uniquement lire les données de projet et d'expérimentation ; elle ne peut pas modifier vos configurations Braintrust.

  • 02

    L'IA peut-elle supprimer mes tests ?

    Non. Ce MCP est en lecture seule pour vos expérimentations et vos projets.

  • 03

    Comment l'IA sait-elle quel projet consulter ?

    Elle utilise l'outil list_projects pour lister vos projets, puis vous lui indique celui sur lequel se concentrer.

  • 04

    Est-ce compatible avec n'importe quel client IA ?

    Oui, cela fonctionne avec n'importe quel client compatible MCP comme Claude, Cursor ou Windsurf.

  • 05

    L'IA peut-elle créer de nouvelles expérimentations ?

    Non. L'IA peut seulement lister et interroger les expérimentations existantes.

  • D'autres questions sur Braintrust ? Voir toutes les capacités du connecteur Braintrust

Connectez Braintrust à Claude, Cursor, ChatGPT et d'autres