• PUISSANCE
  • RISQUE
  • DONNÉES
  • HUMAIN

Suivi de la puissance et du risque de peeking par IA

Arrêtez de deviner si votre test est prêt. Votre IA s'occupe des calculs pour vous dire si vos données sont suffisantes ou si vous analysez du bruit.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment vérifier la validité d'un test en cours ?

Votre IA utilise des outils statistiques pour calculer la puissance actuelle et la probabilité d'un faux positif. Cela vous évite de déclarer un gagnant prématurément. Vous saurez exactement combien de données supplémentaires sont nécessaires pour atteindre la confiance voulue.

Vos résultats clés.

Les conclusions de votre analyse.

Votre IA transforme vos données brutes en quatre indicateurs précis.

PUISSANCE

Force statistique

L'IA calcule si votre échantillon est assez large pour détecter une différence réelle. Vous saurez si votre test manque de puissance.

RISQUE

Risque de peeking

L'IA identifie le danger des faux positifs causés par une analyse trop précoce. Elle vous indique si votre résultat actuel est un coup de chance.

DONNÉES

Taille d'échantillon requise

L'IA détermine le nombre d'utilisateurs ou d'événements restants à collecter pour atteindre votre objectif.

HUMAIN

Aide à la décision

L'IA fournit les calculs, mais vous décidez de déployer ou de continuer. Elle vous alerte quand le risque est trop élevé pour agir.

Le flux

Ce que fait votre IA dès réception des données.

Plutôt que de calculer manuellement, laissez votre IA traiter les métriques de votre expérience.

  1. Évaluer la force de l'échantillon

    L'IA analyse vos taux de conversion et vos tailles d'échantillon pour vérifier la pertinence du test.

    calculate_statistical_power

  2. Détecter les erreurs de peeking

    L'IA vérifie si votre surveillance fréquente n'augmente pas artificiellement le risque de faux positifs.

    check_peeking_risk

  3. Projeter les besoins futurs

    L'IA utilise les données actuelles pour estimer le volume total nécessaire à un résultat valide.

    calculate_statistical_power

  4. Signaler les résultats invalides

    L'IA vous alerte si la force statistique est trop faible pour faire confiance à l'amélioration observée.

    check_peeking_risk

Essayez

Copiez ces exemples pour démarrer.

Utilisez ces prompts pour lancer votre analyse.

Points de départ

Remplacez le texte entre crochets par vos données réelles, comme votre taux de conversion ou la taille de l'échantillon.

A/B Test Significance Calculator Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_fzQ1aS9NSSO5zJk9otHteGWMsIrsHlHpW7aJ8mX9/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — A/B Test Significance Calculator capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "ab-test-significance-calculator-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_fzQ1aS9NSSO5zJk9otHteGWMsIrsHlHpW7aJ8mX9/mcp"
    }
  }
}
Copiez dans le chat04

  • Vérifie le risque de peeking pour mon test A/B actuel dans ce Google Sheet.

  • Calcule la puissance statistique de mon expérience avec un taux de conversion de 5 % et 1 000 utilisateurs.

  • De combien de données ai-je besoin pour atteindre une puissance de 80 % pour ce test dans mon fichier CSV ?

  • Mon résultat actuel est-il statistiquement significatif ou est-ce que je regarde les résultats trop tôt ?

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez l'A/B Test Significance Calculator, puis interrogez l'IA.

Connectez votre client préféré au MCP en un clic. Vos identifiants restent chiffrés et sécurisés pendant que votre IA accède directement aux données de votre test.

Connecter l'A/B Test Significance Calculator à votre IA

FAQ

Fonctionnement de la tâche.

  • 01

    L'IA peut-elle modifier mes paramètres d'expérience dans Optimizely ?

    Non. L'IA se contente de lire vos données pour effectuer des calculs. Elle ne peut pas modifier vos tests en direct ni agir sur des outils externes.

  • 02

    L'IA arrête-t-elle automatiquement mes tests quand ils sont significatifs ?

    Non. L'IA fournit les calculs et l'évaluation des risques, mais c'est à vous de décider quand arrêter un test.

  • 03

    Quelles données dois-je fournir ?

    Vous devez fournir vos tailles d'échantillon actuelles, vos taux de conversion et la valeur de référence (baseline) utilisée pour le test.

  • 04

    Peut-elle calculer la puissance pour des tests multivariés ?

    Les outils actuels sont conçus pour les tests A/B standards afin de vérifier la puissance et le risque de peeking.

  • 05

    L'IA va-t-elle supprimer mes journaux d'expérience ?

    Non. Ce MCP est en lecture seule. Il n'a aucune capacité de suppression ou d'écrasement de vos fichiers.

  • D'autres questions sur l'A/B Test Significance Calculator ? La page du Connector y répond. Voir toutes les capacités du connecteur A/B Test Significance Calculator

Connectez A/B Test Significance Calculator à Claude, Cursor, ChatGPT et d'autres