An astronaut overseeing a futuristic data hub
Descargar PDFVersión en Markdown

Conecta Agent A/B Test Calculator a ChatGPT, Claude y Gemini

Configúralo una vez y funciona en ChatGPT, Claude, Cursor y en cualquier otro cliente que te guste. Todo se ejecuta con seguridad en segundo plano, para que tú te relajes y te centres en lo que de verdad importa. Determine si un cambio de comportamiento mejora sus conversiones de forma significativa.

Pregunta a la IA sobre este Connector

Desarrollado, mantenido y alojado por Vinkius.

MCP VERIFICADO · LISTO PARA PRODUCCIÓN · GARANTÍA VINKIUS

Waiting for input…

Works with modern AI clients that support MCP, including ChatGPT, Claude, Cursor, and more.

ChatGPTClaudeCursorPerplexityGeminiMicrosoft CopilotRaycastMeta AI

Tu IA hace el trabajo. Nosotros lo cuidamos, seguro.

Ninguna otra herramienta de IA te da esto. Tu workflow se ejecuta en el cliente que ya amas, tu cuenta permanece protegida y tú decides lo que el agente puede y no puede hacer. Es la razón completa para dar el salto.

Cada Connector vive dentro de nuestra infraestructura, en el mismo lugar donde se ejecuta tu workflow. Las tres cosas de abajo ya forman parte de él, trabajando en silencio en segundo plano para que nunca tengas que pensar en ellas. Nada que añadir, nada que configurar, nada de qué preocuparte.

A futuristic MCP client docking bay
V8 Isolate01

Cada Connector se ejecuta dentro de su propio entorno sellado.

Cada Connector se ejecuta en su propio runtime V8 aislado, sin acceso a tus archivos, a tu sistema ni a otros servidores. Un Connector nunca ve más allá de su propia petición.

Kill Switch02

Un interruptor detiene a todos los agentes. Al instante.

Una única acción desactiva todos los Connectors, revoca todos los tokens y cierra todas las sesiones a la vez. La Gobernanza de IA guarda el registro.

FinOps por usuario03

Límites de gasto que se pausan en vez de sorprenderte.

Cada usuario mantiene sus propias conexiones y credenciales, aisladas de las de los demás. Lo que supere tu límite de gasto se detiene y queda esperando tu aprobación en vez de cobrarse.

Tres controles, integrados en la capa por donde tu IA se conecta.

Set curado · 3 capacidades

Publicamos solo las acciones que importan.

Set de capacidades01 / 01

01-03

3 capacidades en este set.

Parte de 3 disponibles a través de Agent A/B Test Calculator.

  1. 01

    Analizar el rendimiento de variantes

    Evalúa el rendimiento de múltiples variantes de agentes para determinar la significancia estadística de los resultados. Requiere datos de éxito y intentos para calcular métricas clave.

  2. 02

    Calcular probabilidad bayesiana

    Determina la probabilidad bayesiana de que una variante específica sea superior a otra. Este cálculo es útil para tomar decisiones basadas en la evidencia acumulada.

  3. 03

    Estimar requisitos de prueba

    Calcula el tamaño de muestra y la duración necesarios para ejecutar un A/B test. Esto le ayuda a planificar experimentos con la confianza estadística adecuada.

Trabajo real

Lo que los equipos ejecutan de verdad

01

Optimizing Chatbot Flows

You want to know if changing the chatbot's opening script (Variant B) is better than the old one (Variant A). The MCP calculates the relative lift and significance.

02

Improving Checkout Conversion

A/B testing two different checkout flows requires knowing if the observed increase in conversions is real. The MCP provides the statistical proof.

03

Comparing Agent Responses

When two different LLM prompts generate agent responses, this MCP compares their success rates to determine which prompt is superior.

04

Planning Large-Scale Rollouts

Before launching a major agent update, you use the MCP to calculate the exact number of users and time needed to run a conclusive test.

Un connector, todas las IAs

Agent A/B Test Calculator funciona con los clientes de IA más populares.

Estos son los clientes más populares, cada uno con una guía paso a paso: un enlace, configurado una vez, con gobernanza y visibilidad integradas. Y como todo corre sobre el estándar MCP, la misma conexión también funciona en cualquier otro cliente compatible: nada que reconstruir.

ClaudeClaudeChatGPTChatGPTGeminiGeminiPerplexityPerplexityGrokGrokMicrosoft CopilotMicrosoft CopilotCursorCursorVS CodeVS CodeWindsurfWindsurfJetBrainsJetBrainsClineClineLangChainLangChainVercel AI SDKVercel AI SDKLovableLovableZ.aiZ.aiRaycastRaycastQwen CodeQwen CodeKimi CodeKimi CodeLe ChatLe Chat

¿Construyendo tu propia app? El connector es tuyo para usar.

No necesitas un cliente para poner Agent A/B Test Calculator a trabajar: la misma conexión alojada se conecta a tus propias aplicaciones y al código de tu agente, con la misma gobernanza en cada petición. Construye con él, conversa con él: una conexión para ambos.

Observada, no estimada

Promedio de 861ms. Rápida en producción.

Agent A/B Test Calculator se verifica a diario contra el servicio en producción.

Promedio diarioPico de 1047ms
3 octHoy
Día más rápido
696ms
Día más lento
1047ms
Tendencia de 14 días
Ralentizando+5%

Conecta tu cliente

Una URL. Todos los clientes.

Activa el Connector, copia tu enlace y pégalo en el cliente que ya usas. 3 capacidades llegan listas para funcionar.

Acceso de vista previa · no es autenticación del proveedor

El token vk_preview_* pertenece a la infraestructura de vista previa de Vinkius. Permite que Claude descubra y muestre las capacidades de Agent A/B Test Calculator, para que veas la experiencia dentro de tu IA.

No autentica tu cuenta con Agent A/B Test Calculator. Las acciones que requieran credenciales o datos reales de la cuenta podrían no ejecutarse hasta que actives el Connector y autorices el servicio.

Agent A/B Test Calculator Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_rLQOAZtFk4qc4ty1S7S56y14mXSD5bAfWh5mornv/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Agent A/B Test Calculator capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "agent-ab-test-calculator-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_rLQOAZtFk4qc4ty1S7S56y14mXSD5bAfWh5mornv/mcp"
    }
  }
}
  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Las instrucciones paso a paso para cada cliente están en la guía. Cómo conectar

¿Configuración guiada para Claude? Conectar Agent A/B Test Calculator con Claude y otras IA

Ve todos los clientes de IA con los que funciona este connector ↑

Para quién es

Hecho para el trabajo que quienes usan Agent A/B Test Calculator delegan.

Este MCP Connector está diseñado para profesionales que dependen de datos estadísticos rigurosos para tomar decisiones de producto. Si usted gestiona la optimización de la experiencia del usuario o el rendimiento de agentes de IA, necesita medir el impacto real de sus cambios.

  • 01

    Científico de Datos

    Utilizará el MCP para calcular p-valores, intervalos de confianza y realizar análisis bayesianos complejos en el rendimiento de las variantes.

  • 02

    Gerente de Producto (PM)

    Necesitará planificar A/B tests y determinar el tamaño de muestra requerido antes de lanzar cualquier cambio en el comportamiento del agente.

  • 03

    Especialista en Growth

    Empleará el MCP para medir el aumento relativo de la tasa de conversión y validar si las hipótesis de mejora son estadísticamente sólidas.

FAQ

Preguntas de quienes usan Agent A/B Test Calculator.

  • 01

    What is the difference between p-value and significance?

    The p-value tells you the probability of seeing your results if there was actually no difference between the variants. A low p-value (typically below 0.05) suggests the difference is statistically significant.

  • 02

    Do I need to know the MDE before running the test?

    Yes. The Minimum Detectable Effect (MDE) is the smallest difference in conversion rate that you care about detecting. You must define this threshold to calculate the necessary sample size.

  • 03

    Can this MCP handle multi-variant testing?

    Yes. It accounts for complex scenarios, including multi-variant tests, and can apply corrections like Bonferroni corrections to maintain statistical rigor.

  • 04

    Is this capability for comparing agents or just conversion rates?

    It's for both. You use it to compare any two or more variants—whether they are different agent prompts, different UI flows, or different backend models—based on a measurable outcome.

  • 05

    What is the Bayesian probability?

    Unlike traditional p-values, the Bayesian probability estimates the actual likelihood that one variant is better than another, given the data you provide.

  • 06

    How do I know if my agent's performance improvement is real?

    You can use the analyze_variant_performance capability. It calculates the p-value to determine if the observed difference in conversion rates is statistically significant or likely due to chance.

  • 07

    Can I plan how long an experiment should run?

    Yes, the estimate_test_requirements capability calculates the required sample size and the estimated number of days needed to complete a test based on your daily traffic and desired sensitivity.

  • 08

    What is the difference between the frequentist and Bayesian approaches provided?

    The frequentist approach (via analyze_variant_performance) focuses on p-values and significance thresholds, while the Bayesian approach (via calculate_bayesian_probability) provides the direct probability that one variant is better than another.

Explora

Más en Statistics

Sugerencias

Conecta Agent A/B Test Calculator a Claude, Cursor, ChatGPT y más