• ESTATÍSTICA
  • DECISÃO
  • DADOS
  • HUMANO

Como validar a significância de testes A/B com sua IA

Conecte este MCP ao seu cliente de IA para transformar números brutos de conversão em certeza estatística. Seu agente cuida dos cálculos para você focar nos resultados.

Pergunte à IA sobre esta página

Resposta rápida

Como verifico se meus resultados de teste A/B são realmente significativos?

Forneça os dados de conversão do seu controle e da sua variante para a IA, e ela executará um teste t independente para calcular o p-valor. Isso mostra se a diferença que você está vendo é real ou apenas ruído. Você receberá um detalhamento claro da significância estatística de cada teste.

Os resultados

O que sua análise produz

Assim que você fornecer os dados, sua IA entregará estes insights específicos.

ESTATÍSTICA

Cálculo do p-valor

A IA calcula o p-valor exato do seu experimento. Esse número indica a probabilidade de seus resultados terem ocorrido por acaso.

DECISÃO

Veredito de significância

Seu agente interpreta os cálculos para dizer se a variante é vencedora, perdedora ou se o teste é inconclusivo. Você recebe uma resposta direta baseada em limiares padrão.

DADOS

Resumo de métricas

A IA organiza as médias, desvios padrão e tamanhos de amostra do controle e da variante. Ela limpa os números para garantir a precisão dos cálculos.

HUMANO

Direcionamento estratégico

A IA fornece a matemática, mas você decide se o aumento de conversão justifica o custo de implementação. Você usa a verdade estatística para tomar decisões de negócio.

O fluxo

O que sua IA faz quando os dados chegam.

A IA assume o trabalho pesado dos cálculos estatísticos assim que você fornece os números do experimento.

  1. Ingestão de dados

    Seu agente lê as contagens de conversão e os tamanhos de amostra da fonte de dados fornecida.

    calculate_t_test

  2. Cálculo estatístico

    A IA executa a fórmula do teste t independente para encontrar a diferença entre os grupos.

    calculate_t_test

  3. Verificação de significância

    O agente compara o p-valor resultante com o nível alfa escolhido para verificar a significância.

    calculate_t_test

  4. Relatório de resultados

    Sua IA resume as descobertes em um formato legível que destaca o vencedor.

    calculate_t_test

Teste

Copie estes comandos para começar.

Use estes prompts para iniciar sua análise.

Pontos de partida

Substitua as informações entre colchetes pelos seus números ou nomes de arquivos reais.

jstat Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_EmtZwk2XpPdUyFvH15enT6zX1o0mdbBKs430ALWM/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — jstat capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "t-test-statistics-engine-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_EmtZwk2XpPdUyFvH15enT6zX1o0mdbBKs430ALWM/mcp"
    }
  }
}
Copie no chat04

  • Execute um teste t neste arquivo CSV para ver se o aumento de conversão na variante B é significativo.

  • Compare estes dois grupos: o Controle tem 500 conversões em 10.000 visitantes, e a Variante A tem 550 conversões em 10.000 visitantes.

  • Analise os dados do teste A/B na minha Google Sheet e me diga se o p-valor está abaixo de 0,05.

  • Verifique a significância deste experimento: a média do Controle é 0,12 e a média da Variante B é 0,15, com tamanhos de amostra de 1200 cada.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Comece aqui

Conecte o T-Test Statistics Engine uma vez e depois é só perguntar.

Uma única conexão dá à sua IA as ferramentas matemáticas necessárias. Suas credenciais permanecem criptografadas e seguras conosco.

Conectar T-Test Statistics Engine à sua IA

FAQ

Como esta tarefa funciona

  • 01

    A IA pode alterar meus dados de conversão originais?

    Não. A IA apenas lê seus dados para realizar os cálculos; ela não pode modificar seus arquivos ou bancos de dados de origem.

  • 02

    A IA decide qual variante deve ser implementada?

    Não. A IA fornece a significância estatística e o p-valor, mas a decisão final de aplicar a mudança é sua.

  • 03

    Que tipo de dados ela precisa?

    Ela precisa do número de sucessos (conversões) e do tamanho total da amostra, tanto para o grupo de controle quanto para o grupo variante.

  • 04

    Ela pode rodar um teste Z em vez de um teste t?

    Não. Este MCP específico foi construído para realizar testes t independentes.

  • 05

    Ela rodará testes automaticamente toda vez que meus dados forem atualizados?

    Não. Você deve solicitar à sua IA que execute o cálculo quando estiver pronto para analisar os resultados.

  • Mais dúvidas sobre o T-Test Statistics Engine? A página do Connector responde. Veja tudo o que o Connector T-Test Statistics Engine pode fazer

Conecte jstat ao Claude, Cursor, ChatGPT e outros