- 統計
- 判断
- データ
- 戦略
すぐに答え
A/Bテストの結果が本当に有意かどうか、どうすれば確認できますか?
コントロール群とバリエーション群のコンバージョンデータをAIに渡すだけで、AIが独立t検定を実行してp値を算出します。これにより、見えている差が真の成果なのか、単なる誤差なのかが判明します。各テストの統計的有意性が明確に示されます。
分析結果
分析によって得られるもの
データを入力すると、AIは以下の具体的なインサイトを提供します。
統計
p値の算出
AIが実験の正確なp値を計算します。この数値により、結果が偶然に起こった確率がわかります。
判断
有意性の判定
エージェントが計算結果を解釈し、バリエーションが「勝ち」か「負け」か、あるいは「判定不能」かを伝えます。標準的な閾値に基づいた分かりやすい回答が得られます。
データ
指標の要約
コントロール群とバリエーション群の平均値、標準偏差、サンプルサイズをAIが整理します。計算の正確性を保つため、数値が適切に処理されます。
戦略
意思決定の指針
AIは数学的な根拠を示しますが、その改善が導入コストに見合うかどうかを決めるのはあなたです。統計的な事実をビジネスの判断へと繋げてください。
ワークフロー
データが届いた際、AIが行う処理
実験データを入力すると、AIが統計計算の重労働をすべて引き受けます。
データの読み込み
エージェントが提供されたデータソースからコンバージョン数とサンプルサイズを読み取ります。
calculate_t_test統計計算
AIが独立t検定の公式を実行し、グループ間の差を算出します。
calculate_t_test有意性の検証
エージェントが算出されたp値を設定した有意水準と比較し、有意差があるかを確認します。
calculate_t_test結果のレポート
AIが分析結果をまとめ、どのバリエーションが優れていたかを分かりやすく報告します。
calculate_t_test
試してみる
以下のプロンプトをコピーして開始してください。
これらのプロンプトを使って分析を開始できます。
出発点
括弧内の情報は、実際の数値やファイル名に書き換えてください。
jstat Connector
準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。
https://edge.vinkius.com/vk_preview_EmtZwk2XpPdUyFvH15enT6zX1o0mdbBKs430ALWM/mcpClaude Desktop
以下の手順で数秒で接続できます。
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — jstat capabilities are ready to use.
{
"mcpServers": {
"t-test-statistics-engine-mcp": {
"url": "https://edge.vinkius.com/vk_preview_EmtZwk2XpPdUyFvH15enT6zX1o0mdbBKs430ALWM/mcp"
}
}
}このCSVファイルを対象にt検定を実行し、バリエーションBのコンバージョン上昇が有意かどうかを教えてください。
次の2つのグループを比較してください。コントロール群は訪問者10,000人に対しコンバージョン500、バリエーションAは訪問者10,000人に対しコンバージョン550です。
Google スプレッドシートにあるA/Bテストのデータを分析し、p値が0.05を下回っているか教えてください。
この実験の有意性を確認してください。コントロール群の平均は0.12、バリエーションBの平均は0.15、サンプルサイズはそれぞれ1200です。
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
ここから始める
T-Test Statistics Engineを一度接続すれば、すぐに質問できます。
一度接続するだけで、AIに必要な数学的ツールが備わります。認証情報はVinkius側で暗号化され、安全に管理されます。
T-Test Statistics EngineをAIに接続するFAQ
機能の詳細
- 01
AIが元のコンバージョンデータを書き換えることはありますか?
いいえ。AIは計算を行うためにデータを読み取るだけで、元のファイルやデータベースを修正することはありません。
- 02
どのバリエーションを採用するか、AIが決定するのですか?
いいえ。AIは統計的な有意性とp値を提供しますが、最終的に変更を適用するかどうかの判断を下すのはあなたです。
- 03
どのようなデータが必要ですか?
コントロール群とバリエーション群、それぞれの成功数(コンバージョン数)と総サンプルサイズが必要です。
- 04
t検定ではなくZ検定を実行することはできますか?
いいえ。このMCPは独立t検定を実行するために設計されています。
- 05
データが更新されるたびに、自動的にテストが実行されますか?
いいえ。分析の準備が整った際に、AIに対して計算を実行するようプロンプトを入力する必要があります。
T-Test Statistics Engineについて他に質問がありますか?コネクタのページで詳細を確認できます。 T-Test Statistics Engine Connectorの全機能を見る
『jstat』を Claude、Cursor、ChatGPT などに接続
