AIでA/Bテストに必要なサンプルサイズを算出する方法

希望する有意水準、検定力、および最小検出効果（MDE）を入力してください。AIが、信頼できる結果を得るために各バリエーションに必要な訪問者数を正確に算出します。計算の詳細は以下の内訳で確認できます。

1. 01

   パラメータの収集

   AIが、現在のコンバージョン率、検出したい最小効果、および希望する信頼水準を尋ねます。

   calculate_required_sample_size
2. 02

   計算の実行

   提供された統計データに基づき、各グループのサンプルサイズを算出します。

   calculate_required_sample_size
3. 03

   入力値の検証

   有意水準が0から1の間にあるかなど、入力されたパラメータが論理的に正しいかを確認します。

   calculate_required_sample_size
4. 04

   結果の報告

   最終的な訪問者数を提示し、パラメータを変更した場合にサンプルサイズがどう変化するかを説明します。

   calculate_required_sample_size

A/B Test Significance Calculator Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_fzQ1aS9NSSO5zJk9otHteGWMsIrsHlHpW7aJ8mX9/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — A/B Test Significance Calculator capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "ab-test-significance-calculator-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_fzQ1aS9NSSO5zJk9otHteGWMsIrsHlHpW7aJ8mX9/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

ワンクリックでMCPをお好みのクライアントに接続できます。認証情報は暗号化され、接続後すぐに計算を開始できます。

• 01

  AIが実際のA/Bテストを実行することはできますか？

  いいえ。AIが行うのは必要なサンプルサイズの算出のみです。実験の実施やデータの収集には、ご自身で使用しているテストプラットフォームを使用する必要があります。

• 02

  テストの終了タイミングをAIが判断しますか？

  いいえ。AIは有意性を得るために必要な訪問者数を提示します。テストの監視と、いつ終了するかを判断するのはユーザーの責任です。

• 03

  どのような入力データが必要ですか？

  ベースラインのコンバージョン率、最小検出効果（MDE）、有意水準、および統計的検定力が必要です。

• 04

  AIがテスト中のコンバージョン率を調整することはできますか？

  いいえ。AIは計算ツールであり、テストツールではありません。アナリティクスやテストソフトウェア内のデータを変更することはできません。

• 05

  現在使用しているテストツールと一緒に使えますか？

  はい。このMCPはすべてのMCP対応クライアントで動作します。現在実験に使用しているツールと併用して、計算結果を活用できます。

• A/Bテスト有意性計算機について他に質問がありますか？ Connectorのページで回答しています。 A/Bテスト有意性計算機 Connector の全機能を見る