区間は「揺れ」を残す
終了実験では、B−Aの率差と、指定した有意水準に対応するWald信頼区間を表示します。区間が0をまたぐときも、勝者を断定しません。
集計数だけで、差の輪郭を読む
A/B TESTING FIELD NOTE NO.60
比較実験の「どれだけ集めるか」と「どれくらい揺れるか」を、ひとつの標本カードに。勝敗ではなく、次の判断に使える見取り図をつくります。
READ THE QUESTION FIRST
まだ実験を始める前なら「必要標本数」。実験が終わって集計済みなら「終了実験の確認」。どちらも、AとBの集計値だけで動きます。
CARD A / DESIGN
CARD B / OBSERVATION
FIELD NOTE / LOCAL ONLY
集計数と設定だけを、このブラウザのlocalStorageへ明示的に保存します。自動送信・解析・ログインはありません。
METHOD / SCOPE
終了実験では、B−Aの率差と、指定した有意水準に対応するWald信頼区間を表示します。区間が0をまたぐときも、勝者を断定しません。
各群の母数が30以下、または成功・失敗が5未満の群では正規近似のため表示不可とします。別の厳密法を装って補いません。
ユーザー単位のデータ、配信、広告API、追跡は扱いません。保存はボタンを押したときだけで、削除も同じ画面からできます。