A/Bテストを正しく行うための前提として最も適切なものはどれか。

正解はDです。A/Bテストは、比較したい1つの要素だけを変えたA案・B案を同じ期間に並行配信し、成果を比べる手法です。複数要素を同時に変えるとどれが効いたか分離できません。別々の期間に出すと外部要因が混ざります。1要素・同期間・十分なサンプルが基本前提です。

核心は「1要素ずつ・同期間で比べる」点です。何を変えたのかを1つに限定しなければ原因を特定できない、という条件付けの考え方が問われています。

テストするときは、見出し・ボタン・画像などを一度に1つだけ変えるようにしましょう。同じ期間で配信し、十分なデータがたまるまで結論を急がないことが大切です。変更履歴を残しておくと検証が効果的になります。

なぜDが正解か

A/Bテストの目的は「どの変更が成果に効いたか」を切り分けることです。そのため変える要素は1つに限定し、同じ期間に並行配信して外部条件をそろえ、十分なサンプルで比較します。これにより差の原因を1要素に帰属できます。

なぜ他の選択肢が誤りか

Aの「同時に複数要素を変える」は、どの変更が効いたか分離できません。Bの「別々の期間に出す」は季節やキャンペーンなどの外部要因が混ざり、比較が公平になりません。Cの「数十アクセスで即確定」はサンプルが不足し、偶然の差で誤った勝敗を出してしまいます。