有意水準

有意水準とは、統計的仮説検定において、帰無仮説を棄却して対立仮説を採択する際の判断基準となる確率のことです。通常は5パーセントや1パーセントといった値が設定されます。この値は、偶然によってその結果が得られる可能性をどれだけ許容するかを決める閾値です。

検定のプロセスでは、仮説が正しいと仮定したときに現在のデータが得られる確率（p値）を計算します。もし計算されたp値が有意水準よりも小さければ、仮説はあり得ないとして棄却されます。例えば有意水準を5パーセントにした場合、偶然に起こる確率が5パーセント未満の珍しい事象が起きたとき、それは偶然ではなく意味のある差（有意差）があると判断します。

基本情報技術者試験などの統計分野で問われます。混同しやすいのは有意差の有無ですが、有意差があるということは、その結果が偶然ではない可能性が高いことを意味します。有意水準を厳しく（小さく）すると、誤った判断をするリスクは減りますが、本当に差がある場合を見逃すリスクも増えるというトレードオフの関係に注意しましょう。