p値

友達が投げたコインが10回連続で表になったとき、「イカサマがないとしたら、こんな偶然が起きる確率はどれくらい?」を計算した数字です。

定義 p値(有意確率)とは、実験や観察で得られた結果が「単なる偶然によって生じた確率」を0から1の間の数値で表した統計指標です。p値が非常に小さいということは、特別な要因が何もないのに偶然だけでこのような結果が出る可能性は極めて低い、ということを意味します。

コイン投げの勝負から考えてみましょう

友達とコイン投げの勝負をしていて、相手が投げたコインが10回連続で表ばかり出たと想像してみてください。私たちは自然と「コインに何か仕掛けがあるんじゃないの?」と強い疑いを抱きますよね。

通常のコインで10回連続で表が出る確率は、約0.1%にすぎません。このように「コインはごく正常である」という前提のもとで、今のように極端な結果が出る確率を数値で計算したものが、まさに「p値」です。

コイン投げのp値が0.001(0.1%)なら、「コインにイカサマがないのに偶然こうなる確率」が1000分の1しかないという意味です。これほど偶然の確率が低ければ、私たちは常識的に偶然という仮定を捨て、友達のイカサマを確信するようになります。

コイン10回連続表とp値(0.001)の正規分布図 実際の結果: 10回連続表 p=0.001 (稀な偶然: 0.1%) 表0回 表5回(最頻) 表10回

植物の栄養剤実験と「0.05」の基準ライン

植物に新しいエコ栄養剤を与えたところ、水だけを与えた鉢植えよりもぐんぐん育ったとします。このとき、よく育った理由が栄養剤のおかげなのか、それともたまたま丈夫な種だったからなのかを見分けなければなりません。

科学者はこのような場合、統計的に仮説を検定します。学術界では通常、偶然である確率が5%未満、つまりp値が0.05を下回るときを有意な基準とします。これを「有意水準」と呼びます。

もし栄養剤実験のp値が0.02(2%)だった場合、「栄養剤に何の効果もないのに偶然よく育った確率」が2%にすぎないという意味です。基準ラインの5%よりずっと低いため、研究者は偶然という説明を退け、栄養剤の成長促進効果を認めてもらうことができます。

もう少し正確に言うと

もう少し正確に言えば、p値は「新しい発見や主張が本当に正しい確率」を表す数字ではありません。あくまで「効果がまったくないという前提が真であるとき」に、いま観察されたデータやそれ以上に極端なデータが偶然得られる条件付き確率を意味します。

また、p値が0.05より小さかったからといって、その栄養剤や技術が劇的な大発明だというわけではありません。実験対象の鉢植えの数を何万個にも増やせば、目に見えないほどごくわずかな差であってもp値が0.05以下になり、有意と出てしまうことがあるからです。

結局のところ、p値はありえない偶然をふるい落とす優れたシグナルですが、結果の重要性や真実そのものをすべて保証するわけではありません。そのため現代の研究者は、p値とあわせて実際の差の大きさである「効果量」や「信頼区間」も慎重に確認します。

🤔 よくある誤解

✕ 誤解

p値が0.01なら、自分の主張が正しい確率が99%という意味だ。

✓ 事実

p値は仮説が正しい確率ではありません。「効果がまったくない」と仮定したときに、今回のような結果が偶然観察される確率にすぎません。

🧺 日常で出会う場面

1 新しい教育法を導入したクラスの成績が上がったとき、それが単なる偶然ではないことをp値で証明します。
2 リニューアルしたWebサイトのボタンのクリック率アップが単なる偶然かどうかを確認するA/Bテストで使われます。
💡 つまり ひとことで

p値は結果が「単なる偶然である確率」を表し、通常0.05未満のときに偶然ではないと判断します。