有意のソースを表示

{{出典の明記|date=2013年5月}}
'''統計学的有意'''（とうけいがくてきゆうい、{{lang-en-short|statistical significance}}）は、[[確率論]]・[[統計学]]の用語で、「[[確率]]的に[[偶然]]とは考えにくく、意味があると考えられる」<ref>{{Cite Kotobank |word=有意 |encyclopedia=デジタル大辞泉 |accessdate=2022-02-10}}</ref>ことを指す。科学分野での用語として、有意である（significant）とは「注目に値するほど大きい、ないしは重要である」という意味も持つ<ref>{{Cite web |title=significant - Quick search results {{!}} Oxford English Dictionary |url=https://www.oed.com/search/dictionary/?scope=Entries&q=significant&tl=true |website=www.oed.com |access-date=2023-09-04}}</ref>。

==P値==
{{Main|P値}}
[[帰無仮説]]の下で実際にデータから計算された統計量よりも極端な（仮説に反する）統計量が観測される確率を、[[P値]]という。P値の利用に伴う諸問題を考慮した[[社会心理学]]系のジャーナル、{{仮リンク|Basic and Applied Social Psychology|en|Basic and Applied Social Psychology}}（BASP）は、帰無仮説有意性検定およびそれに類する統計学的処理を禁止すると発表した<ref>2015 T&F社のBASP誌がP値の使用禁止を発表 https://www.editage.jp/insights/a-taylor-francis-journal-announces-ban-on-p-values</ref>。

==有意水準==
'''有意水準'''α (0<α<1) は、どの程度の正確さをもって帰無仮説<math>H_0</math>を棄却するかを表す定数である。有意水準αの[[仮説検定]]は、<math>p<\alpha</math>の時に<math>H_0</math>を棄却する。このとき、「統計量はα水準で有意である」という。有意水準αは仮説<math>H_0</math>が正しいにもかかわらず仮説検定で棄却してしまう確率（第一種過誤を犯す確率）に等しい。日本工業規格では、「第一種の誤りの確率の上限値」と定義している<ref>[[JIS Z 8101]]-1 : 1999 [[統計]] − [[用語]]と[[記号]] − 第1部:[[確率]]及び一般統計用語 2.53 有意水準, [[日本規格協会]], http://kikakurui.com/z8/Z8101-1-1999-01.html</ref>
。

有意水準<math>\alpha</math>の値としては、0.05 (5%) を用いるのが一般的であるが、そのとり方は学問・調査・研究対象によっても違いがあり、[[社会科学]]などでは0.1（10%）を用いる場合もあり、厳密さが求められる[[自然科学]]では0.01（1%）などを用いる場合もある。また、データ表示に当たっては有意性に段階をつけて複数の有意水準を同時に用いることもあり、たとえば0.05水準で有意ならば * 、0.01水準と0.001水準に対してはそれぞれ ** 、 *** と表示する。

有意であるからといって「偶然ではない」と断定できるわけではなく、「偶然とは考えにくい」という意味に過ぎない。したがって、たとえば有意水準5%で有意という場合には、「実際には偶然に過ぎないのに、誤って『意味がある』と判断している」可能性が多くて5%ある。

逆に、<math>p>\alpha</math>の場合は、「有意差があるとはいえない」とまでしかならない<ref name="Nature800"/>。

=== 有意水準に対する批判 ===
2010年代初頭に入ると[[科学]]は「[[再現性の危機]]」に苦しんでいて、研究者も助成機関も出版社も、学術文献は信頼できない結果にまみれているのではないかと不安を募らせている。2017年に72人の著名な研究者が、新たな発見をしたと主張する際の証拠の統計的基準の低さが再現性の危機の一因になっているとする論文を発表した。新発見の統計的有意性を評価するために、科学者が好んで用いる有意水準<math>\alpha</math>の値は0.05から'''0.005'''に引き下げるべきであると、統計学の大家たちは主張する。

その一方、[[イリノイ工科大学]]の[[計算機科学]]者Shlomo Argamonは「実験する方法が多数ある限り、どんなに小さい有意水準<math>\alpha</math>の値を用いてもその中に一つの実験方法が偶然に有意になる可能性が極めて高い」と新しい方法論的な基準を求める。実際小さい有意水準<math>\alpha</math>の値を用いたらお蔵入り問題がより著しくなり、多数の論文が出版できなくなる<ref>2017 [https://www.natureasia.com/ja-jp/ndigest/v14/n11/%E7%B5%B1%E8%A8%88%E5%AD%A6%E3%81%AE%E5%A4%A7%E7%89%A9%E5%AD%A6%E8%80%85%E3%81%8CP%E5%80%A4%E3%81%AE%E5%88%B7%E6%96%B0%E3%82%92%E6%8F%90%E6%A1%88/89721 統計学の大物学者がP値の刷新を提案], Nature ダイジェスト</ref>。

2016年にはこの問題について、アメリカ統計協会が声明を発表<ref name="Wasserstein">{{Cite web|和書|author=Wasserstein RL, Lazar NA著、佐藤俊哉訳 |date=2017-04-23 |url=https://www.biometrics.gr.jp/news/all/ASA.pdf |title=「統計的有意性とP値に関するASA声明（原題：The ASA’s statement on p-values: Context, process, and purpose. 2016; 70: 129-133. ） |publisher= The American Statistician |accessdate=2021-04-16}}</ref>し、「どんなに小さい効果でも、サンプルサイズが大きかったり測定精度が十分高ければ小さいP値となりうる」「P値は仮説やその計算の背後にある仮定に基づいたデータについての記述であり、仮説や背後にある仮定自身についての記述ではない」など、P値についての基本的な問題点を整理し、「P値は、それだけでは統計モデルや仮説に関するエビデンスの、よい指標とはならない」ことを強調している。

2019年には科学者800人超が、『''[[ネイチャー]]''』に署名し、P値が有意水準より大きい場合、「有意差があるとはいえない」とまでしかならないが、誤って「有意差がない＝薬などの効果がない」と推論する文献は791文献中の51%に見当たったということで、「統計的有意性」を使うのをやめて[[信頼区間]]を互換区間という言葉に言い換えて使用すべきだとされた<ref name="Nature800">{{Cite web|和書|author=井上輝一 |date=2019-03-26 |url=https://www.itmedia.co.jp/news/articles/1903/26/news112.html |title=「“統計的に有意差なし”もうやめませんか」　Natureに科学者800人超が署名して投稿 |publisher=ITmedia |accessdate=2019-05-21}}</ref>。

==多重比較==
{{see also|多重比較問題}}
同種の検定を繰り返して全体での有意性の有無を判断する場合（'''多重比較'''）、1回の検定に対する有意水準をαとすると、k回の同様の試行に対して一度でも有意な結果を得る確率 <math>\alpha_k</math> はk回の試行の独立性に依存する。たとえば、k回の試行が独立であるときは、<math>\alpha_k = 1-(1-\alpha)^k</math> となる。しかしながら、<math>\alpha_k</math> の上限はkαであることから、1回の検定に対する有意水準をα/kと定めれば、k回の同様の試行に対して有意水準が高々αの検定を行うことができる。これを[[ボンフェローニ補正]]という。ただし、この方法ではkの値が大きくなるにつれて有意水準が下がり、実用性に乏しくなる。そのため、より検定力の高い手法が提案されている。古くはLSD法が、ボンフェローニ法と共に計算が容易であるため好まれた。今日では、[[テューキーの範囲検定]]やRyan法が最も一般的である。また、[[シェッフェの方法]]やWSD法も見かけるようになっている。これらは、[[分散分析]]で3水準以上の要因の主効果が有意であった場合の下位検定にも用いられる。

==有意差==
帰無仮説を「2つの[[母数]]に差がない」という形にした場合には、帰無仮説が棄却されることで「2つの母数の間には'''有意差'''がある」という結論が導かれる。

==信頼区間と仮説検定==
統計量Xが、ある母数θの推定量である場合を考える。このとき、有意水準αで帰無仮説が棄却されないようなXのとりうる範囲は、信頼水準<math>1-\alpha</math>に対するθの信頼区間と等しい。

たとえば、標本平均Xを母平均θの推定量とみなすと、帰無仮説：<math>\theta = \theta_0 </math>が有意水準5%で棄却されないXの範囲は、<math>\theta_0</math>の95%信頼区間と一致する。

== 脚注 ==
{{脚注ヘルプ}}
{{reflist}}

== 参考文献 ==
* {{Cite book|和書|author=西岡康夫|year=2013|title=数学チュートリアル やさしく語る 確率統計|publisher=[[オーム社]]|isbn=9784274214073}}
* {{Cite book|和書|author=伏見康治|authorlink=伏見康治|year=1942|title=[[確率論及統計論]]|publisher=[[河出書房]]|isbn=9784874720127|url= http://ebsa.ism.ac.jp/ebooks/ebook/204}}
* {{Cite book|和書|author=日本数学会|authorlink=日本数学会|year=2007|title=数学辞典|publisher=[[岩波書店]]|isbn=9784000803090}}
* [[JIS Z 8101]]-1:1999 [[統計]] − [[用語]]と[[記号]] − 第1部:[[確率]]及び一般統計用語, [[日本規格協会]], http://kikakurui.com/z8/Z8101-1-1999-01.html

== 関連項目 ==
* [[再現性]]
**  [[再現性の危機]]
* [[確率]]
** [[確率論]]
* [[統計学]]
** [[推計統計学]]
** [[仮説検定]]
** [[信頼区間]]

{{統計学}}
{{DEFAULTSORT:ゆうい}}
[[Category:統計的仮説検定]]
[[Category:数学に関する記事]]