質問: 有意水準について... 有意水準5%と1%では何が違うのですか!?
回答: 帰無仮説を棄却する基準が違います。 有意水準が高いほど帰無仮説が棄却されやすくなります (逆に言うと、帰無仮説が正しくても誤って棄却してしまうこと: 第一種過誤 の可能性が高くなります)。 有意水準が低いほど、帰無仮説が棄却されにくくなります (逆に言うと、帰無仮説が誤っていても、帰無仮説が棄却されないこと: 第二種過誤 の可能性が高くなります)。 医学実験のデータなど、厳密な違いを求める場合には有意水準を低くします (0.1% といったレベル)。 逆に、「このサイコロはイカサマかも...」といったちょっとした疑問を解決するならば 5% 程度にするのが適当かと思われます。