置信水平需要根据具体的样本量来定,如果样本量比较少,比如说在数十例,那么一般选择0.05,如果样本量比较大,比如说上百例,那么需要选择0.01,如果样本量非常大,比如说上千,那么置信水平可以选择0.001甚至更小的数值。
第一类和第二类错误都是针对假设检验而言。第一类错误指假阳性错误,即将阴性结果错误判断为阳性结果。
第二类错误指假阴性错误,即将阳性结果错误判断为阴性结果。第一类和第二类错误是一对矛盾。为了减少第一类错误,需要提高显著性水平,但显著性水平过高则会增加第二类错误发生的机会。
在解决具体问题时往往需要做一个折衷的方案,在两种错误之间达到某种平衡。