在构造设计的实验时,通常要求试验次数尽量少并且与实验目标保持一致。但若是试验次数过少,则只能检测极大的效应。例如,对于给定的效应,t 检验统计量是响应均值的变化与响应均值标准误差之比。若只有一个误差自由度 (df),则检验临界值将超过 12。所以,要让这种近乎饱和的设计检测某个效应,该临界值必须极大。
您观察到失拟检验也有类似情况发生。该检验检测失拟的能力取决于分子与分母中的自由度。若每种仅有 1 个自由度,则您需要 F 值超过 150 才能声明在 0.05 水平下显著。若每种有 2 个自由度,则 F 值必须超过 19。为了使检验在第二种情况下显著,失拟均方必须是纯误差均方的 19 倍。此外,失拟检验对离群值也很敏感。
有关失拟检验的详细信息,请参见《拟合线性模型》手册中的失拟