理解置信区间和置信水平

置信区间是一个有可能含有未知总体参数的值的范围。如果随机采样许多次，一个特定比例的置信区间将含有总体均值，这个比例叫做置信水平。注意：置信水平并不是一个特定的置信区间含有总体参数的概率。一个95%的置信区间表明来自同一个总体的95%的样本将会“生产”出包含总体参数的置信区间。置信水平表示“生产”出精确的区间的理论能力。对于一个特定的置信区间，要么含有总体参数，要么没有，不存在概率的问题。因为总体参数未知，所以也不知道这个置信区间到底含不含有总体参数。

你可以使用P值或者置信区间来决定研究结果是否统计显著，它们的判定结果是一样的。置信水平等于1-显著性水平alpha。如果P值小于显著性水平alpha,或者置信区间没有含有零假设的值，结果都认为是统计显著的。P值小于显著性水平alpha等价于置信区间没有含有零假设的值。

在实际应用中，P值和置信区间并不一定有用，这个effect可能小到没有什么用