学生t检验
学生t 检验(英语:Student's t-test)是指零假设成立时的任一检验统计有学生t分布的统计假设检验,属于参数统计。学生t检验常作为检验一群来自正态分配总体的独立样本之期望是否为某一实数,或是二(两)群来自正态分配总体的独立样本之期望的差是否为某一实数。举个简单的例子,在某个学校中我们可以从某个年级中随机抽样一群男生,以检验该年级男生与全校男生之身高差异程度是否如我们所假设的某个值。
由来[编辑]
学生t检验是威廉·戈塞为了观测酿酒品质于1908年所提出的,“学生 (student)”则是他的笔名。[1][2][3][4] 基于克劳德·健力士(Claude Guinness)聘用从牛津大学和剑桥大学出来的最好的毕业生,[2]以将生物化学及统计学应用到健力士工业流程的创新政策,戈塞受雇于都柏林的健力士酿酒厂担任统计学家。戈塞提出了t检验以降低啤酒重量监控的成本。戈塞于1908年在《Biometrika》期刊上公布t检验,但因其老板认为其为商业机密而被迫使用笔名,统计学论文内容也跟酿酒无关。实际上,其他统计学家是知道戈塞真实身份的。
应用[编辑]
常见的应用有:
- 单样本检验:检验一个正态分布的总体的均值是否在满足零假设的值之内,例如检验一群军校男生的身高的平均是否符合全国标准的170公分界线。
- 独立样本 <math>t</math> 检验(双样本):其零假设为两个正态分布的总体的均值之差为某实数,例如检验二群人之平均身高是否相等。若两总体的方差是相等的情况下(同质方差),自由度为两样本数相加再减二;若为异方差(总体方差不相等),自由度则为Welch自由度,此情况下有时被称为Welch检验。
- 配对样本 <math>t</math> 检验(成对样本 <math>t</math> 检验):检验自同一总体抽出的成对样本间差异是否为零。例如,检测一位病人接受治疗前和治疗后的肿瘤尺寸大小。若治疗是有效的,我们可以推定多数病人接受治疗后,肿瘤尺寸将缩小。
- 检验一回归模型的偏回归系数是否显著不为零,即检验解释变量 <math> X </math> 是否存在对被解释变量Y的解释能力,其检验统计量称之为t-比例(t-ratio)。
前提假设[编辑]
大多数的 <math>t</math> 检验之统计量具有<math>t = \frac{Z}{s}</math>的形式,其中 <math>Z</math> 与 <math>s</math> 是已知资料的函数。<math>Z</math> 通常被设计成对于备择假设有关的形式,而 <math>s</math> 是一个比例参数使 <math>t</math> 服从于 <math>t</math> 分布。以单样本 <math>t</math> 检验为例,<math>Z = \frac{\bar{X}}{\frac{\sigma}{\sqrt{n}}}</math>,其中<math>\bar{X}</math>为样本平均数,<math>n</math>为样本数,<math>\sigma</math>为总体标准差。至于 <math>s</math> 在单样本 <math>t</math> 检验中为<math>\frac{\hat{\sigma}}{\sigma}</math>,其中<math>\hat{\sigma}</math>为样本的标准差。在符合零假说的条件下,<math>t</math> 检验有以下前提:
- <math>Z</math> 服从标准正态分布
- <math>(n-1)s^2</math> 服从自由度<math>(n-1)</math>的卡方分布
- <math>Z</math> 与 <math>s</math> 互相独立
计算[编辑]
单样本t检验[编辑]
检验零假设为一群来自正态分配独立样本 <math>x_i</math> 之总体期望 <math>\mu</math> 为 <math>\mu_0</math>可利用以下统计量
- <math> t = \frac{\overline{x} - \mu_0}{\frac{s}{\sqrt{n}}} </math>
其中<math>i = 1 \ldots n</math>,<math>\overline{x} = \frac{\sum_{i=1}^{n} x_i}{n}</math>为样本平均数,<math>s = \sqrt{\frac{\sum_{i=1}^{n}(x_i-\overline{x})^2}{n-1}} </math>为样本标准差,<math> n </math> 为样本数。该统计量 <math>t</math> 在零假设:<math> \mu=\mu_0 </math> 为真的条件下服从自由度为 <math> n-1 </math> 的t分布。
配对样本t检验[编辑]
配对样本 <math>t</math> 检验可视为单样本 <math>t</math> 检验的扩展,不过检验的对象由一群来自正态分配独立样本更改为两配对样本之观测值之差。
若两配对样本 <math> x_{1i} </math> 与 <math> x_{2i} </math> 之差为 <math> d_i = x_{1i} - x_{2i} </math> 独立且来自正态分配,则 <math> d_i </math> 之总体期望 <math>\mu</math> 是否为 <math>\mu_0</math> 可利用以下统计量
- <math> t = \frac{\overline{d} - \mu_0}{s_d/\sqrt{n}} </math>
其中<math>i = 1 \ldots n</math>,<math>\overline{d} = \frac{\sum_{i=1}^{n} d_i}{n}</math>为配对样本差值之平均数,<math>s_d = \sqrt{\frac{\sum_{i=1}^{n}(d_i-\overline{d})^2}{n-1}} </math>为配对样本差值之标准差,<math> n </math> 为配对样本数。该统计量 <math>t</math> 在零假设:<math> \mu=\mu_0 </math> 为真的条件下服从自由度为 <math> n-1 </math> 的t分布。
独立双样本t检验[编辑]
同质方差假设 (Homoscedasticity)、样本数相等[编辑]
若两独立样本 <math> x_{1i} </math> 与 <math> x_{2i} </math> 具有相同之样本数 <math> n </math>,且来自两个总体方差相同(同质方差假设)的正态分配,则两总体之期望差 <math> \mu_1- \mu_2 </math> 是否为 <math>\mu_0</math> 可利用以下统计量
- <math> t = \frac{\overline{x}_1 - \overline{x}_2 - \mu_0}{\sqrt{\frac{2s_p^2}{n}}} </math>
其中<math>i = 1 \ldots n</math>,<math>\overline{x}_1 = (\sum_{i=1}^n x_{1i}) / n</math>及<math>\overline{x}_2 = \frac{\sum_{i=1}^n x_{2i}}{n}</math>为两样本各自的平均数,<math>s^2_p = \frac{\sum_{i=1}^n (x_{1i}-\overline{x}_1)^2 + \sum_{i=1}^n (x_{2i}-\overline{x}_2)^2}{2n-2} </math>为样本之共同方差。该统计量 <math>t</math> 在零假设:<math>\mu_1 - \mu_2 = \mu_0 </math> 为真的条件下服从自由度为 <math>2n-2 </math> 的t分布。
同质方差假设 (Homoscedasticity)、样本数不相等[编辑]
若两独立样本 <math> x_{1i} </math> 与 <math>x_{2j} </math> 具有不相同之样本数 <math>n_1 </math> 与 <math>n_2 </math>,且来自两个总体方差相同(同质方差假设)的正态分配,则两总体之期望之差 <math> \mu_1- \mu_2 </math> 是否为 <math>\mu_0</math> 可利用以下统计量
- <math> t = \frac{\overline{x}_1 - \overline{x}_2 - \mu_0}{\sqrt{\frac{s_p^2}{n_1} + \frac{s_p^2}{n_2}}} </math>
其中<math>i = 1 \ldots n_1</math>,其中<math>j = 1 \ldots n_2</math>,<math>\overline{x}_1 = \frac{\sum_{i=1}^n x_{1i}}{n}</math> 及 <math>\overline{x}_2 = \frac{\sum_{i=1}^n x_{2i}}{n}</math> 为两样本各自的平均数,<math>s^2_p = \frac{( \sum_{i=1}^n (x_{1i}-\overline{x}_1)^2 + \sum_{j=1}^n (x_{2j}-\overline{x}_2)^2}{n_1 + n_2 - 2} </math> 为两样本共同之方差。该统计量 <math>t</math> 在零假设:<math>\mu_1 - \mu_2 = \mu_0 </math> 为真的条件下服从自由度为 <math>n_1 + n_2 -2 </math> 的t分布。
异方差假设 (Heteroscedasticity)[编辑]
若两独立样本 <math> x_{1i} </math> 与 <math>x_{2j} </math> 具有相同或不相同之样本数 <math>n_1 </math> 与 <math>n_2 </math>,且两者总体方差不相等(异方差假设)的正态分配,则两总体之期望之差 <math> \mu_1- \mu_2 </math> 是否为 <math>\mu_0</math> 可利用以下统计量
- <math> t = \frac{\overline{x}_1 - \overline{x}_2 - \mu_0}{\sqrt{\frac{s_1^2}{n_1} + \frac{s_2^2}{n_2}}} </math>
其中<math>i = 1 \ldots n_1</math>,其中 <math>j = 1 \ldots n_2</math>,<math>\overline{x}_1 = \frac{\sum_{i=1}^{n_1} x_{1i}}{n_1}</math> 及 <math>\overline{x}_2 = \frac{\sum_{j=1}^{n_2} x_{2j}}{n}</math> 为两样本各自的平均数,<math>s^2_1 =\frac{\sum_{i=1}^n (x_{1i}-\overline{x}_1)^2}{n_1 - 1}</math> 及 <math>s^2_2 =\frac{\sum_{j=1}^n (x_{2j}-\overline{x}_2)^2}{n_2 - 1}</math> 分别为两样本之方差。该统计量t在零假设:<math>\mu_1 - \mu_2 = \mu_0 </math> 为真的条件下服从自由度为
- <math> df = \frac{ (\frac{s_1^2}{n_1} + \frac{s_2^2}{n_2})^2 }{ \frac{(\frac{s_1^2}{n_1})^2}{n_1-1} + \frac{(\frac{s_2^2}{n_2})^2}{n_2-1}} </math>
之t分布。这种方法又常称为Welch检验。
其它相关检验[编辑]
偏回归系数是否为零之检验[编辑]
以简单线性回归为例[编辑]
模型假设:
- <math> y_i = \alpha + \beta x_i + \varepsilon_i, </math>
其中 <math> x_i </math>,<math> i=1,\cdots,n </math> 为已知,<math> \alpha </math> 与 <math> \beta </math> 为未知系数,<math> \varepsilon_i </math> 为残差独立且服从期望0且方差 <math> \sigma^2 </math> 未知的正态分布,<math> y_i </math>,<math> i=1,\cdots,n </math> 为观测值。我们可以检验回归系数 <math> \beta </math> 是否相等于特定的 <math> \beta_0 </math>,通常使 <math> \beta_0=0 </math> 以检验 <math> x_i </math> 对 <math> y_i </math> 是否存在解释能力,在此例(简单线性回归模型)即为检验回归式之斜率是否为零。
令<math>\widehat\alpha</math>与<math>\widehat\beta</math>为最小二乘法之估计值,<math>SE_{\widehat\alpha}</math>与<math>SE_{\widehat\beta}</math>为最小二乘法估计值之标准误差,则
- <math>
t = \frac{\widehat\beta - \beta_0}{ SE_{\widehat\beta} }\sim\mathcal{T}_{n-2} </math>
在零假设为 <math> \beta=\beta_0 </math> 的情况下服从自由度为 <math> n-2 </math> 之 <math> t </math> 分布,此检验统计量被称作“t比率 (t-ratio)”,其中
- <math>
SE_{\widehat\beta} = \frac{\sqrt{\frac{1}{n - 2}\sum_{i=1}^n (y_i - \widehat y_i)^2}}{\sqrt{ \sum_{i=1}^n (x_i - \overline{x})^2 }} </math>
由于 <math> \widehat\varepsilon_i = y_i - \widehat y_i = y_i - (\widehat\alpha + \widehat\beta x_i) </math>为残差(即估计误差),而 <math> \text{SSR} = \sum_{i=1}^n \widehat\varepsilon_i^{\;2} </math> 为残差之离均平方和,我们可改写t为
- <math> t = \frac{(\widehat\beta - \beta_0)\sqrt{n-2}}{ \sqrt{\frac{\text{SSR}}{\sum_{i=1}^n \left(x_i - \overline{x}\right)^2}}}</math>
另请参阅:F检验
电脑软件[编辑]
大多数的试算表软件及统计软件,诸如QtiPlot、OpenOffice.org Calc、LibreOffice Calc、Microsoft Excel、SAS、SPSS、Stata、DAP、gretl、R、Python ([1](页面存档备份,存于互联网档案馆))、PSPP、Minitab等,都可以进行t检验运算。
| 编程语言/软件程序 | 函数 | 注释 |
|---|---|---|
| Microsoft Excel 2010 之前的版本 | TTEST(array1, array2, tails, type) |
参见 [2] |
| Microsoft Excel 2010 及更高版本 | T.TEST(array1, array2, tails, type) |
参见 [3](页面存档备份,存于互联网档案馆) |
| LibreOffice | TTEST(Data1; Data2; Mode; Type) |
参见 [4](页面存档备份,存于互联网档案馆) |
| Google Sheets | TTEST(range1, range2, tails, type) |
参见 [5](页面存档备份,存于互联网档案馆) |
| Python | scipy.stats.ttest_ind(a, b, axis=0, equal_var=True) |
参见 [6](页面存档备份,存于互联网档案馆) |
| Matlab | ttest(data1, data2) |
参见 [7](页面存档备份,存于互联网档案馆) |
| Mathematica | TTest[{data1,data2}] |
参见 [8](页面存档备份,存于互联网档案馆) |
| R | t.test(data1, data2) |
|
| SAS | PROC TTEST |
参见 [9] |
| Java | tTest(sample1, sample2) |
参见 [10](页面存档备份,存于互联网档案馆) |
| Julia | EqualVarianceTTest(sample1, sample2) |
参见 [11] |
| Stata | ttest data1 == data2 |
See [12](页面存档备份,存于互联网档案馆) |
参见[编辑]
参考文献[编辑]
- ^ Richard Mankiewicz, The Story of Mathematics (Princeton University Press), p.158.
- ^ 2.0 2.1 约翰·J·奥康纳; 埃德蒙·F·罗伯逊, Gosset, MacTutor数学史档案 (English)
- ^ Fisher Box, Joan. Guinness, Gosset, Fisher, and Small Samples. Statistical Science. 1987, 2 (1): 45–52. JSTOR 2245613. doi:10.1214/ss/1177013437.
- ^ 存档副本 (PDF). [2013-08-10]. (原始内容 (PDF)存档于2017-05-16).