15 中心极限定理的应用

查看大图

中心极限定理解释了为什么很多样本均值会近似正态。它是置信区间、A/B 测试和误差分析的基础。

查看大图

我会确认样本是否足够、是否近似独立。条件不满足时，正态近似会变弱。

在上一篇中，我们探讨了大数法则，了解了如何通过增加样本量来提升估计值的准确性。而今，我们将重点讨论“中心极限定理”及其在实际中的应用。中心极限定理是概率论中的一个重要定理，它在许多实际问题和AI领域中都得到了广泛应用。

什么是中心极限定理？

中心极限定理指出，当样本量足够大时，来自任意分布的独立随机变量的均值的分布趋向于正态分布（钟形曲线），无论原始变量的分布形状如何。这一定理是很多统计方法和机器学习算法的基础。

查看大图

应用中心极限定理时，先看样本是否独立同分布、样本量是否足够、均值方差是否可用，再做正态近似。

具体来说，如果我们有一组独立同分布的随机变量 $X_1, X_2, \ldots, X_n$，其期望值为 $\mu$，方差为 $\sigma^2$，那么样本均值 $\bar{X} = \frac{1}{n} \sum_{i=1}^n X_i$ 的分布在样本量 $n$ 较大时，将近似服从正态分布，即：

$$\bar{X} \sim N\left(\mu, \frac{\sigma^2}{n}\right)$$

这里，$N\left(\mu, \frac{\sigma^2}{n}\right)$ 表示均值为 $\mu$、方差为 $\frac{\sigma^2}{n}$ 的正态分布。

中心极限定理的实际应用

查看大图

查看大图

回看《中心极限定理的应用》时，不必一次做大项目，先用一条简单样例确认主线是否清楚。

如果《中心极限定理的应用》还没完全消化，可以从这张卡片的四个动作重新走一遍。

1. 置信区间的估计

查看大图

学习《中心极限定理的应用》不必一口气吃完所有细节。先挑一个能动手验证的小问题，再顺着图和正文补齐概念。

在统计学中，中心极限定理常被用来构造置信区间。如果我们希望估计一个总体均值 $\mu$，我们可以通过样本均值 $\bar{X}$ 来进行估计，然后根据中心极限定理，构造其置信区间。

假设我们从某个总体中随机抽取了 $n$ 个样本，计算得到了样本均值 $\bar{X}$ 和样本标准差 $S$。我们可以利用中心极限定理来建立置信区间：

$$\bar{X} \pm z_{\alpha/2} \cdot \frac{S}{\sqrt{n}}$$

其中，$z_{\alpha/2}$ 是标准正态分布的分位数，在给定置信水平 $\alpha$ 的情况下确定。

案例：平均身高的置信区间

假设我们想估计一个城市中成年人身高的平均值。我们从中随机选取了100名成年人，测得其身高均值为170厘米，标准差为10厘米。以95%的置信水平，我们可以计算置信区间：

1. $n = 100$，$\bar{X} = 170$，$S = 10$
2. 对于95%置信水平，$z_{0.025} \approx 1.96$

置信区间如下所示：

$$170 \pm 1.96 \cdot \frac{10}{\sqrt{100}} = 170 \pm 1.96$$

因此，置信区间为 $[168.04, 171.96]$，即我们有95%的把握认为该城市成年人的平均身高在这个区间内。

2. 机器学习中的应用

中心极限定理也在许多机器学习算法中起着基础作用。在模型评估时，例如交叉验证，我们计算各个折叠上的模型性能指标（如准确率、召回率等）的平均值和标准差，利用中心极限定理可以帮助我们推断出整体模型的性能可靠性。

案例：模型性能评估

假设我们在进行10折交叉验证，得到了每个折叠的准确率如下：

[0.85, 0.88, 0.82, 0.90, 0.87, 0.86, 0.84, 0.89, 0.83, 0.91]

计算其均值和标准差：

import numpy as np

accuracies = [0.85, 0.88, 0.82, 0.90, 0.87, 0.86, 0.84, 0.89, 0.83, 0.91]
mean_acc = np.mean(accuracies)
std_dev = np.std(accuracies)

print(f"Mean Accuracy: {mean_acc:.2f}")
print(f"Standard Deviation: {std_dev:.2f}")

运行结果如下：

Mean Accuracy: 0.86
Standard Deviation: 0.03

根据中心极限定理，我们可以在大样本的基础上构造模型性能的置信区间。

$$0.86 \pm z_{0.025} \cdot \frac{0.03}{\sqrt{10}} \approx 0.86 \pm 0.0189$$

因此，我们可以得出模型性能的置信区间为 $[0.84, 0.88]$。

3. A/B 测试

在产品优化和用户体验的测试中，A/B 测试是一个常见的统计方法。使用中心极限定理能够帮助我们判断不同版本之间的显著性差异。通过比较A组和B组的平均转换率以及它们的标准差，我们可以得出是否存在显著差异。

小结

中心极限定理为我们提供了将复杂随机现象简化为正态分布的重要工具，它在统计推断、机器学习、实验设计等领域具有广泛的应用。通过使用中心极限定理，我们能够更有信心地进行科学决策和数据分析。

在下一篇中，我们将深入探讨贝叶斯理论及其核心概念——贝叶斯定理，了解如何通过先验知识和观察数据来更新我们的信念。这将进一步增强我们对不确定性的理解和应对能力。