Day 21 · 2026.07.13

测度论与概率基础

Measure & the Foundations of Probability — 如何严格地给「集合」和「运气」赋予大小
"概率论不过是有了灵魂的测度论。" — Mark Kac

σ-代数

σ-algebra · 「可以被提问」的事件之族
测度论
直觉版

先接受一个反直觉的事实:并不是每一个集合都能被合理地赋予「大小」。硬要给所有子集分配长度,会推出「$1=2$」式的矛盾(Banach–Tarski 分球)。于是数学家退一步:先圈定一批「规矩的」集合,只在它们身上谈大小。这批被圈中的集合,就是 σ-代数——一份「允许被提问的事件」清单。

它必须对三件事封闭:整个空间在内;某事件 $A$ 在内,则「$A$ 不发生」也在内;可数个事件在内,则「它们至少发生一个」也在内。翻译成人话:只要你能问「$A$ 的概率是多少」,你就自动能问「非 $A$」「$A$ 或 $B$ 或 $C$……」的概率。σ-代数保证提问系统自洽,不会问出没有答案的问题。

正式定义

样本空间 $\Omega$ 上的 σ-代数 $\mathcal{F}\subseteq 2^\Omega$ 满足:

$\Omega\in\mathcal{F};\quad A\in\mathcal{F}\Rightarrow A^c\in\mathcal{F};\quad A_1,A_2,\dots\in\mathcal{F}\Rightarrow \bigcup_{i=1}^{\infty}A_i\in\mathcal{F}$

三条分别是:全集可测、对补集封闭、对可数并封闭(希腊字母 σ 正是「可数」的记号)。由所有开区间生成的最小 σ-代数,叫 Borel 集——几乎你能写下来的集合都是 Borel 集。

为什么美

σ-代数的深刻不在「大小」,而在它编码了「信息」。想象一枚随时间揭晓的赌局:$\mathcal{F}_t$ 表示「到时刻 $t$ 你所知道的一切」。时间越往后,能回答的问题越多,$\mathcal{F}_t$ 越大——这串递增的 σ-代数叫 滤流(filtration)。同一个数学对象,一面是「哪些集合可测」,另一面是「此刻你掌握多少信息」。测度论把「知识」几何化了。

应用

金融数学用滤流刻画「信息随时间到达」,期权定价的鞅理论建立其上;机器学习里的条件期望 $E[X\mid\mathcal{F}]$——「已知这些信息后对 $X$ 的最佳猜测」——正是对某个 σ-代数取投影,是贝叶斯推断与强化学习价值函数的数学内核。

一句话精华 + 思考题
σ-代数不是一堆集合,而是一套自洽的提问权限——它同时决定了「什么能被测量」与「你此刻知道什么」。
思考题:如果两个 σ-代数一个包含另一个,「信息更多」对应哪一个?为什么「知道得越多」意味着能回答的问题越多,而不是相反?

测度

Measure · 把「长度」推广到万物的规则
测度论
直觉版

测度就是一台「赋大小机」:喂给它一个集合,吐出一个非负数——可以是长度、面积、体积、质量,或概率。它只需守住一条铁律:可数可加性——把一个集合切成互不重叠的可数块,总大小恰好等于各块大小之和。听起来平淡,威力却惊人。

最经典的震撼:区间 $[0,1]$ 里的全体有理数,测度是 $0$。有理数明明处处稠密、无处不在,为什么「长度」为零?因为它们可数,能被一列总长度任意小的小区间盖住——第 $n$ 个有理数用长 $\varepsilon/2^n$ 的区间罩住,总长不超过 $\varepsilon$,而 $\varepsilon$ 要多小有多小。稠密占地为零可以并存,这是 Riemann 时代的直觉绝对给不出的结论。

正式定义
$\mu:\mathcal{F}\to[0,\infty],\quad \mu(\varnothing)=0,\quad \mu\!\Big(\bigsqcup_{i=1}^{\infty}A_i\Big)=\sum_{i=1}^{\infty}\mu(A_i)$

$\mu$ 作用在 σ-代数上(只测可测集),空集大小为 $0$,且对互不相交($\bigsqcup$)的可数并满足可加。把「长度」如此推广到 $\mathbb{R}$ 上尽可能多集合的,就是 Lebesgue 测度

为什么美

一个公理,统摄了长度、面积、体积、质量分布、概率——它们从此是同一个数学结构的不同实例。更妙的是「零测集」这个概念:Cantor 集不可数(和整条实轴一样多的点),测度却是 $0$。它逼你把「有多少点」和「占多大地方」彻底分开——基数与测度是两把独立的尺子,量的是集合的两种截然不同的「大」。

应用

凡是要给「分布」称重的地方都用它:物理里的质量与电荷分布、图像处理里的灰度密度。在生成式 AI 中,两个概率分布的距离——Wasserstein 距离(最优传输)——本质是在问「把一堆测度搬成另一堆,最省力要搬多远」,它是 Wasserstein-GAN 与扩散模型训练稳定性的理论支点。

一句话精华 + 思考题
测度用「可数可加」一条公理,让长度、体积、质量、概率变成同一件事;而零测集揭示:点的「多少」和地方的「大小」是两回事。
思考题:能否构造一个测度为 $0$、却在每一点附近都稠密的集合?如果「几乎处处」成立的性质允许在一个零测集上失败,这对「例外」意味着什么?

Lebesgue 积分

Lebesgue Integration · 横着切,而非竖着切
分析学
直觉版

Lebesgue 自己讲过一个绝妙的比喻。清点一堆散落的硬币,有两种数法:Riemann 的数法是按它们躺的位置,从左到右一枚一枚加过去;Lebesgue 的数法是先按面值分堆——所有一元的归一堆、五角的归一堆——再用「面值 × 该堆枚数」求和。

翻译到积分:Riemann 沿 x 轴(定义域)竖着切成薄条;Lebesgue 沿 y 轴(值域)横着切,问「函数取值落在 $[y,y+dy]$ 的那部分定义域,测度有多大」。对温顺的函数两者结果相同;但面对处处剧烈跳动的狂野函数,横着切的 Lebesgue 依然从容——因为它只关心「取每个高度的地方总共多大」,不在乎这些地方有多零碎。

Riemann · 沿 x 竖切 Lebesgue · 沿 y 横切 y
正式定义

先对「简单函数」(取有限个值的阶梯函数)定义 $\int s\,d\mu=\sum_k y_k\,\mu(\{x:s(x)=y_k\})$——每个高度乘以取该高度的那块定义域的测度;再用从下方逼近的简单函数取上确界:

$\displaystyle\int_\Omega f\,d\mu=\sup\Big\{\int_\Omega s\,d\mu:\ 0\le s\le f,\ s\ \text{简单}\Big\}$
为什么美

它治好了 Riemann 积分的两大顽疾。其一,能积的函数多得多:狄利克雷函数(有理点取 $1$、无理点取 $0$)Riemann 完全无法积分,Lebesgue 一眼看出积分为 $0$(有理点测度为零)。其二,极限与积分能自由交换——单调收敛定理、控制收敛定理让「$\lim\int=\int\lim$」在温和条件下成立,这是 Riemann 积分给不了的奢侈。正因如此,$L^p$ 函数空间是完备的(柯西列必收敛),成为泛函分析与量子力学 Hilbert 空间的地基。

应用

概率里的期望就是一个 Lebesgue 积分 $E[X]=\int X\,dP$,它同时涵盖离散求和与连续积分,无需分两套公式;傅里叶分析、信号处理、机器学习中「对数据分布求损失的期望」,底层全是它。深度学习的经验风险最小化,本质是用样本平均逼近一个 Lebesgue 积分。

一句话精华 + 思考题
换一个切法——沿值域而非定义域——就换来了「能积更多函数」和「极限可穿过积分号」两项 Riemann 给不起的自由。
思考题:为什么「按值域分堆」天然要求你会测量「函数取某值的那块定义域有多大」?测度论与积分论,谁必须先于谁?

概率作为测度

Probability as Measure · Kolmogorov 的地基
概率论
直觉版

1933 年,Kolmogorov 用一句话给了「运气」一个坚实地基:概率,就是总量恰好为 $1$ 的测度。掷骰子、明天下雨、量子测量——所有随机现象都被同一副骨架接住:一个概率空间 $(\Omega,\mathcal{F},P)$。$\Omega$ 是所有可能结果,$\mathcal{F}$ 是可提问的事件(σ-代数),$P$ 是给每个事件称重、且全空间重量为 $1$ 的测度。

随机变量不是「会变的数」,它是一个可测函数 $X:\Omega\to\mathbb{R}$——把每个底层结果翻译成一个数值。于是「$X$ 的期望」就是 $X$ 对概率测度的 Lebesgue 积分。前三张卡的所有机器,在这里合成一台:随机性被彻底几何化了。

正式定义
$P:\mathcal{F}\to[0,1],\quad P(\Omega)=1,\quad E[X]=\int_\Omega X\,dP$

概率是测度的全部三条公理,外加一条归一化 $P(\Omega)=1$。仅此一处不同——概率论与测度论,共享同一具骨骼。

为什么美

这套语言一举缝合了历来分裂的两半:离散概率(求和)与连续概率(积分)从此都是「对 $P$ 积分」,不再需要两套定理。更关键的是,它第一次让大数定律、中心极限定理有了严格证明的舞台,也让鞅、马尔可夫过程、布朗运动这些「随时间演化的随机」得以精确定义。Kolmogorov 做的事,本质是把「概率是什么」这个纠缠了三百年的哲学问题,替换成一个谁都能验证的公理系统——把运气从玄学变成了几何

应用

整个现代统计与机器学习建立其上:贝叶斯推断是在概率测度间更新,强化学习的马尔可夫决策过程需要测度论才能严格定义策略与回报,金融的鞅定价、扩散生成模型的前向/反向随机微分方程,无一不是在 $(\Omega,\mathcal{F},P)$ 这副骨架上运转。你每次写下 $E[\text{loss}]$,都在调用 Kolmogorov 的地基。

一句话精华 + 思考题
概率不是一门独立学科,而是「总重量为一的测度论」——随机变量是可测函数,期望是积分,运气因此成了可计算的几何。
思考题:既然概率只是归一化的测度,为什么它「有了灵魂」(Kac 语)?把 $P(\Omega)=1$ 这条归一化去掉,你会失去哪些独属于概率、而测度论没有的概念?

深入思考

开放问题 · 推向边界与跨学科
为什么一定要「可数」可加,而不是「有限」或「任意」可加?
有限可加太弱:算不了极限、级数、连续分布,微积分式的操作全部失灵。任意(不可数)可加又太强:把 $[0,1]$ 看成不可数个单点的并,每点测度为 $0$,任意可加会逼出「$1=0$」。可数恰是那个甜蜜点——强到能支撑极限与收敛定理,弱到不自相矛盾。数学里许多「σ」(σ-代数、σ-有限)都在守护这条可数的分界线。
存在「不可测集」意味着什么?它动摇了数学的可靠性吗?
Vitali 用选择公理构造出无法赋予任何合理长度的集合,Banach–Tarski 更是把一个球拆成有限块重拼成两个同样大的球。这些「病态」集合并非漏洞,而是提醒:可测性是一种需要争取的良好性质,而非理所当然。它们全都依赖选择公理,且永远无法被明确写出——你能具体构造的集合都是可测的。数学没被动摇,只是学会了对「大小」保持敬畏。
测度论把「几乎处处」变成核心词——「例外」为何可以被忽略?
「几乎处处成立」= 只在一个零测集上失败。因为零测集不影响任何积分值,它在测度的世界里「不占地方」。这带来一种全新的等价观:两个函数只要几乎处处相等,就被当作同一个 $L^p$ 元素。深意在于——可数无穷个例外点,可以在「大小」意义上等于没有例外。基数看得见它们,测度看不见它们。哪一把尺子才算「真实」,取决于你问的是什么问题。
为什么量子力学、金融、AI 不约而同选中了测度论?
因为它们都要处理「连续状态空间上的随机与叠加」。量子态活在 $L^2$ Hilbert 空间——由 Lebesgue 积分定义的完备空间;期权定价靠鞅,鞅靠滤流,滤流靠 σ-代数;扩散模型的随机微分方程需要布朗运动,而布朗运动只有在概率测度的框架下才严格存在。测度论是唯一能同时容纳「无穷维」「连续」「随机」「极限交换」四件事的语言,于是凡是碰到它们交汇处的学科,最终都会回到 Kolmogorov 的地基。