Day 44 · 2026.08.05

泛函分析

Functional Analysis — 当一个「向量」有无穷多个坐标,几何还剩下什么
「好的数学家看得见定理之间的类比,最好的数学家看得见类比之间的类比。」 — Stefan Banach

函数即向量

Function Spaces · 把分析问题搬进几何
Analysis
直觉版

向量 $(3,1,4)$ 是三个数排成一列。把它拉长到 100 万个坐标,再把下标从整数换成实数 $x$,得到的就是函数 $f(x)$:函数就是坐标连续排布的向量。加法与数乘的规则一字不改,于是「两个函数的距离」「一族函数张成的子空间」都有了意义——把函数、信号、方程的解当成空间里的点用几何处理,这就是泛函分析的原始动作。

但无穷维不是有限维的放大版:有限维里闭且有界即紧致,无穷维的单位球不紧——取正交归一列 $e_n$,两两距离恒为 $\sqrt{2}$,永远游荡而无收敛子列。支撑整个有限维分析的存在性工具在此失效。

正式定义

Banach 空间 = 完备的赋范线性空间。范数 $\|\cdot\|$ 给每个向量一个「长度」并满足三角不等式;完备指每个 Cauchy 列都在空间内收敛——空间没有洞。典型例子 $L^2[0,1]$:所有平方可积函数,$\|f\|_2=\left(\int_0^1|f|^2\right)^{1/2}$。

完备性不是技术细节:构造对象几乎总是先造一列越来越好的逼近再取极限,完备性保证那个极限还在空间里——正如有理数不完备,$\sqrt{2}$ 便不在其中。

为什么美

完备性把「存在性」变成可施工的东西。Banach 不动点定理:完备空间上任何压缩映射有唯一不动点,从任意起点迭代必收敛到它。于是常微分方程解的存在唯一性(Picard–Lindelöf)不必解出公式——把方程改写成积分算子,验证它是压缩的,解就存在了。存在性由空间的结构给出,而不是靠找出答案:先问对象住在哪个空间,再问它长什么样。

应用

Sobolev 空间是偏微分方程「弱解」的居所:先在足够大的空间里保证解存在,再回头证明它其实光滑;有限元法把这套框架直接变成了工程数值算法。机器学习的再生核 Hilbert 空间让核方法在无穷维特征空间里做回归,却始终不必显式写出特征。

一句话精华 · 思考题
函数空间把「求解方程」变成了「在几何空间里定位一个点」。
思考:单位球不紧使「取收敛子列」失效,补偿是发明更弱的收敛来换回紧致性。你熟悉的工程问题里,是否也有「放宽判据以换回保证」的同构操作?

Hilbert 空间

Hilbert Space · 内积把角度还给了无穷维
Geometry
直觉版

Banach 空间只有长度没有角度——你能说两个函数相距多远,却不能说它们的夹角。加上内积 $\langle f,g\rangle=\int f\bar g$,「垂直」立刻有了意义:正交即内积为零,即两个函数互不包含对方的成分。

有了正交就有了投影:把函数向某个闭子空间投影,得到其中离它最近的点,残差与整个子空间垂直。这幅三维里画得出来的图在无穷维一字不变地成立——而它同时就是最小二乘、傅里叶级数、条件期望这三件事的定理。

闭子空间 M f Pf f − Pf ⊥ M 最优逼近 = 作垂线:残差正交于整个子空间
正式定义

投影定理:设 $M$ 是 Hilbert 空间的闭子空间,则任意 $f$ 有唯一分解 $f=Pf+(f-Pf)$,其中 $Pf\in M$ 且 $f-Pf\perp M$;$Pf$ 是 $M$ 中唯一使 $\|f-g\|$ 最小的 $g$。若 $\{e_n\}$ 是 $M$ 的正交归一基:

$$Pf=\sum_n \langle f,e_n\rangle\, e_n,\qquad \|f\|^2=\sum_n |\langle f,e_n\rangle|^2$$

符号含义:$\langle f,e_n\rangle$ 是 $f$ 投影到轴 $e_n$ 上的长度,求和即把各方向分量拼回来。右式是 Parseval 恒等式——无穷维的勾股定理:长度平方等于各坐标平方之和。取 $e_n(x)=e^{2\pi i n x}$,展开式就是傅里叶级数;傅里叶不是一个技巧,是换一组正交基

为什么美

三件表面上毫无关系的事其实是同一句话。线性回归的残差正交于设计矩阵的列空间;信号分解成频率分量是同一组正交基上的投影;条件期望 $E[X\mid\mathcal G]$ 是 $X$ 在「$\mathcal G$-可测函数」这个闭子空间上的投影,塔性质 $E[E[X\mid\mathcal G]]=E[X]$ 不过是「投影两次等于投影一次」。这不是修辞式的类比,它们共用同一条定理的同一个证明。

应用

最小二乘的正规方程直接来自投影;卡尔曼滤波的每步更新就是把新观测投影到已有信息张成的子空间上;PCA 和一切「取前 $k$ 个分量」的压缩,误差由 Parseval 精确给出——等于丢掉那些系数的平方和,取舍因此可算而非凭感觉。

一句话精华 · 思考题
内积把「最优逼近」这个分析问题,化归为「作垂线」这个几何动作。
思考:为什么「残差与子空间正交」等价于「误差最小」?若残差还有落在子空间里的分量,你能否指出该怎样改进当前解?

算子与谱

Operators and Spectrum · 特征值在无穷维的命运
Operator Theory
直觉版

有限维里矩阵作用在向量上,无穷维里算子作用在函数上——求导 $Df=f'$、乘以 $x$、卷积都是算子。特征值问题原样搬来:哪些函数被作用后只是被拉伸了一个倍数?$-f''=\lambda f$ 的解是正弦,所以振动模态就是微分算子的特征向量——琴弦、鼓面、量子阱因此共用同一套数学。

但无穷维长出新现象:算子可以完全没有特征向量,却依然不可逆。于是定义放宽为谱 $\sigma(T)=\{\lambda: T-\lambda I\ \text{不可逆}\}$。位置算子 $(Xf)(x)=xf(x)$ 在 $L^2[0,1]$ 上谱是整个 $[0,1]$,却一个特征函数都没有——$xf=\lambda f$ 迫使 $f$ 几乎处处为零。连续谱不是特征值的推广,而是它的替代品。

有限维矩阵:谱 = 有限个特征值 无穷维自伴算子:离散谱 + 连续谱 束缚态:能级离散 散射态:能量连续
正式定义

自伴指 $\langle Tf,g\rangle=\langle f,Tg\rangle$——把算子从内积一侧挪到另一侧不改变结果,是对称矩阵 $A=A^{\top}$ 的无穷维版本。谱定理:自伴算子可写成

$$T=\int_{\sigma(T)} \lambda\, dE_\lambda$$

其中 $E_\lambda$ 是投影值测度,把每段谱区间对应到一个投影算子。读法:有限维的对角化是 $T=\sum\lambda_i P_i$,按特征值加权求和各特征方向上的投影;无穷维只是把求和换成对谱的积分,因为谱可能连成一片、没有可数的特征方向。

为什么美

谱定理一句话概括了无穷维分析的哲学:一条代数性质(自伴)强制出一整套几何结构(可对角化),哪怕特征向量根本不存在。另一处深刻来自无界算子,它逼出了「定义域」——算子不只是一个公式,还包括它作用在哪些函数上。同一个 $-d^2/dx^2$ 配不同边界条件就是不同算子,谱也不同:盒中粒子能级离散、自由粒子能量连续,差别不在公式而在定义域。

应用

谱方法解 PDE:在特征函数基上展开后微分算子变成对角乘法,偏微分方程退化为一族独立的常微分方程——热方程的解 $\sum c_n e^{-\lambda_n t}\phi_n$ 一眼看出高频衰减最快。图拉普拉斯算子的谱支撑谱聚类与图神经网络的滤波器设计。Koopman 算子则把非线性动力系统重写成无穷维上的线性算子,用其谱做数据驱动预测。

一句话精华 · 思考题
谱是算子的指纹——它可能连续、可能没有对应的特征向量,却仍完全决定算子的行为。
思考:Kac 问「能否听出鼓的形状」——答案是否定的,存在同谱而不同形的鼓面。那么这枚指纹丢失的究竟是哪部分信息?

量子力学的数学

The Mathematics of Quantum Mechanics · 冯·诺依曼的公理化
Mathematical Physics
直觉版

1920 年代的量子力学有两套互相看不顺眼的形式:海森堡的矩阵力学与薛定谔的波动力学,算出的谱线却完全一致,谁也说不清为什么。冯·诺依曼 1932 年给出答案:两者是同一个 Hilbert 空间在不同正交基下的坐标表示,是同一个向量的两种写法。

而最值得记住的是他那张字典,它把物理概念逐条翻译成算子理论的对象:

  • 状态 = Hilbert 空间中的单位向量 $\psi$
  • 可观测量 = 自伴算子 $A$(自伴 ⟹ 谱是实数 ⟹ 测量值是实数)
  • 可能的测量结果 = $A$ 的谱;测得某结果的概率 = 谱投影的长度平方 $\|E_\lambda\psi\|^2$
  • 期望值 = $\langle\psi,A\psi\rangle$;时间演化 = 幺正群 $U_t=e^{-iHt}$,由自伴的 $H$ 生成
正式定义

不确定性原理的一般形式(Robertson):

$$\sigma_A\,\sigma_B \ \ge\ \tfrac{1}{2}\left|\langle\psi,[A,B]\psi\rangle\right|$$

符号含义:$\sigma_A$ 是 $A$ 在状态 $\psi$ 上的标准差,即测量结果的分散程度;$[A,B]=AB-BA$ 是对易子,衡量两个操作换序后的差异,为零表示先做哪个都一样。整条不等式说的是:两个操作越不能换序,它们的测量值就越不能同时确定。代入 $[X,P]=i\hbar$ 立得 $\sigma_X\sigma_P\ge\hbar/2$。

为什么美

不确定性原理常被讲成「测量必然打扰粒子」的实验事实——但上式的推导只用了 Cauchy–Schwarz 不等式,没有任何物理假设:任何两个不对易的自伴算子都自动满足这条下界,这是一条数学定理伪装成的物理定律。同样地,「量子化」的字面意思就是谱的离散性——束缚态谱离散所以能级一级一级,自由粒子谱连续所以能量连成一片。物理里最反直觉的那部分,恰恰是算子谱结构的直接读数。

应用

量子计算完全运行在这张字典上:量子门是幺正算子,测量是投影,整套形式就是有限维 Hilbert 空间上的谱理论。量子化学的变分法把基态问题限制到有限维子空间上求最小 Rayleigh 商,本质是投影定理。Stone 定理(幺正群 ↔ 自伴生成元)的经典对应则是马尔可夫半群与其生成元。

一句话精华 · 思考题
量子力学不是「用到了数学」,它的公理本身就是自伴算子的谱理论。
思考:若一个物理量的算子谱连续,「测得某个精确值」的概率严格为零。那实验室里读出的数字是什么——「测量」指的是否其实是谱区间,而非谱点?

深入思考

为什么在所有 $L^p$ 里偏偏 $L^2$ 特殊?
只有 $p=2$ 时范数由内积诱导,因此只有 $L^2$ 是 Hilbert 空间,只有它有角度、正交基与投影定理。这解释了统计学上一个常被当成惯例的选择:最小二乘之所以主导,不是因为平方误差更「正确」,而是因为它把估计变成投影,从而有闭式解。改用 $L^1$(LASSO、分位数回归)便失去投影结构,换来稀疏与稳健,代价是只能迭代求解。选损失函数,实际上是在选一套几何。
神经网络的万能逼近定理是泛函分析的结果吗?
是,但它给出的比人们以为的少得多。该定理断言单隐层网络在连续函数空间中稠密,只说「存在一个网络任意接近目标函数」;它对所需宽度不给有用的界,对如何找到那组权重完全沉默,更没有泛化保证。深度学习真正的难题在优化与泛化,稠密性不触及其中任何一个。把存在性误当成可达性,是最常见的误读。
算子谱与分布式系统有什么真实联系?
马尔可夫链的转移矩阵是一个算子,其谱隙(最大与次大特征值之差)直接控制混合时间。这一结论一字不改地适用于 gossip 协议——图拉普拉斯的第二小特征值决定信息扩散到全网所需的轮数,所以选网络拓扑本质上是在挑一个谱。同一个量还解释了图神经网络的过平滑:反复聚合即反复作用同一算子,非主导谱分量按特征值的幂次衰减,节点表示最终坍缩到主特征向量。「收敛快慢」常常就是谱结构问题。