跳到主要内容

调和函数

阐述

PP 是一个 X\mathcal X 上的 Markov 链。一个函数 f:XRf:\mathcal X\to\mathbb R 如果使得 E(f(X1)X0=x)=f(x)\mathbb E(f(X_1)|X_0=x)=f(x),也即 Pf=fPf=f,那么就称它是一个调和函数。

可以认为调和函数是一种将 Markov 链的长期行为参数化的方式,有多少种长期行为,调和函数的空间就有几维。

实例

Z\mathbb Z 上的偏移随机游走

调和函数的条件给出

f(x)=pf(x1)+qf(x+1)f(x)=p f(x-1)+q f(x+1)

所有的调和函数都具有形式 f(x)=a+b(p/q)xf(x)=a+b(p/q)^x

Z\mathbb Z 上的超级随机游走

若每次能向左或向右移动 1 或 2 步或原地不动,则有

f(x)=p2f(x2)+p1f(x1)+p0f(x)+p1f(x+1)+p2f(x+2)f(x)=p_{-2} f(x-2)+p_{-1} f(x-1)+p_0 f(x)+p_1 f(x+1)+p_2 f(x+2)

若猜测它具有形式 cxc^x,则能得到 c2=p2+p1c+p0c2+p1c3+p2c4c^2=p_{-2}+p_{-1} c+p_0 c^2+p_1 c^3+p_2 c^4。这个是四阶多项式,所以有四个根,这四个根给出的线性组合都满足条件。

性质

调和函数可以用来寻找鞅。设 XiX_i 是 Markov 链而 ff 是相应的调和函数,那么 f(Xi)f(X_i) 就是一个关于 XiX_i 的鞅。

如果 PP 是不可约、常返的,那么有界的调和函数只有常数函数。所以,调和函数只在非常返的 Markov 链中比较有用。

调和函数的扩张

PP 是一个 Markov 链,且在集合 SXS\subseteq\mathcal X 上满足 P(x,x)=1P(x,x)=1,并且几乎一定会进入到这个集合,那么任何一个有界函数 f:SRf:S\to\mathbb R 都可以扩张成一个调和函数,且满足

f~(x)=E(f(XT)X0=x),\tilde{f}(x)=\mathbb{E}\left(f\left(X_T\right) \mid X_0=x\right),

其中 TT 是第一次进入 SS 的时间。

推论

如果 PP 是有限状态空间上的不可约 Markov 链,A,BXA,B\subseteq\mathcal X 是两个不相交的集,TT 是第一次进入 AABB 的时间,那么函数 P(XTAX0=x)\mathbb P(X_T\in A|X_0=x)P~\tilde P 是一个调和函数,其中 P~\tilde P 是通过修改 PP 使得对所有 xA,Bx\in A,B 都有 P(x,x)=1P(x,x)=1 得到的。

相关内容

调和函数和稳态测度的区别是,稳态测度有 μP=P\mu P=P,而这个是 Pf=fPf=f

参考文献