概率与测度
實數的覆蓋
Rn\mathbb{R}^nRn 中任意開集可表成可列個互不相交的半開閉方體的并。把半開閉方體稍微加大一點,那么 Rn\mathbb{R}^nRn 中任意開集可表成可列個開矩體的并。
Rn\mathbb{R}^nRn 任意子集,可以找到可數個開集進行覆蓋。
?ri∈Qn∩EB(ri,?0)\bigcup_{r_i \in \mathbb{Q}^n\cap E}B(r_i, \epsilon_0) ri?∈Qn∩E??B(ri?,?0?)
結合以上兩條,可以定義 Rn\mathbb{R}^nRn 任意子集的外測度,即所有可數開矩體的覆蓋中取inf。
隨機過程的定義
首先給出隨機過程的一個簡單的定義,
定義1:(Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ),取一族可測空間 (St,Bt)(S_t, \mathscr{B}_t)(St?,Bt?),一個隨機過程可以看出一族隨機變量 Xt(t∈T)X_t\ (t\in T)Xt??(t∈T),固定每個 t0t_0t0?,Xt0:Ω→St0X_{t_0}:\Omega \rightarrow S_{t_0}Xt0??:Ω→St0?? 是可測函數。
用上面的定義,顯然隨機過程是存在的。但是由于人類不可能寫出所有的這樣的映射,如何構造一個隨機過程形成了困難。我們想把 X(t,ω)X(t,\omega)X(t,ω) 看成是一個隨機變量 X(?,ω)∈∏t∈TStX(\cdot, \omega)\in \underset{t \in T}{\prod} S_{t}X(?,ω)∈t∈T∏?St?,記 ST:=∏t∈TStS_T:=\underset{t \in T}{\prod} S_{t}ST?:=t∈T∏?St?
【這樣想的原因是,由于隨機變量把概率空間轉化到可測空間 (St,Bt)t∈T(S_{t}, \mathscr{B}_t)\ t\in T(St?,Bt?)?t∈T 上,那么研究清楚 (St,Bt)t∈T(S_{t}, \mathscr{B}_t)\ t\in T(St?,Bt?)?t∈T 就可以知道所有隨機變量能夠表達的信息了。這個概率空間研究清楚后,概率空間的存在性就解決了,取 (ST,BT,μT)(S_T, \mathscr{B}_T,\mu_T)(ST?,BT?,μT?) 即可,按照原始的隨機過程定義,取自然的投影映射,隨機過程便存在了】
(Kolmogorov相容性定理) (St,Bt)t∈T(S_{t}, \mathscr{B}_t)\ t\in T(St?,Bt?)?t∈T 是一族Borel空間族,任意有限個的乘積空間的概率測度滿足相容性,那么存在 (Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ) 和隨機過程 X(t,ω)X(t,\omega)X(t,ω)。
【采用定義1,如果要找出隨機過程,雖然概率空間好找,但是需要手寫無限個映射,這是不可能的。Kolmogorov相容性定理告訴我們,可以從另一個角度寫出隨機過程,只要寫出有限維分布,滿足相容性定理就可以了。這樣,概率空間采用 (ST,BT,μT)(S_T, \mathscr{B}_T,\mu_T)(ST?,BT?,μT?),映射就是投影到(St,Bt,μt)t∈T(S_{t}, \mathscr{B}_t,\mu_t)\ t\in T(St?,Bt?,μt?)?t∈T,采用這種方法的代價是,概率空間就非常難寫,并且一定要給出 μT\mu_TμT?,因此Kolmogorov相容性定理的主要難點就是在找概率空間上。顯然,概率空間找的就是 (ST,BT)(S_T, \mathscr{B}_T)(ST?,BT?),但是他的測度就帶來困難了。】
乘積空間
先采用定義1,那么概率空間和無限個映射均存在,挖掘一些性質。以下先討論乘積空間如何建立可測空間和可測映射,先不討論測度。
先建立無窮維乘積空間,開始等價定義轉換,假設定義中的 σ?\sigma-σ?代數為 BT\mathscr{B}_TBT?,要使得兩個定義等價,需要
?t∈T,X(t,?)∈F∣Bt?X(?,?)∈F∣BT\forall t \in T, X(t, \cdot)\in \mathscr{F}|\mathscr{B}_t \Leftrightarrow X(\cdot, \cdot)\in \mathscr{F}|\mathscr{B}_T ?t∈T,X(t,?)∈F∣Bt??X(?,?)∈F∣BT?
取 M={Bt0×∏t∈T\{t0}St:t0∈T,Bt0∈Bt0}\mathscr{M}=\{B_{t_{0}}\times \underset{t \in T\backslash\{t_{0}\}}{\prod}S_t: t_0\in T, B_{t_{0}}\in \mathscr{B}_{t_{0}} \}M={Bt0??×t∈T\{t0?}∏?St?:t0?∈T,Bt0??∈Bt0??},BT\mathscr{B}_TBT? 的構造方法是 σ(M)\sigma(\mathscr{M})σ(M)。
?\Rightarrow?:要證 X(?,?)∈F∣BTX(\cdot, \cdot)\in \mathscr{F}|\mathscr{B}_TX(?,?)∈F∣BT?,只需要證 ?B∈M,X?1(B)∈F\forall B\in \mathscr{M},X^{-1}(B)\in \mathscr{F}?B∈M,X?1(B)∈F。這是顯然的。
?\Leftarrow?:要證 ?t0,X(t0,?)∈F∣Bt0\forall t_0,X(t_0, \cdot)\in \mathscr{F}|\mathscr{B}_{t_{0}}?t0?,X(t0?,?)∈F∣Bt0??,看投影映射 πT,t0y=y(t0),y∈ST\pi_{T,t_{0}}y=y(t_0),y\in S_TπT,t0??y=y(t0?),y∈ST?。X(t0,ω)=πT,t0X(ω)X(t_0,\omega)=\pi_{T,t_{0}}X(\omega)X(t0?,ω)=πT,t0??X(ω)。
下面證明,任意 B∈BTB\in \mathscr{B}_TB∈BT?,存在可數子集 TcT_cTc?,使得 B=BTc×∏t∈T\{t0}StB=B_{T_c}\times \underset{t \in T\backslash\{t_{0}\}}{\prod}S_tB=BTc??×t∈T\{t0?}∏?St?,其中 BTc∈BTcB_{T_c}\in \mathscr{B}_{T_c}BTc??∈BTc??,是可數的乘積空間。
由上述知,顯然 C[0,1]?BTC[0,1]\notin \mathscr{B}_TC[0,1]∈/?BT?
【產生這種性質的原因是定義只要求在某一點滿足可測性,再有 σ\sigmaσ 產生的方式導致只能做到可數個的情況】
乘積空間的測度
【2】有限維乘積空間的測度如何構造
如果有幸構造出轉移概率,那么可以構造乘積空間的測度,例如馬爾可夫過程,隨機游走等…
如果已知乘積空間和各個空間的概率測度,那么也可以導出轉移概率
【3】可列維乘積空間的測度
【4】無窮維乘積空間的測度
Tulcea定理的條件是任意有限 nnn,存在轉移概率。
Kolmogorov相容性定理給出的條件是,乘積空間存在概率測度,因此可以找出轉移概率,然后用Tulcea定理,存在可列維乘積空間概率測度,接著推廣到整個空間上去。
由于Kolmogorov相容性的條件并不好找,轉移概率也并不好找,因此隨機過程說來說去也就那幾種
積分定義
fff 為 (Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ) 上非負可測函數,則 fff 積分的定義是
∫Ωf(ω)μ(dω)=sup{∫Ωh(ω)μ(dω):0≤h≤f,hsimple}.\int_{\Omega} f(\omega) \mu(d\omega)=sup\left\{\int_{\Omega}h(\omega)\mu(d\omega):0\le h\le f, h \ simple \right\}. ∫Ω?f(ω)μ(dω)=sup{∫Ω?h(ω)μ(dω):0≤h≤f,h?simple}.
從定義上似乎不要求 fff 為可測函數,但是由于任何非負可測函數都存在遞增的簡單函數列進行逼近。如果 fff 不為可測函數,想象一下在某個不可測集上 fff 長得奇奇怪怪,任何簡單函數都沒辦法逼近那個奇怪的東西,因此就干脆要求,能定義積分的函數都是可測函數了。
積分變換定理
設 fff 是 (Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ) 到 (E,E)\left(E, \mathscr{E}\right)(E,E) 的可測映射,定義 μf:=μ(f?1(B))\mu_f:=\mu(f^{-1}(B))μf?:=μ(f?1(B)), 由定理【待補充】的證明知,μf\mu_fμf? 是 E\mathscr{E}E 上的測度,稱為 μ\muμ 在 E\mathscr{E}E 上由 fff 導出的測度。
(積分變換定理)設 fff 是 (Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ) 到 (E,E)\left(E, \mathscr{E}\right)(E,E) 的可測映射,ggg 是 (E,E)\left(E, \mathscr{E}\right)(E,E) 上的可測函數((E,E)\left(E, \mathscr{E}\right)(E,E) 到 (R,BR)\left(\mathbb{R}, \mathscr{B_{\mathbb{R}}}\right)(R,BR?) ),則有:
∫f?1(B)(g°f)(ω)μ(dω)=∫Bg(x)μf(dx),?B∈E.\int_{f^{-1}(B)} (g\circ f)(\omega) \mu(d\omega)=\int_{B} g(x) \mu_f(dx), \forall B \in \mathscr{E}. ∫f?1(B)?(g°f)(ω)μ(dω)=∫B?g(x)μf?(dx),?B∈E.
證明:【待補充】,思路是先看簡單函數,慢慢推廣。
分布函數
一個簡單情況是,XXX 是 (Ω,F,μ)\left(\Omega, \mathscr{F}, \mu\right)(Ω,F,μ) 到 (R,BR)\left(\mathbb{R}, \mathscr{B_{\mathbb{R}}}\right)(R,BR?) 的隨機變量,【待補充】分布函數 FXF_XFX? 是 μ\muμ 在 BR\mathscr{B_{\mathbb{R}}}BR? 上由 XXX 導出的測度。由積分變換定理,
μ(X∈B)=∫X?1(B)μ(dω)=∫BFX(dx),?B∈E.\mu(X\in B)=\int_{X^{-1}(B)} \mu(d\omega)=\int_{B} F_X(dx), \forall B \in \mathscr{E}. μ(X∈B)=∫X?1(B)?μ(dω)=∫B?FX?(dx),?B∈E.
III 為恒等映射,則
EX=∫ΩI°X(ω)μ(dω)=∫RxFX(dx),?B∈E.EX=\int_{\Omega} I\circ X(\omega)\mu(d\omega)=\int_{\mathbb{R}} xF_X(dx), \forall B \in \mathscr{E}. EX=∫Ω?I°X(ω)μ(dω)=∫R?xFX?(dx),?B∈E.
ggg 為可測函數,則
E[g(X)]=∫Ωg°X(ω)μ(dω)=∫Rg(x)FX(dx),?B∈E.E[g(X)]=\int_{\Omega} g\circ X(\omega)\mu(d\omega)=\int_{\mathbb{R}} g(x)F_X(dx), \forall B \in \mathscr{E}. E[g(X)]=∫Ω?g°X(ω)μ(dω)=∫R?g(x)FX?(dx),?B∈E.
【從積分變換定理可以看出,隨機變量的意義是把概率空間轉化到實數上進行討論。對于概率空間可測集的積分并不能直接算得。引入隨機變量,而且這個隨機變量通常是Borel可測的。概率空間上的測度導出對Borel可測集的測度,也就是分布,那么對隨機變量的積分最后都化成了對實數上Borel可測集的積分】
總結
- 上一篇: JS基础-开关灯案例
- 下一篇: imporve-3