1 確定性系統(tǒng)和不確定性系統(tǒng)

對于一個確定性系統(tǒng)，多個狀態(tài)構(gòu)成了一個狀態(tài)序列，每一個狀態(tài)之間的關(guān)系都是確定的，根據(jù)當(dāng)前狀態(tài)，就可以確定下一個狀態(tài)。比如紅綠燈的變化狀態(tài)。

與確定性系統(tǒng)相對應(yīng)的是不確定系統(tǒng)，例如，每天的天氣狀態(tài)變化就是一個不確定性系統(tǒng)，根據(jù)當(dāng)前的刮風(fēng)天氣，我們無從得知下一刻的天氣是刮風(fēng)還是打雷還是下雨。這就引出了我們的馬爾可夫過程。

2 馬爾可夫過程

在上面的天氣系統(tǒng)中，有刮風(fēng)，下雨，陰天三種狀態(tài)，我們希望找到這個簡單系統(tǒng)的天氣變化的一定規(guī)律，為了簡化問題，常常做出以下假設(shè)：

馬爾科夫假設(shè)：模型的當(dāng)前狀態(tài)僅僅依賴前幾個狀態(tài)

這個假設(shè)極大的簡化了系統(tǒng)，但是也使得系統(tǒng)的一些信息發(fā)生丟失。
進(jìn)一步就得到了m階馬爾可夫模型：

狀態(tài)間的轉(zhuǎn)移僅依賴于前m個狀態(tài)的過程，該過程就是m階馬爾可夫模型

如果該狀態(tài)僅僅依賴于前一個狀態(tài)，這就是最簡單的一階馬爾可夫模型：

總結(jié)

以上是生活随笔為你收集整理的马尔可夫模型（Markov）的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。