1 確定性系統和不確定性系統

對于一個確定性系統，多個狀態構成了一個狀態序列，每一個狀態之間的關系都是確定的，根據當前狀態，就可以確定下一個狀態。比如紅綠燈的變化狀態。

與確定性系統相對應的是不確定系統，例如，每天的天氣狀態變化就是一個不確定性系統，根據當前的刮風天氣，我們無從得知下一刻的天氣是刮風還是打雷還是下雨。這就引出了我們的馬爾可夫過程。

2 馬爾可夫過程

在上面的天氣系統中，有刮風，下雨，陰天三種狀態，我們希望找到這個簡單系統的天氣變化的一定規律，為了簡化問題，常常做出以下假設：

馬爾科夫假設：模型的當前狀態僅僅依賴前幾個狀態

這個假設極大的簡化了系統，但是也使得系統的一些信息發生丟失。
進一步就得到了m階馬爾可夫模型：

狀態間的轉移僅依賴于前m個狀態的過程，該過程就是m階馬爾可夫模型

如果該狀態僅僅依賴于前一個狀態，這就是最簡單的一階馬爾可夫模型：

總結

以上是生活随笔為你收集整理的马尔可夫模型（Markov）的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。