數學學院

首頁 › 高中 › 高中 12 年級

轉移矩陣與馬可夫鏈

高中 12 年級 · 資料與不確定性

觀念

0.20.40.80.6晴雨

狀態之間的轉移機率排成矩陣 PP,目前狀態分布寫成行向量 v⃗\vec v(第 jj 行是「從第 jj 個狀態出發」),經一步變成 Pv⃗P\vec v,nn 步是 Pnv⃗P^n\vec v;轉移機率都是正數時,長期會趨向唯一的穩定分布(滿足 Pv⃗=v⃗P\vec v=\vec v)。

例:晴→晴 0.8、雨→晴 0.4,穩定分布晴天比例 23\dfrac{2}{3}。

這是天氣、顧客流失、網頁排名(PageRank)等隨機過程的入門模型。

例題

0.10.30.90.7單車公車

某地通勤族的狀態只有「騎 YouBike」與「搭公車」兩種,每天依下列機率轉移:騎 YouBike→騎 YouBike 0.90.9、騎 YouBike→搭公車 0.10.1;搭公車→騎 YouBike 0.30.3、搭公車→搭公車 0.70.7。寫成轉移矩陣(第 jj 行是「從第 jj 個狀態出發」)P=(0.90.30.10.7)P = \begin{pmatrix} 0.9 & 0.3 \\ 0.1 & 0.7 \end{pmatrix}。已知今天是「騎 YouBike」,求後天是「搭公車」的機率(用小數)。

看解法與答案

經過兩步,中間(明天)可能是「騎 YouBike」或「搭公車」,兩條路徑各自相乘再相加:

「騎 YouBike→騎 YouBike→搭公車」的機率 0.9×0.10.9 \times 0.1,「騎 YouBike→搭公車→搭公車」的機率 0.1×0.70.1 \times 0.7。

相加:0.9×0.1+0.1×0.7=0.160.9 \times 0.1 + 0.1 \times 0.7 = 0.16。

也就是 P2P^2 第 2 列第 1 行的元素。

答案: 0.160.16

用在哪裡

插畫

轉移矩陣與馬可夫鏈:情境插畫轉移矩陣與馬可夫鏈:例題插畫

學習路徑

先學會

互動練習在本機版

這個網站是觀念與例題的閱讀版。互動練習(每次出不同數字的新題、自動判對錯、錯題本、熟練度與複習排程)在「數學學院」本機版,目前還沒對外開放。