題組內容

三、一個玻璃球在圓盤周圍移動，按順時針方向，將依續通過標記為 0，1，2，3 的位 置（3 之後回到 0）。假設此玻璃球從 0 位置開始，每一步它有 0.8 的機率順時針方 向移動一個位置，而有 0.2 的機率逆時針方向移動一個位置。若以Xn（n≥ 0）表示n 步之後在圓盤上的位置，則此過程{ Xn, n≥ 0}可視為一個馬可夫鏈。

⑴說明為何{ Xn, n≥ 0}是一個馬可夫鏈。（5 分）