A,B,Cという3つの事象の同時確率は次のように書きます. とすると, = 又は,をと書くと, となります. もし,で,この過程がマルコフ連鎖なら, になります. 従って, となります. 4つの場合はこのようになります. 3つの場合と同じような仮定をすると,マルコフ連鎖のときは, となります.