メインコンテンツへスキップ
見出し画像

書記が数学やるだけ#381 2状態マルコフ連鎖の性質

    マルコフ連鎖の中でも単純な2状態系で,様々な性質を考えてみる。


    問題

    スクリーンショット 2022-05-25 21.38.11


    説明

    状態1と状態2の移り変わりは,推移行列として表現できる。

    スクリーンショット 2022-05-25 21.39.23


    時間とともに変化しない状態である,定常状態について。

    スクリーンショット 2022-05-25 21.40.05


    推移行列をn回かけることで,nステップでの推移確率が求められる。

    スクリーンショット 2022-05-25 21.40.49


    n→∞として,極限分布が得られる。

    スクリーンショット 2022-05-25 21.41.29


    解答

    定常分布の式を確認。

    数学やるだけ解答#381_page-0001


    推移確率行列のn乗は,nステップ後の状態に対応する。

    数学やるだけ解答#381_page-0002


    数学やるだけ解答#381_page-0003


    n→∞とすることで,極限分布が得られる。

    数学やるだけ解答#381_page-0004


    本記事のもくじはこちら:


    あなたへのおすすめ