15.3.1 Цепи Маркова

Условие: Дана переходная матрица цепи, нарисовать граф с проставленными вероятностями и вычислить \( P_{i}(k), i=1,2,3 ; k=1,2 \), полагая, что вначале система находится в состоянии \( S_{1} \). \[ \left(P_{i j}\right)=\left(\begin{array}{cccc} 0.2 & 0.3 & 0.5 & 0 \\ 0.6 & 0 & 0 & 0.4 \\ 0.4 & 0.2 & 0.3 & 0.1 \\ 0.5 & 0 & 0 & 0.5 \end{array}\right) \]