Du kannst so vorgehen:
Definiere dir eine Variable für die Übergangsmatrix, zum Beispiel so:
$$ U:=\begin{pmatrix} 0.5 & 1 & 0.9\\ 0.3 & 0 & 0.1 \\0.2 & 0 & 0\end{pmatrix} $$Berechne damit dann, was du haben möchtest, zum Beispiel die Zustandsverteilung nach 10 Schritten bei einem Start in Zustand 1:
$$ U^{10} \cdot \begin{pmatrix} 1\\0\\0 \end{pmatrix} $$