Du kannst so vorgehen: 
Definiere dir eine Variable für die Übergangsmatrix, zum Beispiel so: 
$$ U:=\begin{pmatrix}  0.5 & 1 & 0.9\\ 0.3 & 0 & 0.1 \\0.2 & 0 & 0\end{pmatrix} $$Berechne damit dann, was du haben möchtest, zum Beispiel die Zustandsverteilung nach 10 Schritten bei einem Start in Zustand 1: 
$$ U^{10} \cdot \begin{pmatrix} 1\\0\\0 \end{pmatrix} $$