Κανονική 2011Θέμα 2ο, ερώτημα β:
Επειδή η κλάση καταστάσεων {4,5} είναι κλειστή, δουλεύεουμε μόνο με τον πίνακα Q, που αφορά τις καταστάσεις 4 και 5.

Βρίσκουμε τις ιδιοτιμές του.

Επομένως,
^n \\
\end{array}\] B^{-1})
Άρα,
} = P[X_n = 4 | X_0=4] = \[ \begin{array}{cc}
1 & 0 \\
\end{array} \] \cdot Q^n = c + d \cdot \left(-\frac{1}{4}\right)^n)
όπου c και d σταθερές. Όμως, γνωρίζουμε ότι
} = 1)
και
} = P[X_1 = 4 | X_0=4] 1/4)
Λύνουμε το σύστημα εξισώσεων που προκύπτει και έχουμε c=0.4 και d=0.6, οπότε
Έτσι λύνεται το ερώτημα?
Επίσης, πώς λύνεται το επόμενο ερώτημα?