Yanıt Açıklaması: (nxn) boyutlu geçiş olasılık matrisinin tüm elemanları pozitif değerli ve matrisin her satırında yer alan olasılıkların toplamı bire eşittir. Bu yüzden, bu matrisin her bir satırı olasılık vektörüdür ve geçiş matrisi de stokastik bir matristir.