Bir Markov zinciri, tamamen geçiş matrisi ve ilk başlangıç durum vektörünün belirlenmesiyle tanımlanır. Başlangıç S_i durumundaki olayların olasılıkları yani q_i bir başka ifadeyle p(X₀ = i) = q_i dir. Markov zinciri için başlangıç durum (olasılık) vektörü ise Q = [ q₁, q₂, q₃, … , q_n]  olup  (1×n) boyutundadır. S_i durumundan S_j durumuna geçiş olasılıkları (n×n) boyutlu geçiş olasılığı matrisi (P) ile gösterilir. P matrisinin tüm elemanları pozitif değerli ve matrisin her satırında yer alan olasılıkların toplamı bire eşittir. Bu yüzden, bu matrisin her bir satırı olasılık vektörüdür ve geçiş matrisi de stokastik bir matristir. Bu bilgilerden de anlaşıldığı gibi geçiş matrisine ilişkin seçeneklerde yer alan ifadelerin tümü doğrudur, dolayısıyla doğru cevap E’dir.