Düz deyirsiniz: udma vəziyyəti təkrarlanmalıdır. Təriflərlə dəqiq desək: X vəziyyət fəzası və X-də müəyyən edilmiş P keçid matrisi olan Markov zənciri verilmişdir. Əgər Pxx=1 olarsa, x∈X vəziyyəti udulur; mütləq bu o deməkdir ki, Pxy=0, y≠x.
Uducu vəziyyətlər keçicidir?
udma keçici adlanır. Beləliklə, uducu Markov zəncirlərində udma halları və ya keçici vəziyyətlər var.
Təkrarlanan vəziyyət nədir?
Ümumiyyətlə, bir vəziyyətin təkrarlanan olduğu deyilir əgər biz bu vəziyyəti tərk etsək, gələcəkdə bir ehtimalı ilə həmin vəziyyətə qayıdacayıq. Digər tərəfdən, geri qayıtma ehtimalı birdən azdırsa, vəziyyət keçici adlanır.
Bir vəziyyətin təkrarlandığını necə sübut edirsiniz?
Biz deyirik ki, i vəziyyəti təkrarlanır əgər Pi(Sonsuz çoxlu n üçün Xn=i)=1 olarsa. Pi(Sonsuz çoxlu n üçün Xn=i)=0. Beləliklə, təkrarlanan vəziyyət sizin geri qayıtdığınız, keçici vəziyyət isə nəhayət həmişəlik tərk etdiyiniz vəziyyətdir.
Uducu vəziyyətlər hansılardır?
Uducu vəziyyət bir dəfə daxil edildikdə tərk edilə bilməyən bir vəziyyətdir. Ümumi Markov zəncirləri kimi, sonsuz vəziyyət fəzasına malik fasiləsiz zaman udan Markov zəncirləri ola bilər.
