U pravu ste: upijajuće stanje mora se ponavljati. Da budemo precizni s definicijama: zadan prostor stanja X i Markovljev lanac s prijelaznom matricom P definiranom na X. Stanje x∈X je apsorbirajuće ako je Pxx=1; to nužno implicira da je Pxy=0, y≠x.
Jesu li apsorbirajuća stanja prolazna?
upijanje naziva se prolazno. Dakle, u Markovljevim lancima koji apsorbiraju, postoje apsorbirajuća stanja ili prolazna stanja.
Što je ponavljajuće stanje?
Općenito, za stanje se kaže da se ponavlja ako, svaki put kada napustimo to stanje, vratit ćemo se u to stanje u budućnosti s vjerojatnošću jedan. S druge strane, ako je vjerojatnost povratka manja od jedan, stanje se naziva prolaznim.
Kako dokazati da se stanje ponavlja?
Kažemo da je stanje i rekurentno ako je Pi(Xn=i za beskonačno mnogo n)=1. Pi(Xn=i za beskonačno mnogo n)=0. Dakle, ponavljajuće stanje je ono u koje se stalno vraćate, a prolazno stanje je ono koje na kraju napuštate zauvijek.
Što su apsorbirajuća stanja?
Upijajuće stanje je stanje koje se, jednom uneseno, ne može ostaviti. Poput općih Markovljevih lanaca, mogu postojati Markovi lanci koji apsorbiraju kontinuirano vrijeme s beskonačnim prostorom stanja.
