ВУЗ:
Составители:
Рубрика:
20
В этом случае все состояния цепи называются сообщающи-
мися.
Множество G состояний марковской цепи называется замк-
нутым, если система, однажды оказавшись в одном из состояний
этого множества, будет находиться в множестве G в течение бес-
конечного интервала времени. Частным случаем замкнутого
множества является единственное состояние E
j
с переходной ве-
роятностью P
jj
= 1. В этом случае состояние E
j
называется погло-
щающим. Все состояния неприводимой цепи должны образовы-
вать замкнутое множество и ни одно другое подмножество не
может быть замкнутым. Замкнутое множество G должно также
удовлетворять всем условиям, характеризующим марковскую
цепь, и, следовательно, его можно подвергнуть независимому
анализу.
Пример. Рассмотрим следующую марковскую цепь
=
10003
2/13/106/12
01001
04/12/14/10
3210
P
Как видно, данная марковская цепь не будет неприводимой,
т.к. состояния 0, 1 и 2 нельзя достигнуть из состояния 3. Состоя-
ние 3 образует замкнутое множество и, таким образом, является
поглощающим.
Первое время возвращения
Система, первоначально находящаяся в состоянии E
j
, может
в первый раз вернуться в это состояние на n-м шаге (n ≥ 1). Число
шагов, за которое система возвращается в состояние E
j
, называет-
ся первым временем возвращения.
Обозначим через f
jj
(n)
вероятность того, что первое время
возвращения в состояние E
j
соответствует n-му шагу. Тогда при
заданной матрице переходов P = {p
ij
} выражение для f
jj
(n)
можно
определить следующим образом:
P
jj
= f
jj
(1)
, p
jj
(2)
= f
jj
(2)
+ f
jj
(1)
⋅p
jj
→ f
jj
(2)
= p
jj
(2)
– f
jj
(1)
⋅p
jj
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
В этом случае все состояния цепи называются сообщающи-
мися.
Множество G состояний марковской цепи называется замк-
нутым, если система, однажды оказавшись в одном из состояний
этого множества, будет находиться в множестве G в течение бес-
конечного интервала времени. Частным случаем замкнутого
множества является единственное состояние Ej с переходной ве-
роятностью Pjj = 1. В этом случае состояние Ej называется погло-
щающим. Все состояния неприводимой цепи должны образовы-
вать замкнутое множество и ни одно другое подмножество не
может быть замкнутым. Замкнутое множество G должно также
удовлетворять всем условиям, характеризующим марковскую
цепь, и, следовательно, его можно подвергнуть независимому
анализу.
Пример. Рассмотрим следующую марковскую цепь
0 1 2 3
0 1 / 4 1 / 2 1/ 4 0
P = 1 0 0 1 0
2 1/ 6 0 1 / 3 1 / 2
3 0
0 0 1
Как видно, данная марковская цепь не будет неприводимой,
т.к. состояния 0, 1 и 2 нельзя достигнуть из состояния 3. Состоя-
ние 3 образует замкнутое множество и, таким образом, является
поглощающим.
Первое время возвращения
Система, первоначально находящаяся в состоянии Ej, может
в первый раз вернуться в это состояние на n-м шаге (n ≥ 1). Число
шагов, за которое система возвращается в состояние Ej, называет-
ся первым временем возвращения.
Обозначим через fjj(n) вероятность того, что первое время
возвращения в состояние Ej соответствует n-му шагу. Тогда при
заданной матрице переходов P = {pij} выражение для fjj(n) можно
определить следующим образом:
Pjj = fjj(1), pjj(2) = fjj(2) + fjj(1)⋅pjj → fjj(2) = pjj(2) – fjj(1)⋅pjj
20
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
Страницы
- « первая
- ‹ предыдущая
- …
- 18
- 19
- 20
- 21
- 22
- …
- следующая ›
- последняя »
