ВУЗ:
Составители:
Рубрика:
21
По индукции можно доказать, что
,
1
1
)()()()(
∑
−
=
−
⋅+=
n
m
mn
jj
m
jj
n
jj
n
jj
pffp
откуда получается искомое выражение
∑
−
=
−
⋅−=
1
1
)()()()(
n
m
mn
jj
m
jj
n
jj
n
jj
pfpf
Тогда вероятность по крайней мере одного возвращения в
состояние E
j
определяется формулой:
∑
∞
=
=
1
)(
m
m
jjjj
ff
Следовательно, система обязательно вернется в состояние j,
если f
jj
= 1. Обозначив через µ
jj
среднее время возвращения, полу-
чим:
∑
∞
=
⋅=
1
)(
k
k
jjjj
fkµ
Если f
jj
< 1, то не известно, вернется ли система в состояние
E
j
, и, следовательно, µ
jj
= ∞.
Исходя из определения первого времени возвращения, со-
стояния марковской цепи можно классифицировать следующим
образом:
1. состояние является невозвратным, если f
jj
< 1, т.е. µ
jj
= ∞;
2. состояние возвратно, если f
jj
= 1;
3. возвратное состояние является нулевым, если µ
jj
= ∞ и не-
нулевым, когда µ
jj
< ∞;
4. состояние называется периодическим с периодом T, если
возвращение в него возможно только через число шагов Т, 2Т,
3Т, … Это означает, что если n не делится на Т без остатка, то
p
jj
(n)
= 0;
5. возвратное состояние является эргодическим, если оно
ненулевое и апериодическое.
Любая неприводимая цепь Маркова является эргодической,
если все ее состояния эргодические. В этом случае распределение
абсолютных вероятностей a
(n)
= a
(0)
⋅P
n
всегда однозначно сходит-
ся к предельному (финальному) распределению при n →∞, где
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
По индукции можно доказать, что n −1 + ∑ f jj ( n− m ) = f jj ⋅ p jj (n) (n) ( m) p jj , m =1 откуда получается искомое выражение n −1 − ∑ f jj ( n − m) = p jj ⋅ p jj ( n) (n) (m) f jj m =1 Тогда вероятность по крайней мере одного возвращения в состояние Ej определяется формулой: ∞ f jj = ∑ f jj ( m) m =1 Следовательно, система обязательно вернется в состояние j, если fjj= 1. Обозначив через µjj среднее время возвращения, полу- чим: ∞ µ jj = ∑ k ⋅ f jj (k ) k =1 Если fjj < 1, то не известно, вернется ли система в состояние Ej, и, следовательно, µjj = ∞. Исходя из определения первого времени возвращения, со- стояния марковской цепи можно классифицировать следующим образом: 1. состояние является невозвратным, если fjj < 1, т.е. µjj = ∞; 2. состояние возвратно, если fjj = 1; 3. возвратное состояние является нулевым, если µjj = ∞ и не- нулевым, когда µjj < ∞; 4. состояние называется периодическим с периодом T, если возвращение в него возможно только через число шагов Т, 2Т, 3Т, … Это означает, что если n не делится на Т без остатка, то pjj(n) = 0; 5. возвратное состояние является эргодическим, если оно ненулевое и апериодическое. Любая неприводимая цепь Маркова является эргодической, если все ее состояния эргодические. В этом случае распределение абсолютных вероятностей a(n) = a(0) ⋅Pn всегда однозначно сходит- ся к предельному (финальному) распределению при n →∞, где 21 PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
Страницы
- « первая
- ‹ предыдущая
- …
- 19
- 20
- 21
- 22
- 23
- …
- следующая ›
- последняя »