ВУЗ:
Составители:
Рубрика:
21
По индукции можно доказать, что
,
1
1
)()()()(
∑
−
=
−
⋅+=
n
m
mn
jj
m
jj
n
jj
n
jj
pffp
откуда получается искомое выражение
∑
−
=
−
⋅−=
1
1
)()()()(
n
m
mn
jj
m
jj
n
jj
n
jj
pfpf
Тогда вероятность по крайней мере одного возвращения в
состояние E
j
определяется формулой:
∑
∞
=
=
1
)(
m
m
jjjj
ff
Следовательно, система обязательно вернется в состояние j,
если f
jj
= 1. Обозначив через µ
jj
среднее время возвращения, полу-
чим:
∑
∞
=
⋅=
1
)(
k
k
jjjj
fkµ
Если f
jj
< 1, то не известно, вернется ли система в состояние
E
j
, и, следовательно, µ
jj
= ∞.
Исходя из определения первого времени возвращения, со-
стояния марковской цепи можно классифицировать следующим
образом:
1. состояние является невозвратным, если f
jj
< 1, т.е. µ
jj
= ∞;
2. состояние возвратно, если f
jj
= 1;
3. возвратное состояние является нулевым, если µ
jj
= ∞ и не-
нулевым, когда µ
jj
< ∞;
4. состояние называется периодическим с периодом T, если
возвращение в него возможно только через число шагов Т, 2Т,
3Т, … Это означает, что если n не делится на Т без остатка, то
p
jj
(n)
= 0;
5. возвратное состояние является эргодическим, если оно
ненулевое и апериодическое.
Любая неприводимая цепь Маркова является эргодической,
если все ее состояния эргодические. В этом случае распределение
абсолютных вероятностей a
(n)
= a
(0)
⋅P
n
всегда однозначно сходит-
ся к предельному (финальному) распределению при n →∞, где
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
По индукции можно доказать, что
n −1
+ ∑ f jj
( n− m )
= f jj ⋅ p jj
(n) (n) ( m)
p jj ,
m =1
откуда получается искомое выражение
n −1
− ∑ f jj
( n − m)
= p jj ⋅ p jj
( n) (n) (m)
f jj
m =1
Тогда вероятность по крайней мере одного возвращения в
состояние Ej определяется формулой:
∞
f jj = ∑ f jj
( m)
m =1
Следовательно, система обязательно вернется в состояние j,
если fjj= 1. Обозначив через µjj среднее время возвращения, полу-
чим:
∞
µ jj = ∑ k ⋅ f jj
(k )
k =1
Если fjj < 1, то не известно, вернется ли система в состояние
Ej, и, следовательно, µjj = ∞.
Исходя из определения первого времени возвращения, со-
стояния марковской цепи можно классифицировать следующим
образом:
1. состояние является невозвратным, если fjj < 1, т.е. µjj = ∞;
2. состояние возвратно, если fjj = 1;
3. возвратное состояние является нулевым, если µjj = ∞ и не-
нулевым, когда µjj < ∞;
4. состояние называется периодическим с периодом T, если
возвращение в него возможно только через число шагов Т, 2Т,
3Т, … Это означает, что если n не делится на Т без остатка, то
pjj(n) = 0;
5. возвратное состояние является эргодическим, если оно
ненулевое и апериодическое.
Любая неприводимая цепь Маркова является эргодической,
если все ее состояния эргодические. В этом случае распределение
абсолютных вероятностей a(n) = a(0) ⋅Pn всегда однозначно сходит-
ся к предельному (финальному) распределению при n →∞, где
21
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
Страницы
- « первая
- ‹ предыдущая
- …
- 19
- 20
- 21
- 22
- 23
- …
- следующая ›
- последняя »
