ВУЗ:
Составители:
Рубрика:
22
предельное распределение не зависит от исходных вероятностей
a
(0)
.
Справедлива следующая
Теорема. Все состояния в неприводимой бесконечной мар-
ковской цепи могут принадлежать к одному и только одному из
следующих трех классов: невозвратных, возвратных нулевых или
возвратных ненулевых состояний. Во всех случаях все состояния
являются сообщающимися и имеют один и тот же период. В ча-
стном случае, когда в цепи конечное число состояний, она не
может содержать только невозвратные состояния или какие-либо
нулевые состояния.
Ограничимся рассмотрением только апериодических со-
стояний, т.к. анализ периодических состояний довольно сложен.
Существование предельного распределения в неприводимой
апериодической цепи зависит от класса ее состояний. Таким об-
разом, рассматривая три класса состояний, указанных в преды-
дущей теореме, можно сформулировать следующую теорему.
Теорема. Если в неприводимой апериодической марковской
цепи
а) все состояния невозвратные или нулевые, то p
jj
(n)
→ 0 при
n → ∞ для всех i и j и предельное распределение не существует;
б) все состояния эргодические, то
,...,2,1,0,
lim
)(
==
∞→
ja
j
n
j
n
β
где β
j
– предельное (установившееся) распределение. Веро-
ятности β
j
существуют однозначно и не зависят от a
j
(0)
. В этом
случае величины β
j
можно определить из уравнений
.1, =⋅=
∑
∑
j
j
i
ijij
p βββ
Среднее время возвращения в состояние j при этом опреде-
ляется формулой µ
jj
= 1/ β
j
.
Пример. Рассмотрим марковскую цепь с двумя состояниями
=
6,04,0
7,03,0
P
PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
предельное распределение не зависит от исходных вероятностей a(0). Справедлива следующая Теорема. Все состояния в неприводимой бесконечной мар- ковской цепи могут принадлежать к одному и только одному из следующих трех классов: невозвратных, возвратных нулевых или возвратных ненулевых состояний. Во всех случаях все состояния являются сообщающимися и имеют один и тот же период. В ча- стном случае, когда в цепи конечное число состояний, она не может содержать только невозвратные состояния или какие-либо нулевые состояния. Ограничимся рассмотрением только апериодических со- стояний, т.к. анализ периодических состояний довольно сложен. Существование предельного распределения в неприводимой апериодической цепи зависит от класса ее состояний. Таким об- разом, рассматривая три класса состояний, указанных в преды- дущей теореме, можно сформулировать следующую теорему. Теорема. Если в неприводимой апериодической марковской цепи а) все состояния невозвратные или нулевые, то pjj(n) → 0 при n → ∞ для всех i и j и предельное распределение не существует; б) все состояния эргодические, то = β j , j = 0,1,2,..., ( n) lim a j n→∞ где β j – предельное (установившееся) распределение. Веро- ятности βj существуют однозначно и не зависят от aj(0). В этом случае величины β j можно определить из уравнений β j = ∑ β i ⋅ pij , ∑ β j = 1. i j Среднее время возвращения в состояние j при этом опреде- ляется формулой µjj = 1/ βj. Пример. Рассмотрим марковскую цепь с двумя состояниями 0,3 0,7 P = 0,4 0,6 22 PDF created with FinePrint pdfFactory Pro trial version www.pdffactory.com
Страницы
- « первая
- ‹ предыдущая
- …
- 20
- 21
- 22
- 23
- 24
- …
- следующая ›
- последняя »