27-09-2023
Периоди́ческое состоя́ние — это такое состояние цепи Маркова, которое навещается цепью только через промежутки времени, кратные фиксированному числу.
Пусть дана однородная цепь Маркова с дискретным временем с матрицей переходных вероятностей . В частности, для любого , матрица является матрицей переходных вероятностей за шагов. Рассмотрим последовательность . Число
где обозначает наибольший общий делитель, называется пери́одом состояния .
Таким образом, период состояния равен , если из того что следует, что делится на .
Таким образом период любого неразложимого класса цепи Маркова определён и равен периоду любого своего представителя. Соответственно, классы делятся на периодические и апериодические.
Классификация состояний и цепей Маркова | |
---|---|
Состояние | апериодическое | возвратное | достижимое | невозвратное | несущественное | нулевое | периодическое | положительное | сообщающееся | существенное |
Цепь | апериодическая | возвратная | невозвратная | неразложимая | нулевая | периодическая | положительная | разложимая | эргодическая |
Периодическая цепь Маркова.