Выдержка из книги
Пугачев В.С.
Теория вероятностей и математическая статистика Изд2
Иными словами, q j есть вероятность перехода от Xi к значению Xj в следующем опыте. Маркова, то цепь Маркова называется эргодической. Понятие цепи Маркова легко обобщается на более сложные случаи, когда условные вероятности различных возможных значений каждой последующей величины зависят от значений не одной, а нескольких непосредственно предшествующих величин. В отличие от простых цепей Маркова такие последовательности называются сложными цепями Маркова. В дальнейшем мы будем рассматривать только эргодические простые цепи Маркова. При этом для простоты будем считать, что рассматриваемая цепь Маркова представляет собой последовательность значений одной случайной величины X в ряде опытов.