Cтраница 4
Покажите, как можно определить бесконечные цепи Маркова, и постройте одну такую цепь, в которой каждое состояние невозвратно. Покажите также, что любая конечная цепь Маркова имеет по меньшей мере одно возвратное состояние; выведите отсюда, что если конечная цепь Маркова неприводима, то каждое ее состояние возвратно. [46]