"Finite Markov chains, Undergraduate Texts in Mathematics" - читать интересную книгу автора (John G. Kemeny, James Laurie Snell)