Markov chains

Цепи Маркова играют центральную роль в понимании случайных процессов. Это связано не только с тем, что они широко используются в приложениях, связанных со случайными процессами, но и с тем, что можно явно рассчитать многие интересующие величины.