A diszkrét időparaméterű Markov-folyamatnak az a speciális esete, amikor véges számú lehetséges állapot van (S1, S2, ..., Sn) és annak valószínűsége, hogy a folyamat egy időpontban a k-adik állapotba jut, kizárólag a közvetlenül megelőző időpontbeli állapottól függ. A Markov-láncokkal kapcsolatos egyik tipikus kérdés: hogyan lehet meghatározni annak valószínűségét, hogy az Sk állapotból m lépéssel az Sj állapotba jutunk.
Lásd még:
