Een Markov-overgangsmatrix is een vierkante matrix die de waarschijnlijkheid beschrijft van het verplaatsen van de ene toestand naar de andere in een dynamisch systeem. In elke rij staan de kansen om van de staat die door die rij wordt voorgesteld naar de andere staten te gaan. Zo voegen de rijen van een Markov-overgangsmatrix elk toe aan één. Soms wordt een dergelijke matrix zoiets als Q (x '| x) aangeduid die op deze manier kan worden begrepen: dat Q een matrix is, x de bestaande status is, x' een mogelijke toekomstige status is, en voor elke x en x 'in het model, de kans om naar x 'te gaan, gegeven dat de bestaande status x is, zijn in Q.
Tijdschriftartikelen over Markov Transition Matrix