Łańcuch Markowa
Łańcuch Markowa to model stochastyczny używany do wyznaczania prawdopodobieństwa, że obiekt znajdzie się w określonym stanie lub określonej kondycji po tym, jak w poprzedniej iteracji łańcucha znalazł się w określonym stanie lub określonej kondycji. Zmiany stanu obiektu nazywane są przejściami, a prawdopodobieństwa, że jeden stan obiektu zmieni się na inny, nazywane są prawdopodobieństwami przejścia. Zakłada się, że początkowo obiekt jest w idealnej kondycji.