Markov-kjede

En Markov-kjede er en stokastisk modell som brukes for å fastslå sannsynligheten av at utstyret vil være i en bestemt tilstand eller helsetilstand etter at det har nådd en viss tilstand eller helsetilstand i en tidligere iterasjon av kjeden. Endringene i tilstanden til utstyret kalles overganger og sannsynligheten for at utstyret går fra en tilstand til en annen kalles overgangssannsynligheter. Initiell status på utstyret antas å være perfekt tilstand.