Markov-processen vormen een speciaal soort van stochastische processen en zijn voor ons van belang omdat een groot aantal basis modellen van wachtrij- en verliessystemen, alsmede eenvoudige betrouwbaarheidsmodellen, als een Markov-proces beschreven kunnen worden.