Марков Тізбегі
Марков процестерінің ерекше жағдайларын білдіретін кейбір терминдерді қолдануға қатысты әдебиеттерде нақты келісім жоқ екенін ескеріңіз. Әдетте "Марков тізбегі" термині дискретті уақыт жиынтығы бар процесс үшін сақталады, яғни Марковтың дискретті уақыт тізбегі (DTMC), бірақ бірнеше авторлар Марковтың үздіксіз Уақыт тізбегі (CTMC) үшін "Марков процесі" терминін нақты айтылмай қолданады. Сонымен қатар, Марков процестерінің басқа кеңейтімдері бар, олар осылай аталады, бірақ міндетті түрде осы төрт санаттың ешқайсысына жатпайды (Марков моделін қараңыз). Сонымен қатар, уақыт индексі нақты болуы міндетті емес; күй кеңістігі сияқты, басқа математикалық құрылымдар арқылы индекстер жиынтығында қозғалатын елестететін процестер бар. Штат кеңістігінің үздіксіз уақытының жалпы Марков тізбегі оның белгілі бір термині болмайтын дәрежеде ортақ екенін ескеріңіз.
соңғы және есептелетін күй кеңістігі бар Марков тізбектері
Марковтың дискретті уақыт тізбегі (DTMC)