 පහත දැක්වෙන පරිදි, Markov තීරණ ක්රියාවලිය කුමක්ද?
 ගණිතයේ දී මාර්කොව් තීරණ ක්‍රියාවලියක් (MDP) යනු විවික්ත කාල ස්ටෝචස්ටික් පාලන ක්‍රියාවලියකි. ප්‍රතිඵල අර්ධ වශයෙන් අහඹු සහ අර්ධ වශයෙන් තීරණ ගන්නෙකුගේ පාලනය යටතේ පවතින අවස්ථාවන්හිදී තීරණ ගැනීම ආකෘතිගත කිරීම සඳහා එය ගණිතමය රාමුවක් සපයයි. ගතික ක්‍රමලේඛනය හරහා විසඳන ප්‍රශස්තිකරණ ගැටළු අධ්‍යයනය කිරීම සඳහා MDPs ප්‍රයෝජනවත් වේ. MDPs අඩුම තරමින් 1950 ගණන්වල තරම් ඈත අතීතයේ දී දැන සිටියහ. මාර්කොව් තීරණ ක්‍රියාවලීන් පිළිබඳ මූලික පර්යේෂණ සමූහයක් රොනල්ඩ් හොවාර්ඩ්ගේ 1960 ග්‍රන්ථය වන ගතික ක්‍රමලේඛනය සහ මාර්කොව් ක්‍රියාවලීන්හි ප්‍රතිඵලයකි. ඒවා රොබෝ විද්‍යාව, ස්වයංක්‍රීය පාලනය, ආර්ථික විද්‍යාව සහ නිෂ්පාදන ඇතුළු බොහෝ විෂයයන් වල භාවිතා වේ. MDPs හි නම පැමිණෙන්නේ රුසියානු ගණිතඥ Andrey Markov වෙතින් වන අතර ඒවා Markov දාමවල දිගුවක් වේ.
මාර්කොව් තීරණ ක්‍රියාවලියක් (MDP) යනු ප්‍රතිඵල සම්පූර්ණයෙන්ම තීරණ ගන්නන්ගේ පාලනයට යටත් නොවන අවස්ථාවන්හිදී තීරණ ගැනීම ආකෘතිගත කිරීම සඳහා වන ගණිතමය රාමුවකි. MDPs රොබෝ විද්‍යාව සහ ආර්ථික විද්‍යාව වැනි විවිධ විෂයයන් වල භාවිතා වේ.