 Ní ìbámu pẹlú èyí nísàlẹ, kí ni ìlànà ìpinnu Markov?Context:Nínú ìṣirò, ìgbésẹ ìpinnu Markov MDP jẹ ìgbésẹ ìṣàkóso tí ó wà ní àkókò tí ó yàtọ síra. O pese ilana iṣiro fun ṣiṣe ipinnu ipinnu ni awọn ipo nibiti awọn abajade jẹ apakan laileto ati apakan labẹ iṣakoso ti oluṣe ipinnu. MDPs wúlò fún ìkéde àwọn ìṣòro àtúnṣe tí a yanjú nípasẹ ìtòlẹsẹẹsẹ alágbára. MDPs ni a mọ ni o kere bi tete bi awọn 1950s; a mojuto ara ti iwadi lori Markov ipinnu awọn ilana ja lati Ronald Howard ká 1960 iwe, Dynamic siseto ati Markov Processes. A lo wọn ni ọpọlọpọ awọn ẹka, pẹlu roboti, iṣakoso adaṣe, ọrọ-aje ati iṣelọpọ. Orukọ MDPs wa lati ọdọ onimọ-jinlẹ Russia Andrey Markov bi wọn ṣe jẹ itẹsiwaju ti awọn ẹwọn Markov. : Ilana ipinnu Markov MDP jẹ ilana iṣiro fun ṣiṣe ipinnu ipinnu ni awọn ọran nibiti awọn abajade ko wa labẹ iṣakoso ti awọn oluṣe ipinnu. A lo awọn MDP ni ọpọlọpọ awọn ẹkọ, gẹgẹbi robotics ati ọrọ-aje. 