وفقًا للأسفل، ما هي عملية قرار ماركوف؟
Context:في الرياضيات ، عملية قرار ماركوف (MDP) هي عملية التحكم العشوائية في الوقت المناسب. إنه يوفر إطاراً رياضياً لنمذجة صنع القرار في الحالات التي تكون فيها النتائج عشوائية جزئياً وتحت سيطرة صانع القرار جزئياً. تعتبر MDP مفيدة لدراسة مشاكل التحسين التي يتم حلها عن طريق البرمجة الديناميكية. كانت MDPs معروفة على الأقل في وقت مبكر من الخمسينيات من القرن العشرين ؛ نتيجة مجموعة أساسية من الأبحاث حول عمليات اتخاذ القرار ماركوف من كتاب رونالد هوارد لعام 1960 ، البرمجة الديناميكية وعمليات ماركوف. يتم استخدامها في العديد من التخصصات ، بما في ذلك الروبوتات والتحكم الآلي والاقتصاد والتصنيع. اسم MDPs يأتي من عالم الرياضيات الروسي أندري ماركوف لأنها امتداد لسلاسل ماركوف.
عملية قرار ماركوف (MDP) هي إطار رياضي لنمذجة صنع القرار في الحالات التي تكون فيها النتائج غير خاضعة تماماً لسيطرة صانعي القرار. يتم استخدام MDPs في مجموعة متنوعة من التخصصات ، مثل الروبوتات والاقتصاد.