طبقاً للأسفل، ماهي عملية قرار ماركوف؟
Context:في الرياضيات ، عملية قرار ماركوف (MDP) هي عملية تحكم عابرة في الوقت المناسب. يقدم إطار رياضي لنمذجة اتخاذ القرار في الحالات التي تكون النتائج عشوائية جزئيا وتحت سيطرة صانع القرار جزئيا. الـMDP مفيدين لدراسة مشاكل التحسين التي تحل عن طريق البرمجة الديناميكية. كُنْت الـ MDP معروفة على الاقل في بداية الخمسينات من القرن الماضي. واكثر من ذلك، انطلاقت البحوث عن عمليات قرار ماركوف من كتاب رونالد هوارد عام 1960 بعنوان البرمجة الديناميكية و عمليات ماركوف. يستخدمون في كتير من التخصصات، ومنها الروبوتات، والتحكم الآلي، والاقتصاد والتصنيع. الاسم لـ MDP يأتي من عالم الرياضيات الروسي اندري ماركوف لأنها امتداد لسلاسل ماركوف.
عملية قرار ماركوف (MDP) هو إطار رياضي لنمذجة عملية اتخاذ القرار في الحالات التي لا تكون النتائج تحت سيطرة صانعي القرار بالكامل. يُستَخدَمُ MDPs في مجموعة متنوعة من التخصصات، مثل الروبوتات والاقتصاد.