وفقًا لما هو أدناه، فما هي عملية قرار ماركوف؟
Context:في الرياضيات، عملية قرار ماركوف (MDP) هي عملية التحكم العشوائي في الوقت المناسب. يقدم إطار رياضي لنمذجة صنع القرار في الحالات التي تكون فيها النتائج عشوائية جزئيا وتحت سيطرة صانع القرار جزئيا. ويعمل البرنامج على دراسة مشاكل التحسين التي يتم حلها عن طريق البرمجة الديناميكية. كان يعرف MDP على الأقل في وقت مبكر من الخمسينيات من القرن العشرين؛ نتيجة مجموعة أساسية من الأبحاث حول عمليات اتخاذ القرار ماركوف من كتاب رونالد هوارد عام 1960، البرمجة الديناميكية وعمليات ماركوف. وتستخدم في العديد من التخصصات، بما في ذلك الروبوتات والتحكم الآلي والاقتصاد والتصنيع. اسم MDPs يأتي من عالم الرياضيات الروسي أندري ماركوف لأنها امتداد لسلاسل ماركوف.
عملية قرار ماركوف (MDP) هي إطار رياضي لتصميم عملية اتخاذ القرار في الحالات التي تكون فيها النتائج غير خاضعة بالكامل لسيطرة صانعي القرار. تستخدم MDPs في مجموعة متنوعة من التخصصات، مثل الروبوتات والاقتصاد.