وفقاً لما هو أدناه، فما هي عملية قرار ماركوف؟
Context:في الرياضيات ، عملية قرار ماركوف (MDP) هي عملية تحكم عشوائية متفرقة في الوقت. بتوفر إطار رياضي لنمذجة صنع القرار في الحالات اللي النتائج فيها عشوائية جزئياً وتحت سيطرة صانع القرار جزئياً. بيستخدم MDPs لدراسة مشاكل التحسين المحل عن طريق البرمجة الديناميكية. كانت البرامج الديناميكية معروفة على الأقل في وقت مبكر من الخمسينيات من القرن العشرين؛ نتيجة مجموعة أساسية من الأبحاث حول عمليات قرار ماركوف من كتاب رونالد هوارد سنة 1960، البرمجة الديناميكية وعمليات ماركوف. بيتم استخدامها في كتير من التخصصات، من ضمنها الروبوتات والتحكم الآلي والاقتصاد والتصنيع. اسم MDPs بيجي من عالم الرياضيات الروسي أندري ماركوف لأنهم امتداد لسلاسل ماركوف.
عملية قرار ماركوف (MDP) هي إطار رياضي لنمذجة عملية اتخاذ القرار في الحالات اللي النتائج فيها مش تحت سيطرة صانعي القرار بالكامل. بيستخدموا MDPs في مجموعة متنوعة من التخصصات، زي الروبوتات والاقتصاد.