नीचे के अनुसार मार्कोव निर्णय प्रक्रिया क्या है?गणित में, एक मार्कोव निर्णय प्रक्रिया (एमडीपी) असतत-समय स्टोकेस्टिक नियंत्रण प्रक्रिया है। यह उन स्थितियों में मॉडलिंग निर्णय लेने के लिए गणितीय ढांचा प्रदान करता है जहां परिणाम आंशिक रूप से यादृच्छिक होते हैं और आंशिक रूप से निर्णय निर्माता के नियंत्रण में होते हैं। गतिशील प्रोग्रामिंग के माध्यम से हल की गई अनुकूलन समस्याओं का अध्ययन करने के लिए एमडीपी उपयोगी हैं। एमडीपी को कम से कम 1950 के दशक की शुरुआत में जाना जाता था; [1] मार्कोव निर्णय प्रक्रियाओं पर शोध का एक मुख्य निकाय रोनाल्ड हावर्ड की 1960 की किताब, डायनेमिक प्रोग्रामिंग और मार्कोव प्रोसेस से निकला था। [2] उनका उपयोग रोबोटिक्स, स्वचालित नियंत्रण, अर्थशास्त्र और विनिर्माण सहित कई विषयों में किया जाता है। एमडीपी का नाम रूसी गणितज्ञ एंड्री मार्कोव से आता है क्योंकि वे मार्कोव श्रृंखलाओं का विस्तार हैं।
चयनित संदर्भों से अधिकतम जानकारी के आधार पर, मार्कोव निर्णय प्रक्रिया एक समय-असतत नियंत्रण प्रक्रिया है जो यादृच्छिक घटनाओं के आधार पर निर्णय लेती है। इसमें मॉडल को एक प्रतिबंधित स्थिति से दूसरी पर स्थानांतरित करने की अनुमति होती है जबकि आंशिक रूप से निर्णय निर्माता के नियंत्रण में होता है। यह एक संभवतः वर्तमान स्थिति के आधार पर अगली संभव स्थिति का पूर्वानुमान लगाने के लिए उपयोगी होता है और आंशिक रूप से प्रभावित होता है जब आप लंबी अवधि तक की भविष्यवाणियों की आवश्यकता होती है।