Marka la eego hoos, waa maxay habka go'aan qaadashada ee Markov?
Context:Xisaabta, habka go'aan qaadashada Markov (MDP) waa hab xakameyn ah oo waqti go'an ah. Waxay bixisaa qaab-dhismeedka xisaabta ee lagu daydo go'aan qaadashada xaaladaha ay natiijooyinku qayb ahaan ku yimaadaan si aan kala sooc lahayn qaybna ay ku hoos jiraan kantaroolka qofka go'aanka qaata. MDPs waxay faa'iido u leeyihiin barashada dhibaatooyinka hagaajinta ee lagu xalliyo barnaamijyada firfircoon. MDPs waxaa la ogaa ugu yaraan horaantii 1950-meeyadii; jirka asaasiga ah ee cilmi baarista ku saabsan geeddi socodka go'aan qaadashada Markov waxay ka dhalatay buugga Ronald Howard ee 1960, Barnaamijka Dhaqdhaqaaqa iyo Nidaamyada Markov. Waxaa loo adeegsadaa qaybo badan, oo ay ku jiraan robotikada, xakamaynta otomaatiga ah, dhaqaalaha iyo wax soo saarka. Magaca MDPs wuxuu ka yimid xisaabyahankii Ruushka ee Andrey Markov maadaama ay yihiin fidinta silsiladaha Markov.
Nidaamka go'aan qaadashada ee Markov (MDP) waa qaab-dhismeed xisaabiyeed oo loogu talagalay qaabeynta go'aan qaadashada xaaladaha natiijooyinka aysan gebi ahaanba hoos imaan awoodda go'aan-qaadayaasha. MDPs waxaa loo isticmaalaa noocyo kala duwan oo cilmiga ah, sida robotics iyo dhaqaalaha.