马尔可夫链的提出来自俄国数学家安德雷·马尔可夫.马尔可夫在1906-1907年间发表的研究中为了证明随机变量间的独立性不是弱大数定律和中心极限定理成立的必要条件,构造了一个按条件概率相互依赖的随机过程,并证明其在一定条件下收敛于一组向量,该随机过程被后世称为马尔可夫链 .在马尔可夫链被提出之后,保罗·埃伦费斯特和Tatiana Afanasyeva在1907年使用马尔可夫链建立了Ehrenfest扩散模型 .1912年亨利·庞加莱研究了有限群上的马尔可夫链并得到了庞加莱不等式 .1931年,安德雷·柯尔莫哥洛夫在对扩散问题的研究中将马尔可夫链推广至连续指数集得到了连续时间马尔可夫链,并推出了其联合分布函数的计算公式.独立于柯尔莫哥洛夫,1926年,Sydney Chapman在研究布朗运动时也得到了该计算公式,即后来的Chapman-Kolmogorov等式 .1953年,Nicholas Metropolis等通过构建马尔可夫链完成了对流体目标分布函数的随机模拟 ,该方法在1970年由Wilfred K. Hastings进一步完善,并发展为现今的梅特罗波利斯-黑斯廷斯算法 .1957年,Richard Bellman通过离散随机最优控制模型首次提出了马尔可夫决策过程.此后以马尔可夫链为基础,更复杂的马尔可夫模型(例如隐马尔可夫模型 和马尔可夫随机场)被相继提出,并在模式识别等实际问题中得到应用了.马尔可夫决策过程是研究随机环境下多阶段决策过程优化问题的理论工具.在过去的几十年中,随着生态科学,经济理论,通讯工程以及众多学科中需要考虑不确定因素和序列决策问题的大量新模型的涌现,进一步刺激了马尔可夫决策过程在理论上和应用领域中长足的发展.话不多说,直接上图.(红色为几率最高,绿色为前8几率,黄色为前16几率)2021128期双色球红号出号几率2021128期双色球红号出号几率变化2021128期双色球蓝号出号几率及几率变化鉴于图片可能看的不太清楚,以下为整理的号码(几率降序排列)出号几率(%): 14 1 32 6 7 13 8 18 3 26 22 20 17 19 16 12 2几率变化(%):3 13 18 7 14 6 31 12 30 23 2 17 29 8 28 15 4出号几率(%):1 14 16 3 5几率变化(%): 16 13 5 14 6 1 8 7