Beta分布的定义:对于参数,取值范围为[0, 1]的随机变量x的概率密度函数为:
在很多任务中,我们关心某些概率分布并非因为对这些概率分布本身感兴趣,而是要基于他们计算某些期望,并且还可能进一步基于这些期望做出决策.采样法正式基于这个思路.具体来说,假定我们的目标是计算函数f(x)在概率密度函数p(x)下的期望
则可根据p(x)抽取一组样本,然后计算f(x)在这些样本上的均值
,从统计学角度来看,文档的生成可以看成是上帝抛掷骰子生成的结果,每一次抛掷骰子都生成一个词汇,抛掷N词生成一篇文档.在统计文本建模中,我们希望猜测出上帝是如何玩这个游戏的,这会涉及到两个最核心的问题:
第一个问题就是表示模型中都有哪些参数,骰