bilibili西瓜书白板推导day1

先验概率:指的是事情还没有发生,求这件事情发生的可能性大小。利用现有材料进行计算,大多是历史材料;

后验概率:指的是事情已经发生,求这件事情发生的原因是由某个因素的可能性的大小,使用贝叶斯公式计算;

极大似然估计:其建立在极大似然原理上,一个随机试验可能会出现若干结果。如果A出现了,那么认为实验条件对A的出现有利,即出现概率P(A)较大。

bilibili西瓜书白板推导day1_第1张图片

通过函数求导得到极值点,求得极大似然估计。

 

频率派将参数\theta看为常量,而数据为随机变量,需要得到\theta估计,常用的估计方法为极大似然估计。

贝叶斯派将参数seta看为服从一定的概率分布,\theta \sim p(\theta)为参数的先验概率

贝叶斯估计通过贝叶斯后验概率公式p(\theta|x)=\frac{p(x|\theta)\cdot p(\theta))}{p(x)}求得观测的\theta估计,可以进行贝叶斯预测。

你可能感兴趣的:(机器学习,机器学习)