AI——Probability 概率分布

重点一:Marginal Distributions 边缘分布概率

  • Marginal distributions are sub-tables which eliminate variables. 【边际分布是消去变量的子表】
  • Marginalization (summing out): Collapse a dimension by adding.   【边缘化(求和):通过增加来瓦解一个维度】

边缘分布概率计算公式:

P(X=x)=\sum _{}yP(X=x,Y=y)

案例:

AI——Probability 概率分布_第1张图片

重点二: Conditional Probabilities  条件概率

P(A|B)  ==> A事件在B事件发生的情况下发生的概率

条件概率计算公式:  条件概率=联合概率/边缘概率

P(A|B)=\frac{P(A,B)}{P(B)}               P(B|A)=\frac{P(A,B)}{P(A)}

案例:

AI——Probability 概率分布_第2张图片

重点三:Joint probability distribution 联合概率

P(A,B) ==> 事件A,B同时发生的概率

概率计算公式:

P(A,B)=P(A|B)\ast {P(B)}=P(B|A)\ast {P(A)}

案例:

AI——Probability 概率分布_第3张图片

 条件概率分布的链式规则:

A joint distribution can be written as a product of conditional distributions by repeated application of the product rule.

通过重复应用乘法法则,联合分布可以写成条件分布的乘积(累乘)。

P(x1, x2, x3) = P(x3 | x1, x2) P(x1, x2) = P(x3 | x1, x2) P(x2 | x1) P(x1)

应用推广公式:

P(x_{1},x_{1},x_{2},.....,x_{n})=\prod _{i}P(x_{i}|x_{1},.....,x_{i-1})

注意:逗号连起来的为一个整体

P(A,B|C)=\frac{P(A,B,C)}{P(C)}

P(A|B,C)=\frac{P(A,B,C)}{P(B,C)}

重点四:Normalizing a distribution  归一化

归一化 ==》使所有项的和为一

归一化操作:Multiply each entry by \alpha = 1/(sum over all entries)

通俗理解:

P(A|B)=\frac{P(A,B)}{P(B)} \Rightarrow P(A|B)=\alpha P(A,B)     

归一化系数 :    \alpha =\frac{1}{P(B)}     边缘概率分之一

 

 

 

你可能感兴趣的:(人工智能,概率论,人工智能)