高斯概率密度函数相乘仍然是高斯密度函数

高斯分布的概念

百科:
正态分布(Normal distribution),也称“常态分布”,又名高斯分布(Gaussian distribution),最早由A.棣莫弗在求二项分布的渐近公式中得到。C.F.高斯在研究测量误差时从另一个角度导出了它。P.S.拉普拉斯和高斯研究了它的性质。是一个在数学、物理及工程等领域都非常重要的概率分布,在统计学的许多方面有着重大的影响力。
正态曲线呈钟型,两头低,中间高,左右对称因其曲线呈钟形,因此人们又经常称之为钟形曲线。
若随机变量X服从一个数学期望为 μ \mu μ、方差为 σ 2 \sigma^{2} σ2的正态分布,记为 N ( μ , σ 2 ) N(\mu, \sigma^2) N(μ,σ2)。其概率密度函数为正态分布的期望值 μ \mu μ决定了其位置,其标准差 σ 2 \sigma^2 σ2决定了分布的幅度。当 μ = 0 , σ = 1 \mu=0, \sigma=1 μ=0,σ=1时的正态分布是标准正态分布。
高斯概率密度函数相乘仍然是高斯密度函数_第1张图片

高斯分布相乘

假设 f ( x ) f(x) f(x) ~ N ( μ f , σ f 2 ) N(\mu_{f}, \sigma_{f} ^{2}) N(μf,σf2) g ( x ) g(x) g(x)~ N ( μ g , σ g 2 ) N(\mu_{g}, \sigma_{g} ^{2}) N(μg,σg2)都是高斯分布
即:
f ( x ) = 1 2 π σ f e − ( x − μ f ) 2 2 σ f 2 f(x) = \frac {1} {\sqrt{2\pi }\sigma_{f}}e^{\frac{-(x-\mu_{f})^{2}}{2\sigma_{f}^{2}}} f(x)=2π σf1e2σf2(xμf)2

g ( x ) = 1 2 π σ g e − ( x − μ g ) 2 2 σ g 2 g(x) = \frac {1} {\sqrt{2\pi }\sigma_{g}}e^{\frac{-(x-\mu_{g})^{2}}{2\sigma_{g}^{2}}} g(x)=2π σg1e2σg2(xμg)2
他们的乘积是:
h ( x ) = f ( x ) g ( x ) = 1 2 π σ f σ g e − ( ( x − μ f ) 2 2 σ f 2 + ( x − μ g ) 2 2 σ g 2 ) — — — — — — — — — — ( 1 ) h(x) = f(x)g(x)=\frac {1} {{2\pi \sigma_{f}\sigma{g}}}e^{-(\frac{(x-\mu_{f})^{2}} {2\sigma_{f}^{2}} + \frac{(x-\mu_{g})^{2}} {2\sigma_{g}^{2}} )} ——————————(1) h(x)=f(x)g(x)=2πσfσg1e(2σf2(xμf)2+2σg2(xμg)2)(1)

现在,我们对其做进一步化简,以期得到 h ( x ) h(x) h(x) 的分布函数。

相乘后的高斯分布

上述公式指数部分为:
β = ( x − μ f ) 2 2 σ f 2 + ( x − μ g ) 2 2 σ g 2 \beta = \frac{(x-\mu_{f})^2}{2\sigma_{f}^{2}} + \frac{(x-\mu_{g})^2}{2\sigma_{g}^{2}} β=2σf2(xμf)2+2σg2(xμg)2
以x的幂项展开这两个二次方程得:
β = ( σ f 2 + σ g 2 ) x 2 − 2 ( μ f σ g 2 + μ g σ f 2 ) + μ f 2 σ g 2 + μ g 2 σ f 2 2 σ f 2 σ g 2 \beta = \frac{(\sigma_{f}^{2} + \sigma_{g}^{2})x^2 - 2(\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^{2})+\mu_{f}^2\sigma_{g}^2+\mu_{g}^2\sigma_{f}^2}{2\sigma_{f}^2\sigma_{g}^2} β=2σf2σg2(σf2+σg2)x22(μfσg2+μgσf2)+μf2σg2+μg2σf2
考虑到标准正态分布方程可以写成:
P ( x ) = 1 2 π σ e − ( x − μ ) 2 2 σ 2 = 1 2 π σ e − ( x 2 − 2 μ x + μ 2 ) 2 σ 2 P(x) = \frac {1} {\sqrt{2\pi }\sigma}e^{\frac{-(x-\mu)^{2}}{2\sigma^{2}}}=\frac {1} {\sqrt{2\pi }\sigma}e^{-\frac{(x^2-2\mu x+\mu^2)}{2\sigma^{2}}} P(x)=2π σ1e2σ2(xμ)2=2π σ1e2σ2(x22μx+μ2)
对比上式,我们将 β \beta β改写成如下形式:
β = x 2 − 2 x μ f σ g 2 + μ g σ f 2 σ f 2 + σ g 2 + ( μ f σ g 2 + μ g σ f 2 σ f 2 + σ g 2 ) 2 2 σ f 2 σ g 2 ( σ f 2 + σ g 2 ) + μ f 2 σ g 2 + μ g 2 σ f 2 σ f 2 + σ g 2 − ( μ f σ g 2 + μ g σ f 2 σ f 2 + σ g 2 ) 2 2 σ f 2 σ g 2 ( σ f 2 + σ g 2 ) \beta=\frac{x^2-2x\frac{\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2}+(\frac{\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2})^2}{\frac{2\sigma_{f}^2\sigma_{g}^2}{(\sigma_{f}^2+\sigma_{g}^2)}}+\frac{\frac{\mu_{f}^2\sigma_{g}^2+\mu_{g}^2\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2}-(\frac{\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2})^2}{\frac{2\sigma_{f}^2\sigma_{g}^2}{(\sigma_{f}^2+\sigma_{g}^2)}} β=(σf2+σg2)2σf2σg2x22xσf2+σg2μfσg2+μgσf2+(σf2+σg2μfσg2+μgσf2)2+(σf2+σg2)2σf2σg2σf2+σg2μf2σg2+μg2σf2(σf2+σg2μfσg2+μgσf2)2
化简得:
β = ( x − μ f σ g 2 + μ g σ f 2 σ f 2 + σ g 2 ) 2 2 σ f 2 σ g 2 σ f 2 + σ g 2 + ( μ f − μ g ) 2 2 ( σ f 2 + σ g 2 ) \beta=\frac{(x-\frac{\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2})^2}{2\frac{\sigma_{f}^2\sigma_{g}^2}{\sigma_{f}^2+\sigma_{g}^2}} +\frac{(\mu_{f}-\mu_{g})^2}{2(\sigma_{f}^2+\sigma_{g}^2)} β=2σf2+σg2σf2σg2(xσf2+σg2μfσg2+μgσf2)2+2(σf2+σg2)(μfμg)2

σ f g = σ f 2 σ g 2 σ f 2 + σ g 2 \sigma_{fg}=\sqrt{\frac{\sigma_{f}^2\sigma_{g}^2}{\sigma_{f}^2+\sigma_{g}^2}} σfg=σf2+σg2σf2σg2
μ f g = μ f σ g 2 + μ g σ f 2 σ f 2 + σ g 2 \mu_{fg}=\frac{\mu_{f}\sigma_{g}^2+\mu_{g}\sigma_{f}^2}{\sigma_{f}^2+\sigma_{g}^2} μfg=σf2+σg2μfσg2+μgσf2
化简得:
β = ( x − μ f g ) 2 2 σ f g + ( μ f − μ g ) 2 2 ( σ f 2 + σ g 2 ) \beta=\frac{(x-\mu_{fg})^2}{2\sigma_{fg}} +\frac{(\mu_{f}-\mu_{g})^2}{2(\sigma_{f}^2+\sigma_{g}^2)} β=2σfg(xμfg)2+2(σf2+σg2)(μfμg)2
代入方程(1)可得:
h ( x ) = f ( x ) g ( x ) = 1 2 π σ f σ g e x p [ − ( x − μ f g ) 2 2 σ f g 2 ] e x p [ − ( μ f − μ g ) 2 2 ( σ f 2 + σ g 2 ) ] h(x) = f(x)g(x)=\frac{1}{2\pi\sigma_{f}\sigma_{g}}exp[-\frac{(x-\mu_{fg})^2}{2\sigma_{fg}^2}]exp[-\frac{(\mu_{f}-\mu_{g})^2}{2(\sigma_{f}^2+\sigma_{g}^2)}] h(x)=f(x)g(x)=2πσfσg1exp[2σfg2(xμfg)2]exp[2(σf2+σg2)(μfμg)2]
= 1 2 π σ f g e x p [ − ( x − μ f g ) 2 2 σ f g 2 ] 1 2 π ( σ f 2 + σ g 2 ) e x p [ − ( μ f − μ g ) 2 2 ( σ f 2 + σ f 2 ) ] =\frac{1}{\sqrt{2\pi}\sigma_{fg}}exp[-\frac{(x-\mu_{fg})^2}{2\sigma_{fg}^2}]\frac{1}{\sqrt{2\pi(\sigma_{f}^2+\sigma_{g}^2)}}exp[-\frac{(\mu_{f}-\mu_{g})^2}{2(\sigma_{f}^2+\sigma_{f}^2)}] =2π σfg1exp[2σfg2(xμfg)2]2π(σf2+σg2) 1exp[2(σf2+σf2)(μfμg)2]
所以 h ( x ) h(x) h(x)也是一个高斯分布函数:
h ( x ) = S f g 2 π σ f g e x p [ − ( x − μ f g ) 2 2 σ f g 2 ] h(x) = \frac{S_{fg}}{\sqrt{2\pi}\sigma_{fg}}exp[-\frac{(x-\mu_{fg})^2}{2\sigma_{fg}^2}] h(x)=2π σfgSfgexp[2σfg2(xμfg)2]
其中 S f g = 1 2 π ( σ f 2 + σ g 2 ) e x p [ − ( μ f − μ g ) 2 2 ( σ f 2 + σ f 2 ) ] S_{fg} = \frac{1}{\sqrt{2\pi(\sigma_{f}^2+\sigma_{g}^2)}}exp[-\frac{(\mu_{f}-\mu_{g})^2}{2(\sigma_{f}^2+\sigma_{f}^2)}] Sfg=2π(σf2+σg2) 1exp[2(σf2+σf2)(μfμg)2]

你可能感兴趣的:(高斯概率密度函数相乘仍然是高斯密度函数)