累积分布函数(Cumulative Distribution Function)

大家在做数据挖掘时,是不是经常遇到累计分布函数这个概念?除了明白它的曲线和特性之外,实际用处在哪里呢?
可以用在数据标准化上,常见log转换、min-max标准化、z-score标准化、最大值标准化等不,本人在构建深度学习模型的时候(DCN),使用过累积分布,效果显著;思想来源于美团技术团队的分享。
python代码如下:

from sklean import preprocessing
from scipy.stats import norm

standardScaler = preprocessing.StandardScaler().fit(X)
mean_ = standardScaler. mean_
scale_ = standardScaler.scale_
X_trans = norm.cdf(X,mean_,scale_)

上述代码就是利用cdf进行数据标准化的过程,大家可以尝试在模型中使用;

引用一些博主对于累积分布函数的归纳,大家可以参考:
一维数据可视化:累积分布函数(Cumulative Distribution Function):
https://blog.csdn.net/SL_World/article/details/100798060

非参数估计:核密度估计KDE:
https://blog.csdn.net/pipisorry/article/details/53635895

你可能感兴趣的:(深度学习,数据挖掘)