机器学习算法总结

回归算法

线性回归算法:

支持向量机&向前逐步回归&惩罚线性回归(岭回归/套索回归/ElasticNet/最小角度回归LARS/Glmnet)

非线性回归算法

二元决策树:分割点评价标准是基尼不纯性度量和信息增益
自举集成(Bagging):从训练数据集获得一系列的自举样本,对每一个自举样本训练一个基学习器,将基学习器的均值作为结果。
梯度提升算法:与Bagging和随机森林的不同之处在于它在减少方差的同时,还可以减少偏差。
随机森林算法:Bagging加上随机选择的属性子集

分类算法(二分类算法+多分类算法):

对类别进行编码后可将分类问题转换为普通线性问题
多分类问题可以转化为多个二分类问题

你可能感兴趣的:(机器学习算法总结)