机器学习知识点梳理3--集成学习/Adaboost/随机森林/GBDT/xgBoost/LightGBM
1.LightGBM和xgBoost、GBDT的区别xgboost与LightGBM的区别切分算法(切分点的选取):XGBoost通过对所有特征都按照特征的数值进行预排序选取最好的分割点;LightGBM通过直方图算法寻找最优的分割点LightGBM占用的内存更低,只保存特征离散化后的值,而这个值一般用8位整型存储就足够了,内存消耗可以降低为原来的1/8LightGBM直接支持类别特征决策树生长策