LightGBM 第5页

集成算法终极模型之《神器LightGBM》—最后的高山

ok，直接开始LightGBM算法LightGBM是对XgBoost算法的强化，并且对Xg

小一的学习笔记·2023-04-11 20:21

机器学习之RandomForest、GBDT、XGBoost、lightGBM 原理与区别

目录随机森林--RandomForestGBDT(GradientBoostingDecisionTree)XGBoostlightGBMRF,GBDT,XGBoost,lightGBM都属于集成学习（

文子轩·2023-04-11 18:26

Focal Loss原理及实现

3.1交叉熵损失函数binaryloss3.2FocalLoss的改进4FocalLoss的实现4.1导入库4.2切分数据4.3分训练集和测试集4.4FocalLoss+Lightgbm5写在最后6参考资料

写代码的阿呆·2023-04-11 05:05

【综述】机器学习实战蓝皮书

1分类任务1.1心脏病预测【ML】基于机器学习的心脏病预测研究(附代码和数据集，逻辑回归模型)【ML】基于机器学习的心脏病预测研究(附代码,lightgbm模型)【ML】基于LSTM的心脏病预测研究(附代码和数据集

机器不学习我学习·2023-04-10 15:04

LightGBM用法速查表

内置方式建模1.要把数据读取成Dataset格式2.lgb.train去训练#coding:utf-8importjsonimportlightgbmaslgbimportpandasaspdfromsklearn.metricsimportmean_squared_error

小菜鸡一号·2023-04-10 12:51

sklearn与LightGBM配合使用

LightGBM建模，sklearn评估#coding:utf-8importlightgbmaslgbimportpandasaspdfromsklearn.metricsimportmean_squared_errorfromsklearn.model_selectionimportGridSearchCV

小菜鸡一号·2023-04-10 12:51

六、集成学习五、集成学习（Boosting、三)

四、LightGBMLightGBM也是常用的GBDT工具包，速度快于XGBoost，精度也还可以，其设计理念为：-单个机器在不牺牲速度的情况下，尽可能使用上更多的数据-多机并行时，通信的代价尽可能的低

万物皆可代码·2023-04-10 02:38

A.机器学习入门算法[七]：基于英雄联盟数据集的LightGBM的分类预测

汀、人工智能·2023-04-09 04:10

高级算法梳理之随机森林

本系列将重点续写集成算法，其中包括随机森林(RF)—>GBDT—>XGB—>LightGBM，本文将重点介绍随机森林算法(RF)。

阴天了·2023-04-09 00:00

XGBoost和LightGBM对GBDT的改进

首先需要了解什么是GBDT。简单来讲，GBDT就是将多个相关性很高的基分类器结合起来的模型。模型中每次新增的基分类器都要尽可能的拟合之前所有基分类器没能拟合的残差信息，也就是求解下面这个公式：通过求解这个式子得到，也即是新添加进来的基分类器的参数。是样本的label，是前m个基分类器的预测结果，是当前基分类器的预测结果，要尽可能地弥补与之间的差距。一般而言，GBDT的基分类器是CART，CAR

妖皇裂天·2023-04-07 18:13

Python实现GWO智能灰狼优化算法优化LightGBM回归模型(LGBMRegressor算法)项目实战

说明：这是一个机器学习实战项目（附带数据+代码+文档+视频讲解），如需数据+代码+文档+视频讲解可以直接到文章最后获取。1.项目背景灰狼优化算法(GWO)，由澳大利亚格里菲斯大学学者Mirjalili等人于2014年提出来的一种群智能优化算法。灵感来自于灰狼群体捕食行为。优点：较强的收敛性能，结构简单、需要调节的参数少，容易实现，存在能够自适应调整的收敛因子以及信息反馈机制，能够在局部寻优与全局搜

胖哥真不错·2023-04-07 18:38

Python实现GWO智能灰狼优化算法优化LightGBM分类模型(LGBMClassifier算法)项目实战

说明：这是一个机器学习实战项目（附带数据+代码+文档+视频讲解），如需数据+代码+文档+视频讲解可以直接到文章最后获取。1.项目背景灰狼优化算法(GWO)，由澳大利亚格里菲斯大学学者Mirjalili等人于2014年提出来的一种群智能优化算法。灵感来自于灰狼群体捕食行为。优点：较强的收敛性能，结构简单、需要调节的参数少，容易实现，存在能够自适应调整的收敛因子以及信息反馈机制，能够在局部寻优与全局搜

胖哥真不错·2023-04-07 18:37

Python：使用SHAP库将前N个重要特征提取出来

前言：机器学习很大一个问题是可解释性较差，虽然在RandomForest、LightGBM等算法中，均有feature_importance可以展现模型最重要的N个特征，但是对于单个样本来说情况可能并不与整体模型一致

cyber_1987·2023-04-05 22:16

LightGBM算法详解

ref.AI蜗牛车文章目录前言一、LightGBM介绍二、LightGBM的直方图算法（Histogram）三、LightGBM调参四、总结前言提示：这里可以添加本文要记录的大概内容：例如：随着人工智能的不断发展

wymm95·2023-04-03 02:03

机器学习：LightGBM算法原理（附案例实战）

机器学习：LightGBM算法原理（附案例实战）作者：i阿极作者简介：Python领域新星作者、多项比赛获奖者：博主个人首页如果觉得文章不错或能帮助到你学习，可以点赞收藏评论+关注哦！

i阿极·2023-04-03 01:30

LightGBM（lgb）介绍

1.LightGBM简介GBDT(GradientBoostingDecisionTree)是机器学习中一个长盛不衰的模型，其主要思想是利用弱分类器（决策树）迭代训练以得到最优模型，该模型具有训练效果好

浩波的笔记·2023-04-02 23:27

NLP知识点之bagging、gbdt、xgboost和lightGBM

偏差和方差：偏差.预测值与真实值之间的误差。方差：模型的拟合程度。bagging：Bagging的思路是所有基础模型都一致对待，每个基础模型手里都只有一票。然后使用民主投票的方式得到最终的结果。大部分情况下，经过bagging得到的结果方差（variance）更小。Boosting：Boosting和bagging最本质的差别在于他对基础模型不是一致对待的，而是经过不停的考验和筛选来挑选出「精英」

期待脱离苦海的小叮当·2023-04-02 14:53

决策树连续变量_决策树知道吗，就是XGBoost，LightGBM中用的那种啊？快来看

作者：AnnalynNg编译：ronghuaiyang导读随机森林，梯度提升都是基于决策树的算法，那决策树到底又是什么东西呢？今天给大家先简单的介绍一下，完全是概念上的介绍，没有数学，没有公式，大家先有一个直观上的了解再说吧。你会在灾难中幸存吗？特定的人群，比如妇女和儿童，会首先受到救助，她们会有比较大的机会活下来。知道你是不是属于这样的特权人群，可以帮助你预测你是否能幸存。我们可以使用决策树，来

weixin_39837207·2023-04-02 14:23

（转）RF、GBDT、XGBoost、lightGBM原理与区别

RF、GBDT和XGBoost都属于集成学习（EnsembleLearning），集成学习的目的是通过结合多个基学习器的预测结果来改善单个学习器的泛化能力和鲁棒性。根据个体学习器的生成方式，目前的集成学习方法大致分为两大类：即个体学习器之间存在强依赖关系、必须串行生成的序列化方法，以及个体学习器间不存在强依赖关系、可同时生成的并行化方法；前者的代表就是Boosting，后者的代表是Bagging和

花花花哇_·2023-04-02 13:13

【机器学习】深度剖析 LightGBM vs XGBOOST 哪个更胜一筹

今天就LightGBM和XGBOOST放在一起对比学习下，以便加深印象。写在前面作为一个机器学习研习者，大概会了解BoostingMachines及其功能。

风度78·2023-04-02 13:47

LightGBM、XGBoost参数调优，调参经验，参数介绍

对比参考参考自：LightGBM参数介绍_一路前行1的博客-CSDN博客_lightgbm参数调参思路LightGBM调参方法（具体操作）-Byron_NG-博客园lightgbm介绍深入理解LightGBM

只要开始永远不晚·2023-04-02 13:47

【机器学习基础】XGBoost、LightGBM与CatBoost算法对比与调参

机器学习Author：louwillMachineLearningLab虽然现在深度学习大行其道，但以XGBoost、LightGBM和CatBoost为代表的Boosting算法仍有其广阔的用武之地。

风度78·2023-04-02 13:46

XGBoost和LightGBM时间序列预测对比

XGBoost和LightGBM都是目前非常流行的基于决策树的机器学习模型，它们都有着高效的性能表现，但是在某些情况下，它们也有着不同的特点。

deephub·2023-04-02 13:01

【ML】基于机器学习的心脏病预测研究(附代码和数据集，决策树模型)

之前创作过心脏病预测研究文章如下：【ML】基于机器学习的心脏病预测研究(附代码和数据集，逻辑回归模型)【ML】基于机器学习的心脏病预测研究(附代码,lightgbm模型)【ML】基于LSTM的心脏病预测研究

机器不学习我学习·2023-04-01 17:05

python 梯度提升树_梯度提升入门介绍(GBM)

1个LightGBM(GBM的变体)和5个神经网络。虽然他的成功归因于他将半监督学习用于结构化数据，但梯度提升模型也起到了重要作用。尽管G

weixin_39616287·2023-03-29 19:46

梯度提升算法决策过程的逐步可视化

这也是XGBoost和LightGBM模型的理论基础，所以在这篇文章中，我们将从头开始构建一个梯度增强模型并将其可视化。

deephub·2023-03-29 18:11

LightGBM模型java部署

近期使用了LightGBM进行了训练模型（计算违约概率），结果发现其余XGBoost模型训练得到的结果存在较高相关性。

DT0203·2023-03-28 20:38

树+神经网络算法强强联手（Python）

集成树模型中的LightGBM是增强版的GBDT，支持了分类变量，在工程层面大大提高了训练效率。

算法进阶·2023-03-24 03:58

四大常用集成算法（Xgboost，CatBoost，Lightbm，DeepForest）

qq_50173095·2023-03-23 07:43

xgboost做二分类，多分类以及回归任务

【lightgbm/xgboost/nn代码整理二】xgboost做二分类，多分类以及回归任务1.简介该部分是代码整理的第二部分，为了方便一些初学者调试代码，作者已将该部分代码打包成一个工程文件，包含简单的数据处理

文一休·2023-03-20 23:21

python安装新模块出错

现象：在使用anacondaprompt安装lightgbm，用的pipinstalllightgbm，出现错误ModuleNotFoundError:Nomodulenamed'pip'；当时没多想，

小瑶要努力变强·2023-03-20 10:38

基于树模型的集成算法---LightGBM

一、模型介绍上一篇文章介绍了一个梯度提升决策树模型XGBoost，这篇文章我们继续学习一下GBDT模型的另一个进化版本：LightGBM。

自由调优师_大废废·2023-03-20 08:04

机器学习之LightGBM算法案例

#!/usr/bin/python3#-*-coding:utf-8-*-"""@Time:2021/6/157:52@Author:Loden@FileName:customer_default_demo.py@Software:PyCharm@desc:"""importpandasaspdfromsklearn.model_selectionimporttrain_test_splitfro

米陽·2023-03-19 05:52

【机器学习基础】数学推导+纯Python实现机器学习算法25：CatBoost

CatBoost与XGBoost、LightGBM并称为GBDT框架下三大主流模型。

风度78·2023-03-18 21:08

AutoML之flaml：基于flaml框架对比lightgbm和xgboost模型进行自动化参数调优实现体内脂肪含量值回归预测案例之详细攻略

AutoML之flaml：基于flaml框架对比lightgbm和xgboost模型进行自动化参数调优实现体内脂肪含量值回归预测案例之详细攻略目录基于flaml框架对比lightgbm和xgboost模型进行自动化参数调优实现体内脂肪含量值回归预测案例

一个处女座的程序猿·2023-03-18 07:28

模型融合方法

对于个体学习器来说，它们的不同体现在：不同训练数据：数据集使用比例、预处理方法(缺失值填补、特征工程等)；不同模型结构：RF、XGBoost、LightGBM、CatBoost、CNN、LSTM等；不同超参

下辈子是只考拉·2023-03-11 07:47

Mac安装Lightgbm-Anaconda

gccwithOpenMPsupportmustbeinstalledfirst.RefertoInstallationGuideforinstallinggccwithOpenMPsupport.操作步骤0、卸载pipuninstalllightgbm

透明的红萝卜123·2023-03-11 05:17

Boosting三巨头：XGBoost、LightGBM和CatBoost（发展、原理、区别和联系，附代码和案例）

（封面图由ERNIE-ViLGAI作画大模型生成）Boosting三巨头：XGBoost、LightGBM和CatBoost（发展、原理、区别和联系，附代码和案例）机器学习中，提高模型精度是研究的重点之一

Chaos_Wang_·2023-03-09 12:36

CCF大数据与计算智能大赛中个贷违约预测比赛的特征处理

大数据与计算智能大赛首先先读取数据importmatplotlib.pyplotaspltimportseabornassnsimportgcimportreimportpandasaspdimportlightgbmaslgbimportnumpyasnpfromsklearn.metricsimportroc_auc_score

Thefan1·2023-03-01 07:44

ML之R：通过数据预处理(缺失值/异常值/特殊值的处理/长尾转正态分布/目标log变换/柱形图-箱形图-小提琴图可视化/构造特征/特征筛选)利用算法实现二手汽车产品交易价格回归预测之详细攻略

特殊值的处理/长尾转正态分布/目标log变换/柱形图-箱形图-小提琴图可视化/构造特征/特征筛选)利用算法实现二手汽车产品交易价格回归预测之详细攻略目录二手汽车产品交易价格预测赛题背景字段说明通过数据预处理利用LightGBM

一个处女座的程序猿·2023-02-28 07:31

机器学习-集成学习LightGBM

前言LightGBM是微软开发的一个强大的开源梯度提升框架。它旨在高效和可扩展，能够处理大型数据集和高维特征。

·2023-02-21 10:49

【ML】基于机器学习的心脏病预测研究(附代码和数据集，多层感知机模型)

之前创作过心脏病预测研究文章如下：【ML】基于机器学习的心脏病预测研究(附代码和数据集，逻辑回归模型)【ML】基于机器学习的心脏病预测研究(附代码,lightgbm模型)【ML】基于LSTM的心脏病预测研究

机器不学习我学习·2023-02-16 20:05

sklearn常用分类算法分析乳腺癌数据

—知乎GBDT、XGBoost、LightGBM-的使用及参

-朝汐-·2023-02-07 11:31

Python机器学习：plot_importance()查看特征重要度

事先准备好模型：importlightgbmaslgbmodel_lgb=lgb.LGBMClassifier().fit(X_train,y_train)以上模型训练好了，下面查看特征重要度：fromlight

紫昂张·2023-02-07 11:00

2018-06-03 PYTHON code

#python2.7##importmatplotlib.pyplotaspltimportpandasaspdimportnumpyasnp#importdatetime#importlightgbmaslgb

jfdlagbja·2023-02-07 03:42

已写博客目录

BP神经网络和SVM实现时间序列预测（2019-03-23）配电网潮流计算（2019-03-23）用CNN做电能质量扰动分类(2019-03-28)LightGBM实现时间序列预测(2019-04-02

南海金雕·2023-02-04 18:08

【ML】GBDT、Xgboost和LightGBM的模型理解

【方差】和【偏差】的理解3.boosting和bagging的方法目标4.决策树作为常用分类器的原因5.RF6.Adaboost7.GBDT8.XGBoost9.LightGBM一、问题背景在机器学习的集成学习中

郝同学·2023-02-03 09:15

ML LightGBM详细原理讲解+面试必考知识点

三大竞赛杀器：XGBoost、LightGBM、CatBoost。之前我已更新完XGBoost的讲解，这次来讲讲LightGBM。

#苦行僧·2023-02-03 09:38

ValueError: Invalid decision type in tree model.

使用LightGBM模型可视化时报错ValueError:Invaliddecisiontypeintreemodel.lgb.create_tree_digraph()lgb.plot_tree()错误定位到

菜菜鑫·2023-02-02 14:20

Coggle 30 Days of ML 7月竞赛学习

Part1内容介绍在给大家分享知识的过程中，发现很多同学在学习竞赛都存在较多的问题：Pandas、Numpy处理数据不熟悉Sklearn、LightGBM模型使用不熟悉不知道如何构建特征工程、筛选特征NLP

Datawhale·2023-02-02 12:14

推荐频道

LightGBM