E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
LGB
风控算法赛
lgb
实战-拍拍贷魔镜杯
写在开头,关注公众号:Python风控模型与数据分析、回复风控实战1,即可获取本文数据集及完整代码,以及更多理论知识与代码分享目录1、导包2、数据读取3、统计分析3.1样本分布3.2特征缺失统计3.3数据类型分布3.4数据清洗3.5类别型变量单变量分析3.6特征衍生3.7特征分组3.8IV计算3.9PSI计算4、建模4.1划分oot4.2建模函数4.3贝叶斯调参函数4.4模型训练4.5确定最终模型
Python风控模型与数据分析
·
2022-12-24 10:43
机器学习
风控建模实战
python
机器学习
数据分析
算法
智算之道——2020人工智能应用挑战赛(初赛)疾病预测结构化数据
智算之道(初赛)疾病预测(CatBoost、
lgb
、XGB三个模型投票)一、题目描述二、模型三、完整代码四、调参方面总结一、题目描述通过结构化的数据预测与分析,判断一名病人的是否患有肝炎。
惊蛰Jingz
·
2022-12-24 07:19
pytorch
神经网络
机器学习
深度学习
LightGBM(
lgb
)详解
1.LightGBM简介GBDT(GradientBoostingDecisionTree)是机器学习中一个长盛不衰的模型,其主要思想是利用弱分类器(决策树)迭代训练以得到最优模型,该模型具有训练效果好、不易过拟合等优点。GBDT不仅在工业界应用广泛,通常被用于多分类、点击率预测、搜索排序等任务;在各种数据挖掘竞赛中也是致命武器,据统计Kaggle上的比赛有一半以上的冠军方案都是基于GBDT。而L
越前浩波
·
2022-12-22 22:25
机器/深度学习
决策树
机器学习
阿里云天池大赛赛题(机器学习)——天猫用户重复购买预测(完整代码)
评估估算器性能F1验证ShuffleSplit切分数据模型调参模糊矩阵不同的分类模型LR模型KNN模型tree树模型bagging模型随机森林模型ExTree模型AdaBoost模型GBDT模型VOTE模型投票
lgb
全栈O-Jay
·
2022-12-19 19:12
人工智能
Python
机器学习
阿里云
人工智能
python
经验分享
lightGBM实战
文章目录一、使用LGBMClassifier对iris进行训练1.1使用
lgb
.LGBMClassifier1.1.2使用pickle进行保存模型,然后加载预测1.1.3使用txt和json保存模型并加载
神洛华
·
2022-12-16 00:16
集成学习
数据挖掘
python
python模型lgbm调优工具_机器学习应用之LGBM详解
内置方式建模要把数据读取成Dataset格式
lgb
.train去训练#coding:utf-8importjsonimportlightgbmaslgbimportpandasaspdfromsklearn.metricsimportmean_squared_error
杨怀玉
·
2022-11-29 01:12
lightGBM文件保存
1.使用lightGBM原生的接口保存为txt文件#模型训练gbm=
lgb
.train(params,
lgb
_train,num_boost_round=20,valid_sets=
lgb
_eval,early_stopping_rounds
sa726663676
·
2022-11-26 13:45
机器学习算法
sklearn
人工智能
python
【数学建模】2022数维杯国际赛C题 如何利用脑结构特征和认知行为特征诊断阿尔茨海默病(How to Diagnose Alzheimer‘s Disease)
题如何利用脑结构特征和认知行为特征诊断阿尔茨海默病1前言2问题重述3问题一求解3.1数据预处理3.2模型训练3.2.1逻辑回归3.2.2SVM3.2.3KNN3.2.4决策树3.2.5XGB3.2.6
LGB
3.2.7CB3.3
一川风絮千片雪
·
2022-11-25 23:59
数学建模
python
人工智能
机器学习基础—集成学习Task11(XGB &
LGB
)
导语:本次任务的主题是“XGB&
LGB
算法的原理与实践”。
0cp
·
2022-11-23 11:31
LGBMRegressor拟合函数官方文档
Signature:
lgb
.LGBMRegressor.fit(self,X,y,sample_weight=None,init_score=None,eval_set=None,eval_names=
FULLBUFF
·
2022-11-23 11:59
python
人工智能
一文读懂xgboost,lightgbm分类评价指标与阈值threshold的选取
F-measure),recall,precision,ROC曲线,AUC曲线.其中涉及到混淆矩阵(confusionmatrix),TN,TP,FN,FP.事实上,这适用于所有的分类模型,并不局限于xgb,
lgb
巫巫9
·
2022-11-21 07:00
机器学习
面试
算法
boosting
scikit-learn
coggle1-2月打卡之LightGBM实战
category_feature时任务6:模型微调与参数衰减任务7:特征筛选方法任务8:自定义损失函数任务9:模型部署与加速(可选,不参与积分)任务1:模型训练与预测步骤1:导入LightGBM库步骤2:使用
LGB
Litra LIN
·
2022-11-20 03:19
python
机器学习
sklearn
人工智能
开源低代码AI量化平台,支持自定义因子表达式,直接回测看结果
引入qlib的alpha158因子集,以及把label改成20天收益之后,
lgb
的准确率与召回率都超过了50%,金融数据的低信噪比,这个已经不容易了,
AI量化投资实验室
·
2022-11-19 20:50
建立自己的算法交易事业
人工智能
逻辑回归
python
LightGBM原理介绍
LGB
是一个实现GBDT算法的框架,支持高效率的并行训练,并且具有更快的训练速度、更低的内存消耗、更好的准确率、支持分布式可以快速处理海量数据等优点。
一个打码的小年轻
·
2022-11-19 08:20
算法
python
【特征选择】使用遗传算法进行特征选择
遗传算法寻优cross_val_score(
lgb
,train_X,train_y,scoring='f1',cv=sKfold).mean()#使用全部特征进行训练0.8508040614085857train
我叫陈叉叉叉叉
·
2022-11-16 20:31
机器学习鸭
【模型调参】
lgb
的参数调节
TableofContents1数据导入2模型挑选3模型调参3.1设立初始参数3.2调解n_estimators3.3max_depth/num_leaves3.4min_child_samples/min_child_weight3.5subsample/colsample_bytree(0.6,1)3.6reg_alpha/reg_lamb3.7学习率4测试集生成结果5特征选择importnu
我叫陈叉叉叉叉
·
2022-11-16 20:01
机器学习鸭
每日一篇机器学习公众号D3-字节跳动安全Ai挑战赛-小样本赛道方案总结
mp.weixin.qq.com/s/WDiCX_a8wLcM8j5P3jrLaw2、记录一下具体步骤:(1)数据统计(2)特征工程a、目标编码b、提取特征c、关联特征(图特征)d、行为特征【没看懂】(3)模型构建a、
LGB
甄小胖
·
2022-11-08 09:31
每日一篇机器学习公众号
人工智能
机器学习
安全
lightgbm简单网格搜索
folds=KFold(n_splits=5,shuffle=True,random_state=1333)oof_
lgb
=np.zeros(len(train))predictions_
lgb
=np.zeros
winner8881
·
2022-10-19 14:16
数据挖掘
天池竞赛——工业蒸汽量预测(完整代码详细解析)
数据探索2.1导库2.2获取数据2.3查看数据2.4可视化数据分布3特征工程3.1异常值分析3.2归一化处理3.3特征降维3.5PCA处理4模型训练4.1切分数据4.2多元线性回归4.3随机森林回归4.4
LGB
Joker_咖啡逗
·
2022-10-10 07:44
阿里云天池大赛赛题解析
python
机器学习
【机器学习】阿里云天池竞赛——工业蒸汽量预测(3)
4.1.4K近邻回归模型4.1.5决策树回归模型4.1.6集成学习回归模型4.2模型训练实战4.2.1导入相关库4.2.2切分数据4.2.3多元线性回归4.2.4K近邻回归4.2.5随机森林回归4.2.6
LGB
镰刀韭菜
·
2022-10-10 07:36
机器学习
机器学习
决策树
K近邻
随机森林
LightGBM
百度KDD Cup2022-Top方案总结
右边高点是风机受额定功率限制风机功率与风速的关系,存在一些异常134个风机数据的相关性方案HIK特征NN风速、温度、天气等turbineIDembedding通过图模型concat了邻近node的特征作为自己特征
LGB
YueTann
·
2022-09-09 07:21
机器学习
算法
人工智能
lgb
调参
lgb
参数解释step1确定n_estimators首先创造一个基础模型,各项参数需要选择一个初始值,至于初始值如何确定那就仁者见仁智者见智了。lr可以选择0.1加快训练速度,如果硬件条件允许
傲慢的菜鸟
·
2022-08-10 07:57
模型调参
机器学习
1024程序员节
lgb
使用方法与调参
本文参考了
lgb
中文文档,和
lgb
调参笔记。
傲慢的菜鸟
·
2022-08-10 07:27
models
机器学习
LGB
: 关于调参的一些说明
原文链接?调参核心调参1:提高准确率":num_leaves,max_depth,learning_rate调参2:降低过拟合max_binmin_data_in_leaf调参3:降低过拟合正则化L1,L2调参4:降低过拟合数据抽样列抽样调参方向:处理过拟合(过拟合和准确率往往相反)使用较小的max_bin使用较小的num_leaves使用min_data_in_leaf和min_sum_hess
猫咪钓鱼
·
2022-08-10 07:26
机器学习项目
集成学习
lgb
库调参的粒子群方法
粒子群算法是模拟鸟群蜂群的觅食行为的一种算法。基本思想是通过群体中个体之间的协作和信息共享来寻找最优解。试着想一下一群鸟在寻找食物,在这个区域中只有一只虫子,所有的鸟都不知道食物在哪。但是它们知道自己的当前位置距离食物有多远,同时它们知道离食物最近的鸟的位置。想一下这时候会发生什么?鸟A:哈哈哈原来虫子离我最近!鸟B,C,D:我得赶紧往A那里过去看看!同时各只鸟在位置不停变化时候离食物的距离也不断
weixin_33915554
·
2022-08-10 07:24
人工智能
python
【模型调参】
Lgb
调参方法
_43172660/article/details/83032029贝叶斯调参https://blog.csdn.net/linxid/article/details/81189154这里以回归任务、
lgb
Novelin
·
2022-08-10 07:45
【机器学习模型】
机器学习神器
LGB
机器学习神器:GBDT+lrhttps://blog.csdn.net/a40850273/article/details/88331680?utm_medium=distribute.pc_relevant.none-task-blog-baidujs_title-1&spm=1001.2101.3001.4242
甜辣uu
·
2022-08-10 07:14
python
机器学习
神经网络
自然语言处理
深度学习
机器学习_
LGB
自定义huber loss函数
很多时候为了达到更好的训练效果我们需要改变损失函数,以加速数据的拟合。一、huber函数的近似函数众所周知我们rmse会对异常值的损失关注度特别高,mae对异常会没有那么敏感。将两者进行结合就可以更加关注大部分的样本的损失,减少关注异常值,在一定程度上提升模型的泛化能力。huberloss={12(ytrue−ypred)2if∣ytrue−ypred∣=δhuber_loss=\left\{\b
Scc_hy
·
2022-08-10 07:06
机器学习
机器学习
python
人工智能
机器学习_
LGB
调参汇总(开箱即食)
pipinstallbayesian-optimization一般使用步骤构建一个funcLGB_bayesian:入参为需要调整的参数用参数训练模型输出评估评估指标(越大越好)设定参数的范围bounds_
LGB
Scc_hy
·
2022-08-10 07:00
机器学习
机器学习
python
数据挖掘
人工智能
Python学习之名字,作用域,名字空间
目录变量只是一个名字作用域和名字空间
LGB
规则eval和exec前言:我们在PyFrameObject里面看到了3个独立的名字空间:f_locals、f_globals、f_builtins。
·
2022-05-11 09:29
机器学习:基于LightGBM的分类实践
的分类实践1.LightGBM简介2.LightGBM实践2.1数据处理2.2参数设置2.3验证集评估机器学习:基于LightGBM的分类实践尝试了一下招行的FinTech比赛,然后说是用LightGBM(
lgb
新四石路打卤面
·
2022-05-05 07:04
机器学习
机器学习
分类
决策树
python
sklearn
2020科大讯飞比赛Rank5解决方案
数据集是一种温度预测的数据集人多力量大(@ocean,@fish,@羞涩中略带豪放,@小傻鱼,排名不分先后)我们使用xgb,
lgb
,cat,sgd,svrg,ridge,lstm,prophet,net
Starry memory
·
2022-03-14 07:49
人工智能
机器学习
深度学习
神经网络
lstm
六十五年来,他的祖国向他道歉了三次
而此前,新版50英镑样币发布时,英格兰银行总部大楼还特意升起一面彩虹旗,此举既是表达对这位天才计算机科学家的崇高敬意,也是对他作为一名
LGB
算法与数学之美
·
2022-03-08 13:22
人工智能
brew
android模拟器
tags
base64
2020腾讯广告算法大赛——算法小白的复盘
阅读助手写在前面赛题介绍个人赛况代码开源-score1.2+【00】数据导入TI-ONE【01】按userid聚合(groupby)特征【02】word2vec训练【03】数据特征化【04】
lgb
模型训练
诡途
·
2022-02-22 19:49
算法和机器学习
Python
腾讯
算法
腾讯广告大赛
机器学习
深度学习
单点预测过时了?MAPIE:区间预测算法,实际场景中更合理。
当我们使用当前流行的机器学习库,例如XGB,
LGB
等为数值目标变量构建预测模型时,通常会预测一个点值,而实际中,该值往往是错的。
Python学习与数据挖掘
·
2022-02-19 14:26
python
算法
机器学习
人工智能
python
机器学习、深度学习 面经(未完待更)
(字节)Q.GDBT,XGB,
LGB
之间的区别和联系(字节)DLQ.神经网络为啥不用拟牛顿法而是用梯度下降?(为什么深度学习不用二阶的优化算法?)
大白羊_Aries
·
2022-02-11 07:53
读书笔记
机器学习
深度学习
神经网络
算法
机器学习 — Decision Tree
这个比赛是常规的结构化比赛,主要就是根据业务理解进行特征工程+
LGB
/XGB集成模型调参、融模。但如果想对这些Boosting算法用起来得心应手的话,还是先要把决策树弄明白。
·
2022-01-10 12:56
机器学习数据分析数据挖掘算法
拔一拔山西移动ll分公司那些奇葩事
rxp包二奶2、干部hxp澳门豪赌3、一把手gshx死后每人管,儿女们争家产,吵架4、干部wfz套手机5、食堂虚报招待数量6、财务部员工lxh婚外情7、员工ld殴打领导、阻挠干部大会8、员工lxp殴打经理
lgb
评论员1号
·
2021-06-13 09:44
比赛解决方案
【评价指标】归一化均方根误差的均值【模型】
lgb
+统计规则【特征工程】【特征选择】1.特征重要性排序:根据树模型输出的特征重要性进行筛选,去掉重要性低的特征。
欧文坐公交
·
2021-06-09 15:26
使用hyperopt对Lightgbm调参----自动调参
今天介绍一个调参包----hyperopt,可以对
lgb
进行自动调参,本次先介绍使用hyperopt对lightgbm进行自动调参,下次再更交叉验证~关于Hyperop
虹猫_少侠
·
2021-04-14 20:44
2021-03-15零基础入门数据挖掘-心跳信号分类预测
.赛题理解2.赛题数据3.评分标准二、baseline学习1.导入第三方包:2.读取数据3.数据预处理3.1减少内存占用3.2简单预处理4.训练数据/测试数据准备5.模型训练5.15.2cv模型5.3
lgb
凭轩听雨199407
·
2021-03-15 13:26
学习
lgb
分类回归 网格搜索调参数 + 数据生成csv
山东省第二届数据应用创新创业大赛-临沂分赛场-供水管网压力预测张师兄的网格调参:https://blog.csdn.net/qq_38237214/article/details/114402977主要写一写
lgb
py机器学习深度学习
·
2021-03-05 16:55
python
python
机器学习
人工智能
数据挖掘
数据挖掘算法和实践(二十三):XGBoost集成算法案列(鸢尾花数据集)
本节继续探讨集成学习算法,上一节介绍的是
LGB
的使用和调参,这里使用datasets自带的鸢尾花数据集介绍XGB,关于集成学习算法的介绍可以参考:数据挖掘算法和实践(十八):集成学习算法(Boosting
A叶子叶来
·
2021-01-23 17:46
机器学习/数据挖掘实战
python
机器学习
深度学习
人工智能
算法
2020CCF工作负载预测(
LGB
单模 0.34+)方案
2020-CCF工作负载预测--siguo前言一、训练集重分组二、特征构建总结提升二次提升后处理提升其他想法感悟前言本次参加2020CCF大数据与计算智能大赛,在Serverless工作负载预测赛道侥幸进入决赛,在这里首先感谢我的队友在比赛中的不懈努力,然后和大家分享一下我个人的模型(进入决赛得分为融模结果),本文给出方案A榜线上成绩为0.344,简易改进后得分为0.346和0.348,根据我们队
siguo0
·
2021-01-17 02:41
数据挖掘
2020CCFBDCI训练赛之室内用户运动时序数据分类0.95分方案(tsfresh的使用)
室内用户运动时序数据分类赛题介绍数据简介baseline程序tsfresh对时序数据进行特征提取
lgb
训练和分类模型融合结果按格式写入csv文件提交结果改进方向本文在上一篇室内用户时序数据分类的baseline
做了一点微小的工作
·
2020-12-07 11:40
baseline
2020CCFBDCI训练赛
机器学习
python
人工智能
2020CCFBDCI训练赛之通用音频分类baseline
通用音频分类赛题介绍数据简介import的包音频文件读取特征构造
lgb
多分类提取预测结果并写入csv文件改进方向参考文献博主是音频分类小白,这两天刚入门,写个baseline记录一下,而且由于时间有限,
做了一点微小的工作
·
2020-11-20 16:44
baseline
2020CCFBDCI训练赛
机器学习
数据挖掘
【读书向】阿里云天池大赛赛题解析——参数优化
【读书向】阿里云天池大赛赛题解析——可视化目录【读书向】阿里云天池大赛赛题解析——可视化网格搜索
lgb
调参分类穷举网格搜索随机参数优化LightGBM网格调参Github完整代码链接网格搜索fromsklearn.model_selectionimporttrain_test_splitfromsklearn.model_selectionimportGridSearchCVfromsklearn
阿芒Aris
·
2020-11-11 00:55
读书向
机器学习
python
数据挖掘
论为啥我的lightgbm一直报错
错误2:lightgbm.basic.LightGBMError:Multiclassobjectiveandmetricsdon’tmatch原因:我的代码:gbm=
lgb
.LGBMClassifier
CristinaM
·
2020-09-17 10:29
错误
错误
Lightgbm模型两种保存方式
一、原生形式使用lightgbm(importlightgbmaslgb)#模型训练gbm=
lgb
.train(params,
lgb
_train,num_boost_round=20,valid_sets
yessica_Chen
·
2020-09-16 23:49
Linux
Lightgbm
Leetcode 332 332. 重新安排行程
例如,行程["JFK","LGA"]与["JFK","
LGB
"]相比就更小,排序更靠前所有的机场都用三个大写字母表示
镇长1998
·
2020-09-15 06:56
PAT甲级
&&
天梯
上一页
1
2
3
4
5
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他