特征工程

基于关联规则(Apriori)+协同过滤(collaborative filtering)实现电影推荐系统

协同过滤算法的电影推荐系统一、前言1.数据集介绍2.方法概述3.运行环境二、数据准备与预处理1.数据熟悉2.数据读取3.数据预处理3.1无用属性删除3.2缺失属性处理3.3数据去重3.4类型转换3.5数据合并三、特征工程四
smile_小北·2023-09-20 11:29

机器学习：特征工程基本流程

一、背景概述特征工程是使用专业背景知识和技巧处理数据，使得特征能在机器学习算法上发挥更好的作用的过程，指的是把原始数据转变为模型的训练数据的过程，它的目的是使模型的性能得到提升。
向着光噜噜·2023-09-20 06:24

【机器学习】特征预处理

由此可见，特征工程在机器学习中占有相当重要的地位。在实际应用当中，可以说特征工程是机器学习成功的关键。那特征工程是什么？
人工智·2023-09-20 03:01

特征工程建模可解释包（note）

PermutationImportance一般情况下，使用集成算法去看特征重要性比较好。关注某一个特征，计算其permutationimportance:训练好当前模型考虑特征A对模型结果的影响。将特征A打乱顺序，比较模型结果，误差是否变得更大。如果误差改变不大，说明该特征不重要，如果误差改变大，则重要。工具包eli5https://eli5.readthedocs.io/en/latest/tu
闪闪发亮的小星星·2023-09-19 18:30

人工智能发展岗位

以下是一些常见的人工智能岗位，这些岗位通常要求不同的技能和经验：机器学习工程师：负责开发和部署机器学习模型，包括数据预处理、特征工程和模型训练。使用深度学习和传统机器学习算法来解决问题。
就叫飞六吧·2023-09-19 16:55

《雷达像智能识别对抗研究进展》阅读记录

（2）雷达像智能识别传统的雷达像识别方法通常利用特征工程构建模板库，并采用合适的分类器进行识别。其效果特别依赖于人工设计特征的质量。
黑川赤音·2023-09-19 11:34

特征工程-指标筛选

在数据建模前期，很重要的一步是特征工程的构建，最明显的一次就是多分类问题，单增加一个特征，准确率从78%提高到了85%。
神采奕奕的奕·2023-09-19 10:45

MATLAB官方机器学习入门教程

.做出预测算法选项评估模型1.预测值与真值进行比较2.计算精确度与误分类度混淆矩阵导入和预处理数据多文本操作1.创建数据存储2.读取数据添加数据转换1.执行数据预处理2.转换后的数据存储3.规范化数据特征工程统计特性形状量化官方教程
aoaoGofei·2023-09-19 09:29

Pre-trained models for natural language processing: A survey(NLP领域预训练模型研究综述)

一、前言首先列出了常用的神经网络模型：CNN、RNN、GNN以及注意力机制，它们的优点是能够缓解特征工程
敷衍zgf·2023-09-18 12:28

物联网：用python调入机器学习分析物联网数据入侵检测模块

对输入数据进行特征工程。这涉及将原始数据转换为可以在机器学习算法中使用的格式。对于物联网数据，可能需要进行数据清理、处
Solitary_孤影照惊鸿·2023-09-18 00:17

李沐机器学习入门

文章目录1.数据的获取2.数据的爬取3.数据的标注3.1半监督学习3.1.1自学习算法3.1.2人工标注数据3.1.3弱监督学习4.数据的预处理5.数据的清理6.数据的变换7.特征工程8.机器学习介绍8.1
几窗花鸢·2023-09-17 23:30

时序预测的深度学习算法全面盘点

常用的深度学习模型包括循环神经网络（RNN）、长短时记忆网络（LSTM）、门控循环单元（GRU）、卷积神经网络（CNN）、注意力机制（Attention）和混合模型（Mix）等，与机器学习需要经过复杂的特征工程相比
Python数据挖掘·2023-09-16 13:58

EDA(Exploratory Data Analysis)探索性数据分析

EDA(ExploratoryDataAnalysis)中文名称为探索性数据分析，是为了在特征工程或模型开发之前对数据有个基本的了解。
隔壁偷菜的谁·2023-09-16 06:48

机器学习——入门

逻辑回归目标值是连续型的数据->回归问题线性回归、岭回归无监督学习：没有目标值->无监督学习聚类k-means机器学习开发流程1）获取数据2）数据处理（处理掉嘈杂、缺失、不符合要求的一些数据）3）特征工程
王王仙贝~·2023-09-16 04:02

人工智能安全-5-网络入侵检测

0提纲概述数据集数据预处理特征工程天池AI上的实践棘手问题1概述入侵检测是网络安全中的经典问题，入侵是指攻击者违反系统安全策略，试图破坏计算资源的完整性、机密性或可用性的任何行为。
HenrySmale·2023-09-16 04:01

天池_二手车价格预测_Task3_特征工程

0️⃣前言0️⃣.1️⃣赛题重述0️⃣.2️⃣数据集概述1️⃣异常缺失值删除1️⃣.1️⃣导入库与数据1️⃣.2️⃣异常值删除2️⃣树模型的特征构造2️⃣.1️⃣时间特征构造2️⃣.2️⃣城市信息特征提取2️⃣.3️⃣品牌特征提取3️⃣树模型的数据分桶4️⃣LR与NN模型的特征构造4️⃣.1️⃣与归一化4️⃣.2️⃣编码5️⃣特征选择5️⃣.1️⃣过滤式(filter)5️⃣.2️⃣包裹式(wra
柯摩Excalibur·2023-09-16 03:10

笔记（五）-传统图机器学习的特征工程-全图

1、引言-提取出的特征要能够反应全图结构特点2、全图信息种类Bag-of-NodesBag-of-Nodesdegrees-就是找同分异构体-和节点特征的子图不同的是可以存在孤立结点计算全图的子图个数，而不是特定邻域的子图个数Graphletkernel-两个图作数量积，得到一个标量，可以反应两个图是否相近-如果两个图比较相近，作均一化操作-子图匹配是一个需要较大消耗ColorRefinement
hlllllllhhhhh·2023-09-14 21:30

笔记（三）传统图机器学习的特征工程-节点

1、不同种类的任务2、传统图机器学习的几个层面（人工特征工程+机器学习）3、属性特征-节点本身的特征4、连接特征-节点的结构信息5、训练-预测6、好模型需要好数据-人工构造的特征（特征工程）-节点、连接
hlllllllhhhhh·2023-09-14 21:00

笔记（四）传统图机器学习的特征工程-连接

1、引言工作：通过已知连接，补全未知连接思想：直接提取link特征，把link变成D维向量把link两端节点的D维向量拼接在一起（不好，丢失了link本身的连接结构信息）2、连接分类客观静态图：蛋白质分子动态生成图：论文生成、社交网络（从上个时间（点或段）预测下个时间，并与真实的下个时间作比较）3、连接的特征分类两点之间-最短路径长度-容易忽略节点的重要度局部区域-邻居节点的共同邻居（邻域信息）-
hlllllllhhhhh·2023-09-14 21:26

task3 数据的特征工程

针对本次任务中遇到的问题，进行一些资料的补充。针对xgb等模型的理解lightgbm,xgboost,gbdt的区别与联系LR和树模型基础概念决策树、逻辑回归、线性回归使用时注意事项以及模型过拟合策略个人的理解是，这些模型大致分为两类，一类是线性模型（逻辑回归也算广义的线性），一类是树模型。这两类都可以处理回归问题，但是由于线性模型对数据更加敏感，而树模型具有更强的鲁棒性，所以比赛中常见的都是树模
欧飞红·2023-09-14 01:45

融360蒋宏：自动化特征工程和自动建模在风控场景的应用

file01背景和问题目前，模型开发的流程越来越规范化，通常可以分为业务分析、样本准备、特征工程、模型构建、模型评估及监控这几个步骤。
DataFunTalk·2023-09-13 19:20

【Python入门系列】第十一篇：Python机器学习入门

Python机器学习库1.scikit-learn（sklearn）2.TensorFlow3.Keras4.PyTorch5.NumPy6.Pandas三、Python机器学习整个过程的实现1.数据准备2.特征工程
JosieBook·2023-09-13 13:48

特征预处理,K-紧邻API

特征工程，特征预处理就是通过一些转换函数将特征数据转换成更加适合算法模型的特征数据过程特征的单位或者大小相差较大，或者某特征的方差比其他特征要打出几个数量级，容易影响（支配的结果），使得一些算法无法学习到其他的特征特征预处理
枭玉龙·2023-09-12 20:06

Python中的常见问题与解决方案

1.数据预处理和特征工程问题1：数据缺失和异常值处理。解决方案：可以使用Pandas等库的函数来处理缺失值，例如`fillna()`填充缺失值或`drop
华科℡云·2023-09-12 11:05

如何使用知识图谱增强信息检索模型？

该方法有两个较为明显的缺陷：1）只能通过TF-IDF等相关信号判断查询-文本相关性；2）模型没有深入理解查询和文本的语义信息，而是更多地依赖于特征工程的方法。
PaperWeekly·2023-09-11 20:45

自然语言处理重点 第11章 机器阅读理解 复习

的区别:本章内容：MRC任务分类：完形填空形式（cloze-style）选项形式片段抽取形式（spanextraction）文本生成形式（free-answer/generation）阅读理解实现方法传统特征工程深层语义图匹配深度神经网络神经网络机器阅读理解基本框架嵌入编码
SiYuanFeng·2023-09-09 11:55

一个完整机器学习项目流程总结（转）

获取数据获取数据包括获取原始数据以及从原始数据中经过特征工程从原始数据中提取训练、测试数据。机器学习比赛中原始数据都是直接提供的，但是实际问题需要自己获得原始数据。
meetliuxin·2023-09-09 00:32

深度学习推荐系统(八)AFM模型及其在Criteo数据集上的应用

深度学习推荐系统(八)AFM模型及其在Criteo数据集上的应用1AFM模型原理及其实现沿着特征工程自动化的思路，深度学习模型从PNN⼀路⾛来，经过了Wide＆Deep、Deep＆Cross、FNN、DeepFM
undo_try·2023-09-08 21:46

特征工程

scikit-learn库介绍一.特征抽取的API都在sklearn.feature_extraction中1.字典数据的特征抽取fromsklearn.feature_extractionimportDictVectorizer实例化dt=DictVectorizer(sparse=False)调用方法dt.fit_transform()输入字典数据或字典的迭代器并转化用的是one-hot编码转
Little_Raccoon·2023-09-08 16:47

机器学习处理问题的基本路线

基本路线：1.搭建环境/数据读入2.数据分析3.特征工程4.建模调参5.模型融合异常处理：通过箱线图（或3-Sigma）分析删除异常值；BOX-COX转换（处理有偏分布）；长尾截断；特征筛选常用方法：过滤式
魔法橘子·2023-09-08 09:29

分类模型评估指标

机器学习解决问题的通用流程：问题建模----特征工程----模型选择----模型融合其中问题建模主要包括：设定评估指标，选择样本，交叉验证。
一只胖猪猪·2023-09-07 19:30

数据分析与机器学习介绍

数据分析与机器学习课程概述数据分析数据采集数据清洗数据规约数据预处理可视化数据分析报告特征工程机器学习回归分类聚类深度学习神经网络(CNN)数学基础高等数学概率线性代数今天的课程内容jupyter的具体使用
郑某人_03a6·2023-09-07 13:02

【NLP保姆级教程】手把手带你RCNN文本分类(附代码)

传统的文本分类工作主要分为三个过程：特征工程、特征选择和不同分类机器学习算法。1.1特征工程对于文本数据的特征工程来说，最广泛使用的功能是bag-of-words、tf-idf等。
kaiyuan_nlp·2023-09-07 08:11

机器学习的特征工程

字典特征提取defdict_demo():"""字典特征提取:return:"""data=[{'city':'北京','temperature':100},{'city':'上海','temperature':60},{'city':'深圳','temperature':30}]#data=[{'city':['北京','上海','深圳']},{'temperature':["100","60"
coder_Alger·2023-09-07 06:46

003传统图机器学习、图特征工程

文章目录一.人工特征工程、连接特征二.在节点层面对连接特征进行特征提取三.在连接层面对连接特征进行特征提取四.在全图层面对连接特征进行特征提取一.人工特征工程、连接特征节点、连接、子图、全图都有各自的属性特征
小白的努力探索·2023-09-06 17:52

机器学习_特征工程_特征数据的评价标准

本文主要从单特征分析，多特征筛选，特征监控，外部特征评估的几个方面对特征数据进行阐述。来源：特征筛选_特征覆盖度怎么算_adamyoungjack的博客-CSDN博客1.单特征分析1.1简介好特征可以从几个角度衡量：覆盖度，区分度，相关性，稳定性1.2覆盖度1.应用场景采集类，授权类，第三方数据在使用前都会分析覆盖度2.分类采集类：如APPlist（Android手机90%）授权类：如爬虫数据（2
高达一号·2023-09-06 16:48

机器学习(吴恩达第一课)

Unsupervisedlearning)4、线性回归模型5、代价函数6、梯度下降(Gradientdescent)1、学习率2、用于线性回归的梯度下降第二周(多维特征)1、特征缩放2、如何设置学习率3、特征工程
Think-killer·2023-09-05 15:04

python文本可视化数据分析软件_数据探索很麻烦？推荐一款史上最强大的特征分析可视化工具：yellowbrick...

作者：xiaoyu微信公众号：Python数据科学前言玩过建模的朋友都知道，在建立模型之前有很长的一段特征工程工作要做，而在特征工程的过程中，探索性数据分析又是必不可少的一部分，因为如果我们要对各个特征进行细致的分析
liujuan63795·2023-09-05 12:25

数据探索很麻烦？推荐一款强大的特征分析可视化工具：yellowbrick

前言玩过建模的朋友都知道，在建立模型之前有很长的一段特征工程工作要做，而在特征工程的过程中，探索性数据分析又是必不可少的一部分，因为如果我们要对各个特征进行细致的分析，那么必然会进行一些可视化以辅助我们来做选择和判断
Datawhale·2023-09-05 12:23

模型训练：优化人工智能和机器学习，完善DevOps工具的使用

尽管人们认为在人工智能（AI）和机器学习（ML）方面，包括特征工程和参数调整，仍然涉及大量的手动工作。但自动化在这些领域至关重要，而MLOps即机器学习运营已被证明对于各类企业来说都
CSDN云计算·2023-09-05 10:34

机器学习实战--住房月租金预测（2）

本文会讲解对特征工程的处理。话不多说，我们开始吧！特征工程image“数据决定了机器学习的上限，而算法只是尽可能逼近这个上限”，这里的数据指的就是经过特征工程得到的数据。
不羁的程序员小王·2023-09-05 06:28

机器学习概述、特征工程、Scikit-learn

先来拜见一下祖师爷（祖师爷真帅）“人工智能之父”艾伦.图灵图灵测试（1950）马文·李·闵斯基（英语：MarvinLeeMinsky，1927年8月9日－2016年1月24日），科学家，专长于认知科学与人工智能领域，麻省理工学院人工智能实验室的创始人之一，著有几部人工智能和哲学方面的作品。1969年，因为在人工智能领域的贡献，获得图灵奖。图片艺术化GAN神经网络这就说明了Python天下第一开个玩
Macsen Chu·2023-09-05 01:21

Scikit-learn：全面概述

在本文中，我们将探索Scikit-learn的主要特点，重点介绍其简单的API、全面的算法支持、特征工程能力、模型评估和选择工具，以及其可扩展性和与其他Pyth
一只会写程序的猫·2023-09-05 00:18

Sklearn数据预处理与特征工程

目录1、数据与处理与特征工程概述2、Sklearn数据预处理之Preprocessing&Impute3、Sklearn特征选择feature_selection4、总结1、概述：数据预处理与特征工程是数据建模前流程
易码当先·2023-09-04 21:36

MATLAB算法实战应用案例精讲-【数模应用】特征工程（最终篇）

目录前言算法原理数据预处理Preprocessing&Impute数据无量纲化归一化标准化缺失值处理分类型特征：编码与哑变量处理连续型特征：二值化与分段
林聪木·2023-09-04 18:18

2018年1月22日

之后就应该考虑调参、加特征和特征工程的事了？倒是分了很多心干杂事，比如打印年收入证明文件、商量何时请假什么的。得知年假要向BOS
真昼之月·2023-09-02 21:04

详解EMBER数据集中对PE文件提取ByteEntropyHistogram特征

1.引入在我们对PE文件提取特征时，经常会在PE特征工程的项目中，看到如下这段代码classByteEntropyHistogram(FeatureType):'''2dbyte/entropyhistogrambasedlooselyon
ybdesire·2023-09-02 15:26

一些DAG流程框架

所以说，为了降低门槛，一直想做个工具，实现从数据准备、特征工程、模型训练、到评
AAA小肥杨·2023-09-02 10:27

yolov3

yolov1传统的算法最主要的是先猜很多候选框，然后使用特征工程来提取特征（特征向量）,最后使用传统的机器学习工具进行训练。然而复杂的过程可能会导致引入大量的噪声，丢失很多信息。
一壶浊酒..·2023-09-01 03:47

【数据分析】【数据清理】快速入门+案例+代码+GIF实操

在数据挖掘的工作中，我们很大一部分的时间都会花在数据处理和特征工程上面，真正的可视化和建模反而时间占比不大。这是因为，建模要求我们传入的数据是机器可识别的数据，并且数据不包括异常、缺失值。
卯月七·2023-08-30 07:02
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他