数据挖掘数据预处理

第一章 大数据概述

Volume,Value,Veracity3.大数据结构类型结构化数据、半结构化数据、非结构化数据4.数据、信息、知识与智能的关系大数据发展史1.数据管理发展历程数据管理->关系数据库->数据仓库->数据挖掘
etheon·2023-11-03 18:25

如何进行数据预处理及分析

数据的预处理进行简单的数据分析的思路、以及数据可视化的方式（什么的数据可以用什么的方式进行可视化）
小毛99·2023-11-03 18:19

大数据和智能数据应用架构系列教程之：大数据挖掘与机器学习

作者：禅与计算机程序设计艺术1.背景介绍随着互联网、移动互联网和物联网等新一代信息技术的飞速发展，以及人工智能、大数据分析、云计算、云存储、人工智能（AI）模型等的迅猛发展，使得数据的获取、存储、处理、分析等环节变得越来越复杂、越来越高效。如今，越来越多的企业和个人都开始把注意力转移到数据采集、处理、分析、挖掘等领域。这是一个“数据驱动时代”，数据科学正在成为一个全新的核心技术。同时，也出现了数据
禅与计算机程序设计艺术·2023-11-03 17:29

盘点一个Python自动化办公的问题——批量实现文件重命名（方法一）

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤蜀道之难，难于上青天，使人听此凋朱颜！大家好，我是皮皮。
Python进阶者·2023-11-03 16:38

盘点一个Python自动化办公的问题——批量实现文件重命名（方法二）

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤连峰去天不盈尺，枯松倒挂倚绝壁。大家好，我是皮皮。
Python进阶者·2023-11-03 16:38

数据预处理（Data Preprocessing）

DataPreprocessing前言Whypreprocess?MajorTasksinDataPreprocessingDataCleaningIncomplete(Missing)DataWhattoConsiderWhenHandlingMissingData?MCARMARMNARHowtoHandleMissingData-ImputationMoreonImputationEvenM
nine_mink·2023-11-03 14:42

数据抽取+dataworks的使用+ADB的应用

一，大数据处理之数据抽取1，什么是数据抽取在大数据领域中，数据抽取是指从原始数据源中提取所需的数据子集或特定数据项的过程，数据抽取是数据预处理的重要步骤，它为后续的数据分析和建模提供了基础。
无形风·2023-11-03 12:43

经典数据挖掘算法（介绍了包括18大数据挖掘在内的多种经典数据挖掘算法）

前言文章标题的两个概念也许对于许多同学们来说都相对比较陌生，都比较偏向于于理论方面的知识，但是这个算法非常的强大，在很多方面都会存在他的影子。2个概念，1个维特比算法，1个隐马尔可夫模型。你很难想象，输入法的设计也会用到其中的一些知识。HMM-隐马尔可夫模型隐马尔可夫模型如果真的要展开来讲，那短短的一篇文章当然无法阐述的清，所以我会以最简单的方式解释。隐马尔可夫模型简称HMM，根据百度百科中的描述
IU菜籽U·2023-11-03 11:22

数据的平滑处理函数——log1p和exmp1

82422865https://docs.scipy.org/doc/numpy-1.13.0/reference/generated/numpy.log1p.html数据平滑处理--log1p()和exmp1()1.数据预处理时首先可以对偏度比较大的数据用
MXuDong·2023-11-03 11:39

Python租房价格分析及预测（xgb+catboost+rf）

目录一、数据介绍二、统计分析三、数据预处理四、回归模型五、划重点早年爬取过我爱我家上北京的部分租房信息，现在重新拿来分析和建模，以往文章大多偏二分类、这次来个数据分析+回归模型的文章。
Python风控模型与数据分析·2023-11-03 11:03

DataCastle企业风险算法赛实战（进阶难度）

目录一、数据读取及分析1、数据读取2、数据分析二、数据挖掘三、模型构建及评估四、划重点推荐相关文章去年在DataCastle上参加了华录杯算法赛，初赛前10、进复赛就没打了。
Python风控模型与数据分析·2023-11-03 11:54

人类迷惑行为大赏——团结、紧张、严肃、活泼

看到从事数据挖掘研究的勃勃老师眼中闪过一丝真诚的“艳羡”，简老师喜不自禁。进而想起伟大导师毛主席当年为抗日军政大学题写的校训——“团结
简单JustinJian·2023-11-03 10:34

使用线性回归模型预测波士顿房价

通过数据预处理、训练模型、模型评估和结果可视化等步骤来完成。加载数据集首先，需要从sklearn中加载波士顿房价数据集。
wo太南了·2023-11-03 09:32

多元线性回归的python代码实现（基于sklearn的波士顿房价boston数据集为例）

本文代码实现步骤如下：1.获取数据集2.数据集切分，老规矩，80%训练，20%测试3.数据预处理（本用例尝试过归一化处理，但发现效果不好，不是每一个算法和模型都适用于归一化处理）4.建模并训练5.使用并评估具体代码如下
南山十一少·2023-11-03 09:59

大神都在用这5款数据挖掘工作 还不速来pick一下！

为了更好的帮助大家提高工作效率，巨牛汇外包小助手为大家推荐几款免费且好用的数据挖掘工具。下面不妨跟着巨牛汇外包小助手一起来看看吧！1.WekaWEKA是一个非常复杂的数据挖掘工具。
最牛爱码士·2023-11-03 09:57

2.预备知识-3GPT版

#pic_centerR1R_1R1R2R^2R2目录知识框架No.1数据操作数据预处理一、N维数组样例二、创建数组三、访问元素四、数据操作D2L注意点五、数据预处理D2L注意点六、QANo.2线性代数一
霸时斌子·2023-11-03 06:52

NGS基础 - GTF/GFF文件格式解读和转换

RNA-seq你想知道的全在这）、ChIP-seq分析（ChIP-seq基本分析流程）、单细胞测序分析(重磅综述：三万字长文读懂单细胞RNA测序分析的最佳实践教程)、DNA甲基化分析、重测序分析、GEO数据挖掘
生信宝典·2023-11-03 04:45

数据挖掘——时间序列算法之ARCH模型

数据挖掘——时间序列算法之ARCH模型先占个坑1、平滑法2、趋势拟合法3、组合模型4、AR模型5、MA模型6、ARMA模型7、ARIMA模型8、ARCH模型9、GARCH模型及其衍生模型
macan_dct·2023-11-03 02:44

房地产行业中介公司互联网精准获客新渠道，两个月内成交获利百万

更新大数据精准获客系统结合客户产品属性定位的目标客户特征，通过更新大数据建模（搜索关键词+浏览网页+拨打竞品电话+区域+年龄性别+N多维度），利用运营商DMP平台进行数据挖掘，经过脱敏处理，最终通过相关
gdnaig·2023-11-03 02:41

05.大模型&大数据量

文章目录大模型顿悟时刻：EmergentAbility（涌动现象）CalibrationInverseScalingPrizeSwitchTransformers大数据量数据预处理去重模型大小与训练数据的选择
oldmao_2000·2023-11-03 02:58

关于爬虫API常见的技术问题和解答

它广泛应用于数据挖掘、信息检索、竞争情报等场景，帮助用户快速、高效地获取所需数据。二
懂电商API接口的Jennifer·2023-11-03 01:57

爬虫API常见的技术问题

它广泛应用于数据挖掘、信息检索、竞争情报等场景，帮助用户快速、高效地获
代码之路无极限·2023-11-03 01:25

AIOPS学习资源

站时间序列分析的基础、原理、算法和应用-知乎时间序列数据分析101-(1)一份全面详尽的时间序列入门教程-知乎-推荐图解72个机器学习基础知识点-推荐机器学习入门与核心概念-B站机器学习：盘点最常见的7种数据预处理方法和原理
MrUncle德鲁·2023-11-02 22:04

异常检测算法速览（Python代码）

一、异常检测简介异常检测是通过数据挖掘方法发现与数据集分布不一致的异常数据，也被称为离群点、异常值检测等等。
算法进阶·2023-11-02 22:27

文本数据“关键词渲染”的高频词可视化——词云图。

数据预处理1、首先将我们所需要的数据爬取出成Excel文件，并用pandas库读取出来。
db_hzm_2012·2023-11-02 21:24

python数据挖掘之中文分词和可视化展示（NLP应用初探）

主要应用场景：快速提取用户评论中关注的焦点，直接反应品牌或产品的主观感受，方便市场、运营、产品等相关人员收集市场信息，有针对性的调整或优化产品、策略等。比如本次练习用到的数据是抓的淘宝一个爆款面膜的部分评论，一眼就能看出消费者关心的是啥，可以直接拖到文末看效果图，是不是很神奇？本文用到两个第三方库，jieba、wordcloud、numpy，推荐pip方式安装（如命令行下：pipinstallji
小白学习手帐·2023-11-02 21:54

计算机毕业设计 基于SpringBoot的在线学籍管理系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT学长编程·2023-11-02 17:56

利用移动互联、物联网、智能算法、地理信息系统、大数据分析等信息技术开发的智慧工地云平台源码

智慧工地是指利用移动互联、物联网、智能算法、地理信息系统、大数据挖掘分析等信息技术，提高项目现场的“人•机•料•法•环•安”等施工要素信息化管理水平，实现工程施工可视化智能管理，并逐步实现绿色生态建造。
淘源码d·2023-11-02 16:05

利用chatgpt大语言模型来做数据预处理

数据预处理是机器学习中的一个重要步骤，包括数据清洗、数据转换、特征选择等。这些步骤通常需要人工进行，或者使用专门的数据预处理工具和库，如Python的Pandas库、Scikit-learn库等。
田晖扬·2023-11-02 14:14

Wilcoxon signed-rank test

sklearn实战-乳腺癌细胞数据挖掘（博主亲自录制视频教程）https://study.163.com/course/introduction.htm?
weixin_30505751·2023-11-02 13:24

医学数据挖掘学习项目：他克莫司

目录1.报告2.代码1：从数据库中提取数据lambda，匿名函数，快速定义单行函数，可以用在任何需要函数的地方。numpy.array和python.arraypython.filter(function,iterable)函数pythonzip(a,b)pandas创建DataFrame()数据pandas判断是否是空值NaN，isnull()，notnull()pandas.reset_ind
天狼啸月1990·2023-11-02 13:21

SPSS PRO工具适用模型与辅助工具

内容或参考来源https://www.spsspro.com/数据预处理【工具】数据标签输入：一项定类变量。输出：定类变量的文本标签修改。数据编码输入：一项定量或定类变量。
uestc_Venn·2023-11-02 13:45

大数据预处理及可视化分析复习

目录第一章数据分析是什么1、数据分析，机器学习，数据挖掘三者的概念，联系与区别：2、数据分析的步骤：第二章了解Python1、Python的历史：2、Python的特性：3、Python与数据分析的关系
_雕尔塔_·2023-11-02 12:42

基于深度学习的动物识别 - 卷积神经网络 机器视觉 图像识别 计算机竞赛

文章目录0前言1背景2算法原理2.1动物识别方法概况2.2常用的网络模型2.2.1B-CNN2.2.2SSD3SSD动物目标检测流程4实现效果5部分相关代码5.1数据预处理5.2构建卷积神经网络5.3tensorflow
Mr.D学长·2023-11-02 09:13

深度学习实战：基于TensorFlow与OpenCV的手语识别系统

文章目录写在前面基于TensorFlow与OpenCV的手语识别系统安装环境一、导入工具库二、导入数据集三、数据预处理四、训练模型基于CNN基于LeNet5基于ResNet50五、模型预测基于OpenCV
Want595·2023-11-02 08:20

数据仓库与数据挖掘

1.数据挖掘的概念数据挖掘（Datamining），又译为资料探勘、数据采矿。它是数据库知识发现（Knowledge-DiscoveryinDatabases，KDD）中的一个步骤。
huaqianzkh·2023-11-02 07:16

NHANES数据(复杂调查数据)亚组交互函数1.4尝鲜版（P for interaction）发布---用于一键生成交互效应表

在SCI文章中，交互效应表格（通常是表五）能为文章锦上添花，增加文章的信服力，增加结果的可信程度，还能进行数据挖掘。
天桥下的卖艺者·2023-11-02 06:31

【生物信息学】单细胞RNA测序数据分析：计算亲和力矩阵（基于距离、皮尔逊相关系数）及绘制热图（Heatmap）

数据预处理：根据需要对数据进行预处理，例如基因过滤、归一化等。计算亲和力：使用合适
QomolangmaH·2023-11-02 05:04

【深度之眼机器学习训练营第四期】4.本周总结

本周学习了机器学习的定义，单变量线性回归的算法框架，以及多变量微积分的拓展，其中包括梯度下降法，正规方程组方法，还对相应的机器学习算法应用举例有了一定的了解，比如数据挖掘，推荐系统等。
灰蒙蒙的雨露·2023-11-02 04:44

数据分析 | KNN模型

模型思想二、k值的选择01设置权重02交叉验证三、距离度量01欧式距离02曼哈顿距离03余弦相似度四、代码实现一、模型思想邻近算法，或者说K最邻近（KNN，K-NearestNeighbor）分类算法是数据挖掘分类技术中最简单的方法之一
Ouroboroszzs·2023-11-02 03:11

python knn模型_使用Python训练KNN模型并进行分类

K临近分类算法是数据挖掘中较为简单的一种分类方法，通过计算不同数据点间的距离对数据进行分类，并对新的数据进行分类预测。
weixin_39955142·2023-11-02 03:41

kNN模型

KNN算法是一个非常优秀的数据挖掘模型，既可以解决离散型因变量的分类问题，也可以处理连续型因变量的预测问题，而且该算法对数据的分布特征没有任何要求。
月岛雫-·2023-11-02 03:09

数据预处理（超详细）

importpandasaspdimportnumpyasnp【例5-1】使用read_csv函数读取CSV文件。df1=pd.read_csv("sunspots.csv")#读取CSV文件到DataFrame中print(df1.sample(5))df2=pd.read_table("sunspots.csv",sep=",")#使用read_table，并指定分隔符print("-----
在路上哟～·2023-11-02 03:38

python transform_Python中的fit(),transform()区别

其实题目应该是这样的：Python：sklearn数据预处理中fit(),transform()与fit_transform()的区别。
weixin_39961636·2023-11-02 02:31

2.预备知识-2简化版

#pic_centerR1R_1R1R2R^2R2目录知识框架No.1数据操作数据预处理一、N维数组样例二、创建数组三、访问元素四、数据操作D2L注意点五、数据预处理D2L注意点六、QANo.2线性代数一
霸时斌子·2023-11-02 01:10

chatgpt生成文本的底层工作原理是什么？

文章目录ChatGPT生成文本的底层工作原理一、数据预处理二、模型结构三、模型训练四、文本生成总结我是廖志伟，一名Java开发工程师、Java领域优质创作者、CSDN博客专家、51CTO专家博主、阿里云专家博主
我是廖志伟·2023-11-02 00:17

国家数据局正式揭牌，数据专业融合型人才迎来发展良机

国家数据局正式揭牌，数据专业融合型人才迎来发展良机1《数据要素安全流通》2《Python数据挖掘：入门、进阶与实用案例分析》3《数据保护：工作负载的可恢复性》4《DataMesh权威指南》5《分布式统一大数据虚拟文件系统
辭七七·2023-11-01 23:25

什么是ARFF文件，以.arff结尾

是weka数据挖掘开源程序使用的一种文件模式，这是一种ASCII文本文件，因此有必要在数据处理之前把数据集的格式转换成ARFF
子非Yu@Itfuture·2023-11-01 20:40

第2篇 机器学习基础 —（4）k-means聚类算法

聚类算法可以用于数据挖掘、图像分割、文本分类等领域。常见的聚类算法包括K-Means、层次聚类、DBSCAN、AP聚类、谱聚类等。本节课就简单介绍k-means聚类算法！
小哥谈·2023-11-01 17:11

什么是智慧燃气，智慧燃气解析干货！

关键词：智慧燃气、智慧燃气系统、智慧燃气平台、智能燃气、燃气智能管网、数据挖掘在互联网技术、无线通信技术、物联网技术、卫星通信技术、大数据、云计算技术飞速发展的今天，业界提出了“智慧城市”的概念。
计通智能·2023-11-01 16:31
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他