数据竞赛（数据挖掘）

Spark对比MapReduce究竟提高了多少效率？

MapReduce为大数据挖掘提供了有力的支持，但是复杂的挖掘算法往往需要多个MapReduce作业才能完成，多个作业之间存在着冗余的磁盘读写开销和多次资源申请过程，使得基于MapReduce的算法实现存在严重的性能问题
丨程序之道丨·2023-09-17 19:28

盘点一款Python二级考试模拟软件，带你轻松过关二级Python考试

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤最是人间留不住，朱颜辞镜花辞树。大家好，我是Python进阶者。
Python进阶者·2023-09-17 18:24

学会python有什么用？

python是一门比较适合普通人学习的语言，学习python之后可以从事数据挖掘及分析、游戏开发、自动化测试、网站开发爬虫等工作。
奈何缘浅wyj·2023-09-17 17:31

人工智能方向毕业设计选题方法及建议

、步态识别、行人ReID、瞳孔识别等；图像处理：分类标注、以图搜图、场景分割、车辆车牌、OCR、AR等；视频分析：安防监控、智慧城市等；2.自然语言处理情感分词、实体关系抽取、知识图谱、语音识别、文本数据挖掘
IT小职·2023-09-17 16:01

Day69 Kafka 设计原理详解

Storm/Spark流式处理引擎web/nginx，访问日志消息服务开放统一接口给consumerhadoop,hbase等.装载到hadoop,数仓etl做离线分析和数据挖掘.ScreenShot2022
小周爱吃瓜·2023-09-17 12:39

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

ApacheSpark是一个快速开源的大数据处理框架，用于处理大规模数据和实时数据挖掘。它是基于内存计算的分布式计算系统，并且支持包括Scala、Java、Python等多种编程语言。
wxchqaz·2023-09-17 10:12

TCGA数据挖掘

TCGA数据挖掘步骤1：安装R包###00_package_install.Roptions("repos"=c(CRAN="http://mirrors.tuna.tsinghua.edu.cn/CRAN
养猪场小老板·2023-09-17 08:25

R语言预测海藻频率（多元线性回归、回归树、组合随机森林）

方法：以海藻样本数据为数据集，通过数据挖掘的方式分析影响海藻爆发的主要因素，并通过构建预测模型，对海藻的爆发情况进行事先预测。
QQ未来星·2023-09-17 04:17

使用爬虫技术从今日头条获取社会热点

导语今日头条是一款基于数据挖掘的推荐引擎产品，能够为用户提供个性化的信息流，涵盖了新闻、视频、娱乐、体育等多个领域。今日头条的内容来源于各大媒体、自媒体、网友等，具有丰富性和多样性。
亿牛云爬虫专家·2023-09-17 00:30

数据预处理

数据ETL：包括三个方面，数据抽取（Extract），清洗（Cleaning），转换（Transform）数据挖掘一般过程：1)定义挖掘目标：熟悉应用领域背景知识，弄清用户需求；2)数据抽样：相关性，可靠性
闫阿佳·2023-09-17 00:44

GEO数据库挖掘（2）--快速锁定目标数据

GEO中的数据千千万万条，能够准确筛选出符合我们研究方向的数据至关重要，是整个数据挖掘工作的核心和基础。如果没有合适的数据，后续
ZZM2020·2023-09-16 22:39

sklearn学习网站--机器学习中常用的第三方模块,对常用的机器学习方法进行了封装

语言的机器学习工具机器学习中常用的第三方模块,对常用的机器学习方法进行了封装,包括回归(Regression)、降维(DimensionalityReduction)、分类(Classfication)、聚类(Cluster）简单高效的数据挖掘和数据分析工
luckyjww·2023-09-16 15:06

逻辑回归（Logistic Regression）原理（理论篇）

（1）sigmoid函数（2）输入和输出形式（3）基于目标函数求解参数w三、逻辑回归代码复现一、逻辑回归简介及应用logistic回归又称logistic回归分析，是一种广义的线性回归分析模型，常用于数据挖掘
傅瑾颜·2023-09-16 07:51

数据集成：数据挖掘的准备工作之一

欢迎小伙伴们点赞、收藏⭐️、留言、关注，关注必回关上一篇文章已经跟大家介绍过《数据清洗：数据挖掘的前期准备工作》，相信大家对数据清洗都有一个基本的认识。下面我讲一下：数据集成：数据挖掘
秋无之地·2023-09-16 06:23

数据变换：数据挖掘的准备工作之一

欢迎小伙伴们点赞、收藏⭐️、留言、关注，关注必回关上一篇文章已经跟大家介绍过《数据集成：数据挖掘的准备工作之一》，相信大家对数据集成都有一个基本的认识。下面我讲一下：数据变换：数据挖掘
秋无之地·2023-09-16 06:53

计算机毕业设计 基于SSM+Vue的志愿者招募网站的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT狂编师·2023-09-16 05:57

和鲸科技两项成果入选“智赋百业”2023年人工智能融合发展与安全应用典型案例

上海和今信息科技有限公司（简称“和鲸科技”）在赋能AI融合发展及大模型创新应用方面的能力再获权威认可，所申报的两项成果——“和鲸ModelWhale基于人工智能打造遥感大数据挖掘
ModelWhale·2023-09-15 20:59

一文了解袋鼠云在实时数据湖上的探索与实践

如今，大规模、高时效、智能化数据处理已是“刚需”，企业需要更强大的数据处理能力，来应对数据查询、数据处理、数据挖掘、数据展示以及多种计算模型并行的挑战。
袋鼠云数栈·2023-09-15 15:35

【股票价格走势预测】数据挖掘实验一

I、项目任务要求任务描述：由于直接的经济利益，股票价格预测一直吸引着有兴趣投资股票市场和股票交易所的人。它也是金融界的一个重要研究课题。然而股票市场收益预测是一个非常复杂的问题，取决于公司财务状况和国家政策等诸多因素。主要任务要求如下(不局限于以下要求)：可选用爬虫工具或其它方法制作数据集。建立股票价格趋势预测模型(至少两种不同回归方法分别建模，其中至少一种采用课外方法)。以预测精度来评估预测模型
小手の冰凉·2023-09-15 13:04

计算机毕业设计 高校课程评价系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT狂编师·2023-09-15 11:07

计算机毕业设计 基于SSM+Vue的服装定制系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT狂编师·2023-09-15 11:37

计算机毕业设计 基于SSM的电影推荐系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT狂编师·2023-09-15 11:05

Python判断多个文件夹的文件夹名是否包含“分公司”或“营销中心”怎么处理？（方法三）...

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤愚以为营中之事，悉以咨之。大家好，我是皮皮。
Python进阶者·2023-09-15 10:34

Python判断多个文件夹的文件夹名是否包含“分公司”或“营销中心”怎么处理？（方法四）...

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤必能使行阵和睦，优劣得所。大家好，我是皮皮。
Python进阶者·2023-09-15 10:34

Python应用实战——盘点一个Python面试编程题（附代码）

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤苟全性命于乱世，不求闻达于诸侯。大家好，我是皮皮。
Python进阶者·2023-09-15 10:34

Python中的os模块是不是慢慢被淘汰了？

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤亲贤臣，远小人，此先汉所以兴隆也；大家好，我是皮皮。
Python进阶者·2023-09-15 10:31

Python数据挖掘-数据去重及清洗优化(三)

今天一大早被知了叫醒了，那我们开始继续学习吧~上节课我们实现了数据的自动爬取并存入数据库，但是数据挖掘的工作没有结束，更厉害的功能还在后面。
Blogfish·2023-09-15 09:16

数据挖掘一般框架

1.数据探索1.1数据整体情况介绍panda库中的to_datatime可以将时间戳转换成日常的时间格式1.2数据概况查看数据量大小查看前五行查看每列属性含义1.3探索性数据分析（EDA）1.3.1缺失值可视化利用missingno包1.3.2查看变量分布在scipy模块中有johnsonsu、norm、lognorm可以将数据分布绘出2.数据预处理2.1划分测试机何训练集2.2处理缺失值2.3数
孤独的马铃薯·2023-09-15 09:45

数据挖掘而之数据清洗

数据清洗，是整个数据分析过程中不可缺少的一个环节，其结果质量直接关系到模型效果和最终结论。在实际操作中，数据清洗通常会占据分析过程的50%—80%的时间。国外有些学术机构会专门研究如何做数据清洗，相关的书籍也不少。(美亚搜datacleaning的结果，可以看到这书还挺贵)我将在这篇文章中，尝试非常浅层次的梳理一下数据清洗过程，供各位参考。照例，先上图：预处理阶段预处理阶段主要做两件事情：一是
江海成·2023-09-15 09:14

数据清洗：数据挖掘的前期准备工作

⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️作者：秋无之地简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据开发、数据分析等。欢迎小伙伴们点赞、收藏⭐️、留言、关注，关注必回关上一篇文章已经跟大家介绍过《Python爬虫：如何下载懂车帝的电动车数据（完整代码）》，相信大家对python爬虫都有一个基本的认识。
秋无之地·2023-09-15 09:43

数据挖掘中数据清洗的方法（转载）

原文：https://www.cnblogs.com/enmink/p/10586635.html数据清洗：一是为了解决数据质量问题，二是让数据更加适合做挖掘一、解决数据质量问题数据的完整性，比如人的属性中缺少性别、籍贯、年龄等数据的唯一性，比如不同来源的数据出现重复的情况数据的权威性，比如同一个指标出现多个来源的数据，且数值不一样数据的合法性，比如数据与常识不符，市区内开车速度到达了400km/
ErnestW·2023-09-15 09:43

python 路径格式化_吐血整理！140种Python标准库、第三方库和外部工具都有了！...

这些库可用于文件读写、网络抓取和解析、数据连接、数清洗转换、数据计算和统计分析、图像和视频处理、音频处理、数据挖掘/机器学习/深度学习、数据可视化、交互学习和集成开发以及其他Python协同数据工作工具
weixin_39555715·2023-09-15 01:05

cassandra可视化工具_精华 | 140种Python标准库、第三方库和外部工具都有了

这些库可用于文件读写、网络抓取和解析、数据连接、数清洗转换、数据计算和统计分析、图像和视频处理、音频处理、数据挖掘/机器学习/深度学习、数据可视化、交互学习和集成开发以及其他Python协同数
weixin_39689687·2023-09-15 01:05

AI学习笔记之数学基础三（数理统计）

1.数理统计的意义：基础的统计理论有助于对机器学习的算法和数据挖掘的结果做出解释，只有做出合理的解读，数据的价值才能够体现。
wenju_song·2023-09-15 00:32

大数据时代如何做好数据治理

得到规范的数据后，才可在此基础上进行主题化的数据建模、数据挖掘、数据分析等。2013年被众多的IT人定义为中国的大数据元年，这一年国内的大数据项目开始在交通、电信、金融部门被广泛推动。
星海梦境·2023-09-14 21:15

【大数据笔记】SQL Optimizer 解析

前言大数据课程相关笔记一、大数据体系下的SQL一、大数据体系大数据体系自上而下分为七层，分别是：1.业务应用业务应用层次，主要业务应用包括BI报表、数据挖掘、营销分析、精准推荐等，主要工作是管控运维。
唐浮·2023-09-14 18:18

餐饮服务的数据挖掘

传统饭馆客人来之后，服务员拿出一本厚重的菜单，还有个酒水菜单，外加几页新添菜品。客人一边点餐，服务员一边手写菜名。有时客人说的快了，服务员还记不过来。点完餐后，服务员把一联菜单拿给后厨，另一联拿给收银台。后厨照着菜单开始做饭，结果发现有一道菜没有材料，又让顾客换一道菜。顾客多了，厨师手头的单子也越来越多，做了谁的菜，没做谁的菜，记混了，又或是服务员给上错菜了。结账时，有的顾客之前取消了一道菜，结果
萤火炎焱燚爞·2023-09-14 10:10

计算机毕业设计 高校普法系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT狂编师·2023-09-14 08:45

Python爬虫：如何下载懂车帝的电动车数据（完整代码）

欢迎小伙伴们点赞、收藏⭐️、留言、关注，关注必回关上一篇文章已经跟大家介绍过《数据采集：数据挖掘的基础》，相信大家对用户画像都有一个基本的认识。下面我讲一下：Python爬虫：如何下载
秋无之地·2023-09-14 07:28

数据采集：数据挖掘的基础

⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️作者：秋无之地简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据开发、数据分析等。欢迎小伙伴们点赞、收藏⭐️、留言、关注，关注必回关上一篇文章已经跟大家介绍过《用户画像的设计准则以及美团外卖用户画像的设计案例》，相信大家对用户画像都有一个基本的认识。下面我讲一下：数
秋无之地·2023-09-14 07:47

【2023】数据挖掘课程设计：基于TF-IDF的文本分类

目录一、课程设计题目基于TF-IDF的文本分类二、课程设计设置1.操作系统2.IDE3.python4.相关的库三、课程设计目标1.掌握数据预处理的方法，对训练集数据进行预处理；2.掌握文本分类建模的方法，对语料库的文档进行建模； 3.掌握分类算法的原理，基于有监督的机器学习方法，训练文本分类器。四、课程设计内容1.数据采集和预处理a.数据采集b.数据清洗c.文本预处理：分词、去除停用词、移除低频
QomolangmaH·2023-09-14 07:46

谈谈我对证券公司一些部门的理解(前、中、后台)

今后方向：大数据，数据挖掘，量化投资原文：作为一个跨行到金融圈的互联网IT人，已经快2年了。
wqfhenanxc·2023-09-13 21:15

python可以放空间中_python与地理空间分析（一）

例如气温会随着海拔的升高而降低，地形的坡向朝向也会影响风速的分布，此外，典型的地形会形成特定的气候条件，也是数据挖掘中可以利用的区域划分标准。
weixin_39637363·2023-09-13 17:59

毕业设计 2023-2024年最新计算机专业毕设选题题目推荐汇总

文章目录0前言1javaweb管理系统毕设选题2javaweb平台/业务系统毕设选题3游戏设计、动画设计类毕设选题(适合数媒的同学)4算法开发5数据挖掘毕设选题6大数据处理、云计算、区块链毕设选题7网络安全毕设选题
kooerr·2023-09-13 15:58

毕业设计 2023-2024年最新python毕设选题题目推荐汇总

文章目录0前言1python-算法类毕设选题2python-数据挖掘毕设选题3python-大数据处理、云计算、区块链毕设选题4python-网络安全毕设选题5python游戏设计、动画设计类毕设选题(
caxiou·2023-09-13 15:28

2023-2024年信息管理专业毕设题目推荐汇总

文章目录0前言1javaweb管理系统毕设选题2javaweb平台/业务系统毕设选题3游戏设计、动画设计类毕设选题(适合数媒的同学)4算法开发5数据挖掘毕设选题6大数据处理、云计算、区块链毕设选题7网络安全毕设选题
caxiou·2023-09-13 15:28

2023最新计算机毕业设计题目选题大全

文章目录0前言1javaweb管理系统毕设选题2javaweb平台/业务系统毕设选题3游戏设计、动画设计类毕设选题(适合数媒的同学)4算法开发5数据挖掘毕设选题6大数据处理、云计算、区块链毕设选题7网络安全毕设选题
caxiou·2023-09-13 15:20

如何使用 Python 进行机器学习？

Python+人工智能入门：Python基础→Python数据挖掘中级：机器学习进阶：NLP自然语言高级：OpenCV基础→深度学习人工智能学习路线图2023版-黑马程序员人工智能技术路线学习目标了解机器学习的定义知道机器学习的工作流程掌握获取到的数据集的特性一
骨灰级收藏家·2023-09-13 13:46

数据挖掘项目中的流程规范化

并且我是最后交付的时候才加入的,所以预处理的部分我完全没有参与过,这就导致很多字段根本就不知道是什么含义.感觉头特别大...无从下手,只能各种找之前人问,还好之前的人都比较nice,给了很多帮助.由此,我开始思考了下当前数据挖掘项目中规范化的问题
sawyer_2172·2023-09-13 13:35

TF-IDF算法介绍和基于Python的实现

TF-IDF算法概念  TF-IDF（termfrequency–inversedocumentfrequency）是一种用于信息检索与数据挖掘的常用加权技术。
weiambt·2023-09-13 12:55
上一页 29 30 31 32 33 34 35 36 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他