数据挖掘hadoop大数据

nosql数据库技术与应用知识点

知识回顾大数据处理流程数据采集(flume、爬虫、传感器)数据存储(本门课程NoSQL所处的阶段)Hdfs、MongoDB、HBase等数据清洗(入仓)Hive等数据处理、分析(Spark、Flink等)数据可视化数据挖掘

皆过客，揽星河·2024-09-16 08:42

这孩子谁懂哈·2024-09-16 04:07

CV、NLP、数据控掘推荐、量化

下面是对CV（计算机视觉）、NLP（自然语言处理）、数据挖掘推荐和量化的简要概述及其应用领域的介绍：1.CV（计算机视觉，ComputerVision）定义：计算机视觉是一门让计算机能够从图像或视频中提取有用信息

海的那边-·2024-09-15 13:47

【机器学习与R语言】1-机器学习简介

1.基本概念机器学习：发明算法将数据转化为智能行为数据挖掘VS机器学习：前者侧重寻找有价值的信息，后者侧重执行已知的任务。后者是前者的先期准备过程：数据——>抽象化——>一般化。

苹果酱0567·2024-09-15 09:43

系统架构师软考历年论文题目（2009-2024年）及分析

时间题目20091.论基于DSSA的软件架构设计与应用；2.论信息系统建模方法；3.论基于REST服务的Web应用系统设计；4.论软件可靠性设计与应用20101.论软件的静态演化和动态演化及其应用；2.论数据挖掘技术的应用

pccai-vip·2024-09-15 05:49

大数据新视界 --大数据大厂之数据挖掘入门：用 R 语言开启数据宝藏的探索之旅

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja

青云交·2024-09-15 05:14

大数据之flink与hive

其实吧我不太想写flink，因为线上经验确实不多，这也是我需要补的地方，没有条件创造条件，先来一篇吧flink：高性能低延迟流批一体的分布式计算框架基于事件时间对实时数据精准处理快速响应支持批处理，高效离线分析和数据挖掘数据仓库的引擎丰富数据源

星辰_mya·2024-09-14 21:17

纯生信很难发表？只是你没有及时抓住研究热点

当你还做meta分析的时候，你会发现meta分析很难发或者单位已经不承认了，而聪明的人已经开始做常规的生信GEO、TCGA数据挖掘这些（这个时候生信比较好发）。

SCI狂人团队·2024-09-13 20:01

K-means 算法的介绍与应用

K-means算法的主要步骤K-means算法的MATLAB实现优化方法与改进K-means算法的应用领域表格总结：K-means算法的主要应用领域结论引言K-means算法是一种经典的基于距离的聚类算法，在数据挖掘

小魏冬琅·2024-09-13 09:00

Matlab,Python,Java,C++的比较

适合做数据挖掘、数据分析、机器学习、人工智能、自然语言处理、爬虫、批量文件处理等，此外，Python开源免费，有很多的库，开发环境开发社区都比较友好；不过，Python是动态型的语言，需要更多的测试，并且错误仅仅是在运行的时候

Codefengfeng·2024-09-12 21:37

如何搞定数据挖掘？这篇文章告诉你！

数据所蕴含的信息具有重要价值，而数据挖掘和数据分析就是解读这些信息的重要工具。本文从明晰数据概念入手，再探讨数据挖掘。一·什么是数据？

isNotNullX·2024-09-12 13:17

一些机器学习不错的书籍

jimmyleeee·2024-09-12 13:46

使用SparkSql进行表的分析与统计

背景我们的数据挖掘平台对数据统计有比较迫切的需求，而Spark本身对数据统计已经做了一些工作，希望梳理一下Spark已经支持的数据统计功能，后期再进行扩展。

xingyuan8·2024-09-12 00:24

从零开始学python数据分析-从零开始学Python数据分析与挖掘 PDF 扫描版

weixin_37988176·2024-09-11 13:30

废字

u额堵不堵不断进步数据挖掘额v也得分发的大跳脱衣舞一个月肚饿肚饿金额见到你的就不会预计不不会吧菊花怪下班v触宝电话代表大会素冠荷鼎厚度还是v四川饭馆有电梯的但丁地狱冬天的多点多发发动态鼎泰丰饭地方放多放房东鹅二房方圆大厦

承晔儿·2024-09-11 04:36

大数据分析与安全分析

是指非传统的数据处理工具的数据集大数据特征：海量的数据规模、快速的数据流转、多样的数据类型和价值密度低等大数据的种类和来源非常多，包括结构化、半结构化和非结构化数据有关大数据的新兴网络信息技术应用不断出现，主要包括大规模数据分析处理、数据挖掘

Zh&&Li·2024-09-11 03:21

千万级规模高性能、高并发的网络架构经验分享

2015年11月21日下午地点：梦想加联合办公空间分享人：卫向军（毕业于北京邮电大学，现任微博平台架构师，先后在微软、金山云、新浪微博从事技术研发工作，专注于系统架构设计、音视频通讯系统、分布式文件系统和数据挖掘等领域

搬砖养女人·2024-09-10 20:35

2021-01-02随笔

人工智能时代最重要的是机器学习，像数据分析、图像识别、数据挖掘、自然语言处理、语音识别等都是以其为基础的，也可以说人工智能的各种应用都需要机器学习来支撑。

0清婉0·2024-09-09 23:26

Python是什么？Python能干什么？一篇文章让你对Python了如指掌！！

从入门级小白到专业级的大佬，数据挖掘、科学计算、图像处理、人工智能，Python都可以胜任。或许是因为这种万能属性，现在有很多的小伙伴都开始学习Python。

武昌库里写JAVA·2024-09-09 02:10

BAT的大数据战略

数据积累的同时，数据挖掘需要的计算理论、实时的数据收集和流通通道、数据挖掘过程需要使用的软硬件环境都在成熟。概念、模

数据资本主意·2024-09-08 22:48

前端数据埋点

下面说说我的观点一、什么是埋点埋点，是数据采集领域，简单来说就是行为数据收集二、为什么采用埋点数据生产->数据收集->数据处理->数据分析->数据驱动/用户反馈->产品优化/迭代通过大数据处理，数据统计，数据挖掘等加工

小童不学前端·2024-09-07 18:52

寻找区块链行业里数字内容分发的独角兽

事实上互联网巨头们也都在内容分发领域奋力拼杀，但他们无非是在内容整合、数据挖掘、精准投放这些方面做文章。面对这个市场里最大的痛点：侵权、利益分配不均等问题，这些中心化的组织要么无能为力，要么自

BBFund·2024-09-07 17:46

Java在智能数据挖掘系统的应用

智能数据挖掘系统是利用机器学习、统计分析等技术从大量数据中自动或半自动地发现模式和知识的系统。Java作为一种流行的编程语言，因其强大的性能和丰富的生态系统，在智能数据挖掘领域的应用非常广泛。

lizi88888·2024-09-06 09:10

EI会议推荐-第二届大数据与数据挖掘国际会议（BDDM 2024）

第二届大数据与数据挖掘国际会议（BDDM2024）1、基本信息大会官网：http://www.icbddm.org/官方邮箱：[email protected]主办方：武汉纺织大学会议时间：2024年12月13

shiyuankeyan·2024-09-06 08:36

Spark MLlib模型训练—聚类算法 K-means

SparkMLlib模型训练—聚类算法K-meansK-means是一种经典的聚类算法，广泛应用于数据挖掘、图像处理、推荐系统等领域。

不二人生·2024-09-06 04:14

云计算与分布式技术-常见云的比较

2云计算定义及分类2根据iiMediaResearch数据挖掘和分析机构所发论文分析

NicolasLearner·2024-09-05 06:13

数据分析利器：Java与MySQL构建强大的数据挖掘系统

Java与MySQL作为两个强大的工具，结合起来可以构建出一个高效、可靠且功能丰富的数据挖掘系统。

lizi88888·2024-09-05 05:04

【1】学习前言及数据分析的简单介绍&jupyter的介绍与安装

数据挖掘与数据分析区别这是现象，不是原因，所以这肯定不是数据分析。

烈风回响·2024-09-05 01:38

GNN会议&期刊汇总（人工智能、机器学习、深度学习、数据挖掘）

会议【NeurIPS】全称ConferenceonNeuralInformationProcessingSystems（神经信息处理系统大会），机器学习和计算神经科学领域的顶级学术会议，CCFA。【ICLR】全称InternationalConferenceonLearningRepresentations（国际学习表征会议），深度学习顶会。【AAAI】由人工智能促进协会AAAI（Associat

Bunny_Ben·2024-09-04 11:11

【统计分析与数据挖掘】基本统计分析方法与数据挖掘技术

统计分析与数据挖掘基本统计分析方法与数据挖掘技术引言在数据驱动的时代，统计分析与数据挖掘是从大量数据中提取有价值信息的核心技术。

爱技术的小伙子·2024-09-03 07:48

06 | 学数据分析要掌握哪些基本概念？

商业智能BI、数据仓库DW、数据挖掘DM开头中的百货商店利用数据预测用户购物行为属于商业智能，他们积累的顾客的消费行为习惯会存储在数据仓库中，通过对个体进行消费行为分析总结出来的规律属于数据挖掘。

张九日zx·2024-09-02 15:48

【Python进阶】Python爬虫的基本概念，带你进一步了解Python爬虫！！！

网络爬虫在信息获取、数据挖掘、搜索引擎构建等方面发挥着关键作用。二、工作流程确定目标网站：明确需要抓取数据的网站和具体页面。分析网页结构：使用开发者工具查看网页的HTML结构，确定数据存放的位置。

程序员陌陌·2024-08-30 21:05

python 数据挖掘与机器学习

近年来，Python编程语言受到越来越多科研人员的喜爱，在多个编程语言排行榜中持续夺冠。同时，伴随着深度学习的快速发展，人工智能技术在各个领域中的应用越来越广泛。机器学习是人工智能的基础，因此，掌握常用机器学习算法的工作原理，并能够熟练运用Python建立实际的机器学习模型，是开展人工智能相关研究的前提和基础。模块一：课前准备Python编程基础与进阶Python编程入门1、Python环境搭建（

科研的力量·2024-08-30 19:57

模糊C-means算法原理及Python实践

Python实践一、目标函数二、隶属度矩阵和聚类中心三、算法步骤四、终止条件五、算法特点六、Python实现模糊C-means（FuzzyC-Means，简称FCM）算法是一种经典的模糊聚类算法，它在数据分析、数据挖掘

doublexiao79·2024-08-30 11:32

【闲谈】聚类算法的金融数据挖掘应用及实践

目录一数据挖掘技术在金融领域应用概述二聚类算法介绍三聚类算法在金融数据挖掘中的应用1.聚类算法在客户细分领域的应用2.聚类算法在客户信用评估领域的应用四算法实践与个人体会1.聚类算法的实践——以k-means

爱写代码的July·2024-08-30 05:51

python爬虫：通过DBLP数据库获取数据挖掘顶会KDD在2023年的论文收录和相关作者信息

Task1读取网站主页整个页面的html内容并解码为文本串（可使用urllib.request的相应方法），将其以UTF-8编码格式写入page.txt文件。Code1importurllib.requestwithurllib.request.urlopen('https://dblp.dagstuhl.de/db/conf/kdd/kdd2023.html')asresponse:html=r

千里澄江·2024-08-30 01:58

程序猿成长之路之数据挖掘篇——Kmeans聚类算法

Kmeans是一种可以将一个数据集按照距离（相似度）划分成不同类别的算法，它无需借助外部标记，因此也是一种无监督学习算法。什么是聚类用官方的话说聚类就是将物理或抽象对象的集合分成由类似的对象组成的多个类的过程。用自己的话说聚类是根据不同样本数据间的相似度进行种类划分的算法。这种划分可以基于我们的业务需求或建模需求来完成，也可以单纯地帮助我们探索数据的自然结构和分布。什么是K-means聚类用官方的

zygswo·2024-08-29 18:39

2020-03-24

Datawhale零基础入门数据挖掘-Task2数据分析【代码摘要】赛题：零基础入门数据挖掘-二手车交易价格预测地址：[https://tianchi.aliyun.com/competition/entrance

黑乎乎AI·2024-08-29 09:10

【大模型】FAISS向量数据库记录：从基础搭建到实战操作

FAISS实战安装faiss加载Embedding模型创建FAISS数据库搜索FAISS数据删除FAISS数据保存、加载FAISS索引总结本人数据分析领域的从业者，拥有专业背景和能力，可以为您的数据采集、数据挖掘和数据分析需求提供支持

爱python的王三金·2024-08-29 03:55

分享一个基于Spark的招聘数据可视化与分析系统Hadoop大数据源码（源码、调试、LW、开题、PPT）

作者：计算机源码社个人简介：本人八年开发经验，擅长Java、Python、PHP、.NET、Node.js、Android、微信小程序、爬虫、大数据、机器学习等，大家有这一块的问题可以一起交流！学习资料、程序开发、技术解答、文档报告如需要源码，可以扫取文章下方二维码联系咨询Java项目微信小程序项目Android项目Python项目PHP项目ASP.NET项目Node.js项目选题推荐项目实战|基

计算机源码社·2024-08-27 20:05

数据挖掘工具（RapidMiner）

RapidMiner是一款功能强大的数据挖掘和机器学习工具，它提供了从数据预处理、建模、评估到部署的一系列流程。

deepdata_cn·2024-08-27 13:20

大数据挖掘的步骤是怎样的呢？

大数据挖掘是一个复杂而系统的过程，它利用计算机科学的方法和技术，对大量、多样化、高速增长的数据进行深入挖掘，以发现有价值的信息和知识。

weixin_54503231·2024-08-27 08:46

python——数据分析

数据分析的三个主要方面在数据分析中，整个流程通常可以分为三个大的方面：数据采集、数据挖掘和数据可视化。每个方面包含了不同的步骤，涉及到不同的Python库和工具。

pumpkin84514·2024-08-26 23:55

我的程序员读书路

你必须知道的.NET(第二版)编码:隐匿在计算机软硬件背后的语言代码整洁之道重构:改善既有代码的设计数据结构与算法：C#语言描述程序员修炼之道:从小工到专家编程珠玑(第2版)深入理解计算机系统(第2版)数据挖掘概念与技术

weixin_30416497·2024-08-26 12:02

深度探索：决策树算法在机器学习中的原理与应用

引言与背景决策树算法作为机器学习领域的一种基础而重要的监督学习方法，以其直观易理解、解释性强以及能处理离散和连续属性等特点，在数据挖掘、数据分析和预测建模等诸多领域占有不可或缺的地位。

生瓜蛋子·2024-08-25 23:42

《Hadoop核心技术》作者翟周伟：我与Hadoop的不解之缘

翟周伟，资深Hadoop技术专家，专注于Hadoop&大数据，数据挖掘，自然语言处理领域，目前就职于百度。2009年，利用Hadoop构建商业级大数据系统，是国内该领域最早的一批人之一；负责设

xytlwp·2024-08-25 21:27

数据分析方法概括

数据分析大致可以分为描述性分析、诊断性分析、预测性分析，同样的数据分析的方法论也大致分为：描述性数据分析、数理统计分析、数据挖掘分析。

wujingwin·2024-08-25 15:52

赠书 | 李航老师的蓝皮书

研究方向包括信息检索，自然语言处理，统计机器学习，及数据挖掘。曾出版过三部学术专著

茗创科技·2024-08-25 10:04

数据仓库系列总结

数据仓库中的数据一般不再进行更新或删除操作，而是存储历史数据，以便进行历史趋势分析或进行数据挖掘。数据仓库的设计和实施需要考虑数据的安全性、完整性和准确性，以及如何

大数据00·2024-08-25 10:17

Python标准库、第三方库和外部工具汇总

这些库可用于文件读写、网络抓取和解析、数据连接、数清洗转换、数据计算和统计分析、图像和视频处理、音频处理、数据挖掘/机器学习/深度学习、数据可视化、交互学习和集成开发以及其他Python协同数据工作工具

weixin_30650039·2024-08-25 06:25

推荐频道