数据竞赛（数据挖掘）第58页

[R]TCGAbiolinks包：数据准备--query、download、prepare

此次系列笔记主要跟着TCGAbiolinks帮助文档重新学习下TCGA数据挖掘流程。

小贝学生信·2023-04-05 23:50

Python数据分析与可视化

学习日记目录学习日记一、数据可视化案例（示例图片来自网络）1、滴滴的交通大数据2、2020新冠肺炎各省累计确认病例分布示例二、数据、信息与数据分析的概念1、数据2、信息3、数据分析4、广义的数据分析包括狭义数据分析和数据挖掘三

醉蕤·2023-04-05 20:58

GEO数据分析之必备基础知识

GEO数据分析之必备基础知识本节主要介绍GEO分析开始之前的准备工作和推荐学习以下非常优秀的推文，学习之后GEO分析就春暖花开了：生信技能树GEO数据挖掘相关的课程解读GEO数据存放规律及下载，一文就够解读

天涯清水·2023-04-05 14:19

数据仓库概论

数据仓库的输入方式各种各样的数据源，最终的输出用于企业的数据分析、数据挖掘、数据报表等方向。数据库和数据仓库区别数据库：数据库是面向交易的处理系统

NeilNiu·2023-04-05 13:49

Spark数据挖掘-基于 K 均值聚类的网络流量异常检测(1): 数据探索、模型初探

Spark数据挖掘-基于K均值聚类的网络流量异常检测(1):数据探索、模型初探1前言分类和回归是强大易学的机器学习技术。

chengtuo5899·2023-04-05 12:23

一文详解8种异常检测算法（附Python代码）

基于聚类的方法2.2基于统计的方法2.3基于深度的方法2.4基于分类模型2.6基于偏差的方法2.7基于重构的方法2.8基于神经网络的方法技术交流三、项目实战：信用卡反欺诈一、异常检测简介异常检测是通过数据挖掘方法发现与数据集分布不一致的异常数据

Python数据开发·2023-04-05 12:03

系统学习数据挖掘（Data Mining）的一些建议

>>>我认为，在学习DM之前你至少需要明白以下几点：数据初期的准备通常占整个数据挖掘项目工作量的70%左右；数据挖掘本身融合了统计学、数据库和机器学习等学科，并不是新的技术；数据挖掘技术更适合业务人员学习

weixin_34233618·2023-04-05 12:21

六大银行数据治理现状盘点：治理架构、数据标准与数据平台

银行业通过数据挖掘、分析和应用，使静态数据流动起来，一方面，可以赋能现有业务的发展，更好地实现数字化转型；另一方面，能够对客户群体进行精准画像，充分了解客户需求，构建真正“以客户为中心”的金融产品与服务

宋罗世家技术屋·2023-04-05 08:58

读书计划-数据分析实战45讲 | 01丨数据分析全景图及修炼指南 20181223

2.数据挖掘。它可以说是最“高大上”的部分，也是整个商业价值所在。之所以要进行数据分析，就是要找到其中的规律，来指导我们的业务。因此数据挖掘的核心是挖掘数据的商业价值，也就是我们所谈的商业智能BI。

嘟嘟噜噜可·2023-04-05 05:33

大师兄的数据分析学习笔记(三十二）：模型评估（一）

大师兄的数据分析学习笔记(三十一）：机器学习模型总结大师兄的数据分析学习笔记(三十三）：模型评估（二）一、分类模型评估1.二分类二分类就是标注分类时有两类的分类，在数据挖掘中是常见的类型。

superkmi·2023-04-05 04:28

数据挖掘中使用各种距离小结（欧式距离，马氏距离，闵可夫斯基距离....）

在做分类时常常需要估算不同样本之间的相似性度量(SimilarityMeasurement)，这时通常采用的方法就是计算样本间的“距离”(Distance)。采用什么样的方法计算距离是很讲究，甚至关系到分类的正确与否。本文的目的就是对常用的相似性度量作一个总结。本文目录：1.欧氏距离2.曼哈顿距离3.切比雪夫距离4.闵可夫斯基距离5.标准化欧氏距离6.马氏距离7.夹角余弦8.汉明距离9.杰卡德距离

keeeeeenon·2023-04-05 03:36

数据挖掘组队学习之模型融合

同DataWhale一起组队学习：https://tianchi.aliyun.com/notebook-ai/detail?spm=5176.12281978.0.0.6802593a2HCrSE&postId=95535模型融合是比赛后期一个重要的环节，大体来说有如下的类型方式。简单加权融合:回归（分类概率）：算术平均融合（Arithmeticmean），几何平均融合（Geometricmea

612twilight·2023-04-05 03:12

数据挖掘资源汇总(转)

数据挖掘资源汇总(转)DataMining:WhatIsDataMining?

zs_dolphin·2023-04-05 00:18

隐私计算：数据脱敏、匿名化、假名化、差分隐私和同态加密

随着数据挖掘技术的普遍应用，一些厂商通过发布用户数据集的方式鼓励研究人员进一步深入挖掘数据的内在价值，在数据集发布的过程中，就存在安全隐患，可能导致用户隐私的泄露。

人工智·2023-04-04 21:02

Scrapy使用(一)

简介Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，可以应用在数据挖掘,信息处理或存储历史数据等一系列的程序中，Scrapy用途广泛可以用于数据挖掘检测和自动化测试，Scrapy使用

李小峰_·2023-04-04 20:25

毕业设计之舆情监测系统

程序员小美·2023-04-04 16:48

浪潮 KaiwuDB x 河工大 | 推进能源行业数字化转型建设

数字技术改变商业模式，通过数据挖掘和管理创造新价值，为企业提供了新的增长机会。伴随着我国“双碳”政策的提出，能源行业数字化转型趋势如火如荼，成为行业伙伴重点关注的核心领域。

KaiwuDB·2023-04-04 15:38

阿里云大数据平台DataWorks(原DataX)

核心功能数据集成离线/实时数据同步复杂网络环境下，对丰富异构类型数据源高效稳定的移动和同步能力数据开发对MaxCompute中的数据进行加工(SQL，UTF，Graph，MR)、分析与发掘（数据分析、数据挖掘

hsabrina·2023-04-04 14:39

数据集成的两种架构：ELT和ETL

一般来说，数据工程师的工作包括了数据的ETL和数据挖掘算法的实现。算法实现可以理解，就是通过数据挖掘算法，从数据仓库中找到“金子什么是ETL呢？

Nexadata·2023-04-04 14:28

KNN算法

一、KNN算法简介K最近邻（KNN，K-NearestNeighbor）分类算法是数据挖掘分类技术中最简单的方法之一。

我的Doraemon·2023-04-04 13:53

建议收藏，分享8个提升数据挖掘效率的 Python 神库！！

来源丨数据STUDIO在进行数据科学时，可能会浪费大量时间编码并等待计算机运行某些东西。所以我选择了一些Python库，可以帮助你节省宝贵的时间。1、OptunaOptuna是一个开源的超参数优化框架，它可以自动为机器学习模型找到最佳超参数。最基本的（也可能是众所周知的）替代方案是sklearn的GridSearchCV，它将尝试多种超参数组合并根据交叉验证选择最佳组合。GridSearchCV将

欣一2002·2023-04-04 12:50

GEO数据挖掘之绘制PCA热图和差异基因火山图

PCA和差异基因图是生信技能树[生信爆款入门课程]GEO数据挖掘的重点。为拓展课堂所学知识，现在找一个数据集对他们做下练习总结。

Seurat_·2023-04-04 12:10

第七届中国数据挖掘会议纪要

这次会议是一个数据挖掘领域的会议，因而有些东西可能与我们进行可视化相关研究并不具有那么直接的联系。

麦克斯韦的妖精·2023-04-04 12:47

Tony脑图《用图秀演讲》合集

1-【三种真理】大脑思考出来的的是理性真理，心灵感受到的是感性真理，数据挖掘到的是数据真理。2-【获得信任】要想获得听众信任，就要实话实说。3-【演讲的三个要素】——我的想法，我自己，我的听众。

陌上花开wen·2023-04-04 10:02

Python--Matplotlib简单了解

Python–Matplotlib简单了解文章目录Python--Matplotlib简单了解一、数据挖掘基础环境安装与使用1.1库的安装1.2JupyterNotebook使用1.2.1JupyterNotebook

Slience_me·2023-04-04 10:07

【数据挖掘与商务智能决策】红酒数据集

importpandasaspdfromsklearn.datasetsimportload_winefromsklearn.model_selectionimporttrain_test_splitfromsklearn.treeimportDecisionTreeClassifier#获取数据集wine=load_wine()#划分数据集x_train,x_test,y_train,y_tes

仿生程序员会梦见电子羊吗·2023-04-04 10:01

python爬取物流信息_python爬取快递100，运行代码就能查询的物流信息

以下文章来源于Python爬虫与数据挖掘，作者Python进阶者我们经常会去查快递的物流单号，可是这些物流单号是从哪里来的呢？

weixin_39908758·2023-04-04 09:32

【案例教程】Python气象海洋数据可视化到常见数据分析方法（折线图、柱状图、errorbar图、流场矢量、散点图、风玫瑰图、流场矢量、填色及等值线+地图）

Python在数据处理、科学计算、数学建模、数据挖掘和数据可视化方面具备优异的性能。上述优势使得Python

吹翻书页的风·2023-04-04 08:09

阿里大数据-数据库总结:RDS ADS OTS Maxcompute（ODPS）

Maxcompute（原odps）阿里云中的Maxcompute（原odps）其实就是hive，扮演数据仓库的角色，适合存储轨迹类历史数据，适合存储的数据量大，适合海量数据的处理，适合对数据进行离线分析，数据挖掘运算

hsabrina·2023-04-04 06:37

模型部署

一个比较完整的数据挖掘过程包括业务理解数据理解数据处理构建模型模型评价模型部署本文讲最后一个步骤，模型部署。好的数据科学家和好的写作适用于同样的规则：展现出来。

Liam_ml·2023-04-04 06:33

【python教程入门学习】Python教程第1篇：下载和安装Python

在网络爬虫、数据挖掘分析、人工智能、运营运维、日常工作效率提升，无不有Python的影子。因此，今天跟大家分享Python的下载和安装教程。

python自由菌·2023-04-04 00:48

科赛网新人赛-员工满意度预测 MSE 0.02882

科赛网新人赛-员工满意度预测-竞赛思路原贴地址项目地址文章目录科赛网新人赛-员工满意度预测-竞赛思路有用的资料、文档、博客环境与工具1.0基础知识1.1数据挖掘流程：2.0数据探索性分析2.1单变量分析

_LvP·2023-04-03 20:49

小程序素材抓取_PS人的效率小工具，超多设计素材下载就靠它！

在网络爬虫、数据挖掘分析、人工智能、运营运维、日常工作效率提升，无不有Python的影子。如果你此时正在找工作，或者想更换职位，不妨看看招聘网站的岗位要求，假如你会Python，真的更有优势。

weixin_39653766·2023-04-03 19:00

2023美赛春季赛

2.确定需要解决的问题，并选择合适的建模方法和技术，如数学建模、统计分析、数据挖掘等。3.收集和整理相关数据、信息和知识，并进行预处理和清洗，确保数据质量和可靠性。

i love matlab11·2023-04-03 19:11

大数据AI Notebook产品介绍和对比

背景大数据数据需要查询分析可视化工具,AI数据挖掘和探索也需要相关可视化编辑工具，开源产品主要有两个一个是Zeppelinnotebook一个是jupyternotebook，其中juypter主要用于数据科学家

house.zhang·2023-04-03 18:59

7000字，详解仓湖一体架构

在了解湖仓一体化之前，我们先来看一则有关数据仓库的有趣故事吧~沃尔玛拥有世界上最大的数据仓库系统，它利用数据挖掘方法对交易数据进行分析后发现"跟尿布一起购买最多的商品竟是啤酒！

大数据AI人工智能培训专家培训讲师叶梓·2023-04-03 17:50

用数据讲故事：基于分析场景的17条Python使用小结

作为一名数科小白，我对Python的第一认知是丰富的机器学习算法，但Python有超过12万个第三方库，覆盖从数据预处理、统计分析、数据挖掘及可视化等各种日常数据科学建模。

阿里巴巴淘系技术团队官网博客·2023-04-03 17:25

易基因：高通量测序后的下游实验验证方法——ChIP-seq篇｜干货系列

此前，我们分享了染色质免疫共沉淀测序(ChIP-seq）的数据挖掘思路（点击查看详情），进而筛选出TF结合/组蛋白修饰的目标区域和候选靶基因。

易基因科技·2023-04-03 12:16

python爬取新闻并汇总_【python】爬虫-爬取新闻

最近，在数据挖掘课，要交课设了，打算做一个通过机器学习进行新闻分类，首先要有大量的文本(新闻)，去做训练，并通过爬虫爬取大量的新闻一，思路如下：0.首先确定获取数据的网站1.通过BeautifulSoup

weixin_39818662·2023-04-03 07:48

2023秋招—大数据开发面经—蚂蚁金融

（数据仓库、数据平台、数据算法、数据挖掘）5、讲讲MapReduce的原理6、环形缓冲区为什么要反向？7、实习的存储计算用的是什么组件8、有金融相关知识的储备吗？反问：1、这一面算是第一面吗（是）？

不断学习的克里斯·2023-04-03 06:27

大数据HCIE认证更新升级，要考大数据HCIE的过来看看

华为大数据挖掘专家认证HCIE-BigData-DataMiningV2.0自2019年7月2日起，正式在中国区发布。

智汇云校·2023-04-03 03:28

达观数据纪达麒：个性化推荐系统商业化，五大要素不可或缺

在峰会大数据专场上，达观数据CTO纪达麒围绕“数据挖掘算法落地实践”做了主题演讲，就个性化推荐系统商业化的五大要素进行了详细探讨。下面为大家献上演讲的精华内容。机器学习的原理并不神秘

weixin_34161029·2023-04-03 03:35

LightGBM（lgb）介绍

GBDT不仅在工业界应用广泛，通常被用于多分类、点击率预测、搜索排序等任务；在各种数据挖掘竞赛中也是致命武器，据统计Kaggle上的比赛有一半以上的冠军方案都是基于GBDT。而L

浩波的笔记·2023-04-02 23:27

【2023年第十一届泰迪杯数据挖掘挑战赛】B题：产品订单的数据分析与需求预测建模及python代码详解问题一

Better Bench·2023-04-02 22:00

机器学习自学笔记（1）sklearn数据集的简单使用

Sklearn具有以下特点：简单高效的数据挖掘和数据分析工具

悠然;̀͒̏ۖ·2023-04-02 21:08

数据挖掘(2.4)--数据归约和变换

目录1.数据归约1.1数据立方体聚合1.2特征选择1.3数据压缩1.4其他数据归约方法回归分析直方图聚类简单随机采样（SAS）2.数据离散化2.1基于信息增益的离散化2.2基于卡方检验的离散化2.3基于自然分区的离散化3.概念层次生成1.数据归约在实际应用中,数据仓库可能存有海量数据,在全部数据上进行复杂的数据分析和挖掘工作所消耗的时间和空间成本巨大,这就催生了对数据进行归约的需求。数据归约可以从

码银·2023-04-02 17:17

爬虫Scrapy之一（17）

Scrapy=Scrach+PythonScrapy用途广泛，可以用于数据挖掘、监测和自动化测试、信息处理和历史档案等大量应用范围内抽取结构化数据的应用程序框架，广泛用于工业Scrapy使用Twisted

小蜗笔记·2023-04-02 16:29

Scrapy 框架架构

Scrapy框架架构目录Scrapy框架架构前言一、核心组成二、数据流三、项目结构总结前言Scrapy(/ˈskreɪpaɪ/)是一个用于抓取网站和提取结构化数据的应用程序框架，可用于如数据挖掘、信息处理

不一样的鑫仔·2023-04-02 16:27

知识上云第三弹：快速部署为知笔记，没想到它变得这么好用了！

老Q会不定期但经常性地分享数据挖掘、数据可视化、量化、NAS、工具、爬虫等类型的内容，感兴趣的朋友欢迎点个关注！

老Q在折腾·2023-04-02 15:47

FlyAI资讯：关于Transformer，那些的你不知道的事

FlyAI是为AI开发者提供数据竞赛并支持GPU离线训练的一站式服务平台。每周免费提供项目开源算法样例，支持算

iFlyAI·2023-04-02 15:34

推荐频道

数据竞赛（数据挖掘）