DataWhale天池数据挖掘

Course1神经网络和深度学习编程作业

sklearn：为数据挖掘和数据分析提供的简单高效的工具。matplotlib：是一个用于在Python中绘制图表的库。testCas
毛十三_·2024-01-26 11:03

我们是如何测试人工智能的（二）数据挖掘篇

前言数据决定模型的上限，而算法调参只是尽量的帮你逼近那个上限，建模工程师80%的时间都是在跟数据打交道，国内在AI上的发展与国外最大的差距不是在算力上，而是高质量的数据。相信大家在网络上都见过类似的说法，事实上这些说法都是正确的。并且对于测试人员来说也是一样的。通过上一篇介绍效果测试的文章大家可以知道，目前已经有现成库帮我们去计算模型的评估指标，老实讲去计算这些指标没有一点难度，甚至可以说没什么技
孙高飞·2024-01-26 10:32

荷花定律告诉我们：行百里者半九十

请问：在第几天池塘中的荷花开了一半？是第15天吗？错！是第29天。第一天开放的只是一小部分，第二天，它们会以前一天的2倍速度开放。到第29天时荷花仅仅开满了一半，直到最后一天才会铺满整个池塘。
卫斯理说·2024-01-26 09:55

大数据看2020年国家社科基金状况

我们以“图情类”社科为例进行数据挖掘，其他学科一模一样！！！
文献计量·2024-01-26 09:17

Spark OLAP高阶分析函数总结

我们经常困惑在数据挖掘和报表分析场景中sql不会写，或者因为sql太长以至于可读性降低;今天我为大家总结了一些SparkSQL中的高阶函数，它们将会对你的业务形成助力，百倍提升你的工作效率GROUPING
易企秀工程师·2024-01-26 06:47

Datawhale 大模型基础 Task6 模型之Adaptation篇 笔记

通用大模型不能适用于全部领域，并且有着时效性等问题，因此需要进行适应来改善其性能。适应主要分为：预训练模型（主干部分的训练，最消耗算力）；获取特定领域的数据集；找一些参数用于适配；定义损失函数来作为适配的标准；进行问题的优化表示。适应的方法主要有：探测、微调（可以提升零样本性能、改善泛化能力、获取新任务的能力）。轻量微调和微调的思路大题相似，分为轻量级微调的变体、提示词微调、前缀微调、适配器微调。
AIzealot无·2024-01-26 06:40

Datawhale Task5：模型训练篇

本章学习模型训练第6章模型训练模型训练主要由目标函数和优化算法组成6.1目标函数有三类语言模型的目标函数：只包含解码器的模型（如，GPT-3）：计算单向上下文嵌入（contextualembeddings），一次生成一个token只包含编码器的模型（如，BERT）：计算双向上下文嵌入编码器解码器模型（如，T5）：编码输入，解码输出我们可以使用任何模型将token序列映射到上下文嵌入中（例如，LST
AIzealot无·2024-01-26 06:40

2019-07-16

《小古文100首》中的《北冥有鱼》一北冥有鱼，其名为鲲鲲之大，不知其几千里也化而为鸟，其名为鹏鹏之背，不知其几千里，怒而飞其翼，若垂天之云是鸟也，海运则将徙于南冥，南冥者天池也。
红枫叶_b087·2024-01-26 03:05

天池学习赛--淘宝用户购物行为数据可视化分析

学习赛内容2014年是阿里巴巴集团移动电商业务快速发展的一年，例如2014双11大促中移动端成交占比达到42.6%，超过240亿元。相比PC时代，移动端网络的访问是随时随地的，具有更丰富的场景数据，比如用户的位置信息、用户访问的时间规律等。本次可视化分析的目的是针对脱敏过的用户行为数据（包括浏览、收藏、加购和购买4类数据）进行分析，使用Python、Numpy、Pandas和Matplotlib工
joey小天使·2024-01-26 01:53

数据分析项目｜淘宝用户行为分析（Python+可视化）

一、认识数据了解数据的来源、字段等信息1.1数据来源及介绍本数据来源于阿里云天池，是其随机选择约100万用户在2017年11月25日至12月3日之间发生的行为记录，具有包括点击、购买、加购物车和收藏商品的行为
程序员小猴紫·2024-01-26 01:53

DNN二手车价格预测完整代码

前言最近在学习深度学习，就用DNN试着跑了个天池赛二手车价格预测，特征还是用之前集成模型跑的特征，通过不断调试模型的学习率、隐藏层数量、神经元数量、优化器、激活函数、迭代次数、batchsize，KFold
wjzeroooooo·2024-01-26 01:53

天池赛：淘宝用户购物行为数据可视化分析

目录前言一、赛题介绍二、数据清洗、特征构建、特征可视化1.数据缺失值及重复值处理2.日期分离，PV及UV构建3.PV及UV可视化4.用户行为可视化4.1各个行为的面积图（以UV为例）4.2各个行为的热力图5.转化率可视化三、RFM模型1.构建R、F、M2.RFM的数据统计分布3.计算RFM得分及组合4.RFM组合柱图及得分饼图可视化5.RFM3D柱图展示四、商品类型关联分析4.1.提取关联规则4.
wjzeroooooo·2024-01-26 01:52

数据挖掘之数据预处理

第三章为什么要进行数据预处理？数据库易受噪声、缺失值和不一致数据的侵扰数据库太大，且多半来自多个异种数据源衡量的标准是数据质量数据质量数据质量的因素都比较好理解，就不一一说明了。数据预处理的主要步骤数据预处理的主要步骤数据清理处理缺失值的方法忽略元组人工填写缺失值使用一个全局常量填充缺失值使用属性的中心度量使用与给定元组属同一类的所有样本的属性均值或中位数使用最有可能的值填充缺失值什么是噪声？噪声
雇个城管打天下·2024-01-26 00:30

新疆10天9晚的行程怎么走，两个人去新疆玩10天费用多少钱，看完就懂

后来，经朋友介绍，联系到了新疆的旅游管家晶晶，根据我们的情况，很细心的规划设计路线，面面俱到，很细致，我们选了10天9晚的行程，晶晶带我们游玩了很多地方，比如喀纳斯、禾木村、世界魔鬼城、天山天池，五彩滩
摄影博主分享·2024-01-25 20:12

python数据挖掘实战项目开源git_强烈推荐：8个顶级git/github项目数据分析工具

任何重要的决定都应基于数据，对于信息项目和软件开发亦是如此。如果你不仔细查看描述项目演进的数据就无法了解项目的健康状况，并给出合理的改进措施。为了分析和挖掘这些信息，我们可以从Git存储库和项目所在的代码托管平台(例如GitHub，Gitlab)获取一些有意义的数据。然而从Git/GitHub轻松获取数据实际也不是一件简单的事情。本文虫虫就给大家介绍一些Git/GitHub开源分析工具供大家学习参
weixin_39619635·2024-01-25 18:58

Jellyfish: A Large Language Model for Data Preprocessing

Jellyfish：一种用于数据预处理的大型语言模型摘要1引言2前言3Jellyfish的框架4基线模型的选择以及预调整5DP调整6Jellyfish用于数据处理7对不可见任务的扩展8实验9相关工作10结论摘要作为数据挖掘管道中的关键步骤
UnknownBody·2024-01-25 17:23

为你写一首小诗

似乎从来没有为你写过一首诗不善表达的我总是欲言又止当初那个木讷的青年不懂女孩的心思如今他嘴里依然说不出浪漫的句子多年来的相伴相知波澜不惊的生活也如同天边的红日有一天我要带你去看敦煌的飞天和长白山的天池然后一同骑着马在锡林郭勒大草原上呼喊彼此的名字其实我的呆傻众人皆知有时简直就是一种固执只有你从不以为之真正懂得我心底的那一份坚持明天就是你的生日今晚我悄悄为你写下这首小诗纵有一天白发取代了青丝我依然记
慕敖·2024-01-25 14:43

[Python] scikit-learn - accuracy_score(准确率分数)函数介绍和使用场景（案例）

Scikit-learn是一个用于机器学习和数据挖掘的Python库，提供了大量的机器学习算法和工具，使得机器学习任务更加便捷和高效。
老狼IT工作室·2024-01-25 11:31

城市排水管网监测系统主要功能与特点

系统功能:█实时监控:实时监测各个管网监测点（河流、地下通道、低洼处等地点）水质、水位等信息，对管网排查和管网监测结果进行数据挖掘，对管道内流量、水
厦门辰迈智慧科技有限公司·2024-01-25 10:22

计算机毕业设计 基于SpringBoot的民宿租赁系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT学长编程·2024-01-25 10:29

计算机毕业设计 基于SpringBoot的校园闲置物品交易系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT学长编程·2024-01-25 09:52

Task2 数据分析 (1)

赛题：零基础入门数据挖掘-零基础入门金融风控之贷款违约目的：1.EDA价值主要在于熟悉了解整个数据集的基本情况（缺失值，异常值），对数据集进行验证是否可以进行接下来的机器学习或者深度学习建模.2.了解变量间的相互关系
__y__·2024-01-25 08:57

机器学习 | 掌握Matplotlib的可视化图表操作

当然博主也不能面面俱到的讲解到所有内容，详情请参考：官网可视化是在整个数据挖掘的关键辅助工具，可以清晰的理解数据，从而调整我们的分析方法。将数据进行可视化，更直观的呈现。使数据更加客观、更具说服力。
亦世凡华、·2024-01-25 07:48

GEO数据挖掘学习笔记二

学习教程来源于《手把手教你GEO数据库差异基因分析》本次学习笔记内容为通过GEO2R在线工具进行差异基因分析通过了解，个人觉得这个方法相比R语言的优势是更普适性，以及更加“傻瓜”，方便学不明白R语言的同学。第一步：同R语言，找到相关的数据集第二步：点进页面详情，进行GEO2R在线分析第三步：选择分组信息，点击分析第四步：下载数据，得到差异基因数据集，如果仅得到差异基因即可，可不进行后续操作。第五步
slim_zhang·2024-01-25 06:30

加油，维妮（5）天山之行

第一站是天池。原定前往的那天，乌鲁木齐大雨，行程被取消了。朋友说：“乌鲁木齐下雨，天山就下雪，雪天是不会有车上山的。”第二天，朋友和她男朋友驾车送维尼到火车站等旅行车。
344c4e314708·2024-01-25 05:55

数据挖掘笔记(期末复习用)

http://47.101.52.166/blog/back/python/%E6%95%B0%E6%8D%AE%E6%8C%96%E6%8E%98.html#%E6%95%B0%E6%8D%AE%E7%B1%BB%E5%9E%8B
肯定是疯了·2024-01-25 04:06

AIGC时代高效阅读论文实操

曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。
herosunly·2024-01-24 22:16

【论文阅读】Time-Series Anomaly Detection Service at Microsoft

它在许多工业应用中非常流行，是数据挖掘中的一个重要研究领域。为了解决时间序列异常检测的问题，作者提出了一种基于谱残差(SR)以及卷积神经网络(
EmoryHuang·2024-01-24 18:04

关联规则挖掘算法的介绍

学号：17020110019姓名：高少魁【嵌牛导读】关联规则挖掘算法是数据挖掘中的一种常用算法，用于发现隐藏在大型数据集中令人感兴趣的频繁出现的模式、关联和相关性。
Clearlovekui9·2024-01-24 18:19

从零开始学python第二版_从零开始学Python数据分析与挖掘-从零开始学Python数据分析与挖掘第二版pdf下载电子版-精品下载...

数据分析与挖掘第二版以Python3.7版本作为数据分析与挖掘实战的应用工具，从Python的基础语法开始，陆续介绍有关数值计算的numpy、数据处理的pandas、数据可视化的matplotlib和数据挖掘的
weixin_39874366·2024-01-24 17:58

datawhale 大模型学习 第五章-模型训练

一、目标函数今天要讨论的是以下三种模型结构：Decoder-only模型：例如，GPT-3，单向上下文嵌入，在生成文本时一次生成一个tokenEncoder-only模型:例如，BERT,利用双向上下文注意力生成embedingEncoder-decoder模型：例如，T5,利用双向上下文编码，利用单向上下文生成文本最终结果就是将token序列映射为一个Embedding向量其中：L:代表文本长度
fan_fan_feng·2024-01-24 16:20

题史甥画卷后

天池山人徐渭书于葡萄最深处。图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App
水乡醉客·2024-01-24 14:07

ID3, C4.5和CART的异同点

ID3,C4.5和CART都是决策树算法，它们在数据挖掘和机器学习中被广泛应用。下面是它们的一些异同点：相同点：都是用于构建决策树的算法，可以用于分类和回归问题。
今天也要加油丫·2024-01-24 11:35

人工智能是做什么的

此外，他们还需要了解自然语言处理、数据挖掘和图像处理等领域的知识，以便应用到实际任务
人工智能技术与咨询·2024-01-24 10:49

日更73｜你的工作，会被人工智能取代吗？

数据挖掘就是从已
飛妃1224·2024-01-24 08:21

DW大模型理论基础 第二章 大模型的能力

大模型的能力参考链接：https://github.com/datawhalechina/so-large-lm/tree/mainGPT-3——这个具有代表性的⼤型语⾔模型的能⼒值得我们探讨。
LucyFang2020·2024-01-24 08:49

第五章：大模型的数据

参考链接：https://github.com/datawhalechina/so-large-lm/tree/main一、大语言模型背后的数据⼤型语⾔模型是在"原始⽂本"上进⾏训练的。
LucyFang2020·2024-01-24 08:49

第十一章：大模型之Adaptation

参考链接：https://github.com/datawhalechina/so-large-lm/tree/main1引言为什么需要Adaptation?
LucyFang2020·2024-01-24 08:45

【时间序列篇】基于LSTM的序列分类-Pytorch实现 part1 案例复现

对于序列分类任务，常用的思路有两种：1、原理统计相关，分解序列的相关性质研究规律（人工设计特征，再分类）2、数据挖掘
钟的子期·2024-01-24 07:44

天池

天池这个词，听听就很美。天池卧于天山下，像一滴碧绿的眼泪。那碧绿的眼泪，会沁入到人们的骨髓里。眼里看池，耳旁过风，在山的背后，阳光挂出了一道绮丽的金帘。山光水色之间有千柔百媚，举手投足之间有千思百念。
冰夫·2024-01-24 06:13

数据挖掘笔记1

课程：清华大学-数据挖掘：理论与算法（国家级精品课）_哔哩哔哩_bilibili一、LearningResources二、Data数据是最底层的一种表现形式。数据具有连续性。
幽径微澜·2024-01-24 05:05

肿瘤分析数据挖掘及信息解读

肿瘤基础特点：疾病，无限增殖基因相关细胞进化过程中发展异常，突变积累概念：germlinemutation:生殖细胞突变somaticmutation:体细胞突变，不可遗传drivermutation关键突变passengermutation无关紧要二次打击学说：生殖细胞和体细胞突变双重打击引发，体细胞积累起关键。所以后续主要是以体细胞突变研究为主。癌症基因组研究趋势：小样本WES——大样本mul
生物信息与育种·2024-01-24 04:27

代码+视频--NHANES数据(复杂调查数据)亚组交互函数1.6尝鲜版（P for interaction）发布---用于一键生成交互效应表

在SCI文章中，交互效应表格（通常是表五）能为文章锦上添花，增加文章的信服力，增加结果的可信程度，还能进行数据挖掘。
天桥下的卖艺者·2024-01-23 07:58

R语言简介

1.R语言R语言是一种数学编程语言，主要用于统计分析、绘图和数据挖掘。2.R语言特点免费、开源，兼容性好（Windows、MacOS或Linux)。
学计算机的·2024-01-23 07:57

数据分析的理念、流程、方法、工具（上）

不论是互联网行业，还是零售业、制造业等，各行各业都在依托互联网大数据（数据采集、数据存储、数据处理、数据挖掘、数据分析、数据呈现）实现企业价值。
学掌门·2024-01-23 07:38

分享行政检察院法律监督模型的构建价值和运用范式

在数字化时代背景下，行政检察监督办案要深入推进检察大数据战略，推动办案模式从“个案为主、数量驱动”向“类案为主、数据赋能”转变，通过数据分析、数据碰撞、数据挖掘发现治理漏洞或者监督线索，依法能动履行行政检察监督职责
泰迪智能科技·2024-01-23 07:18

图像取证:源识别和伪造检测(Image Forensics: source identification and tampering detection) 续2

xizero00常熟理工学院(CSLG)下一代互联网实验室NGIL在翻译的过程中遇到很多不懂的知识点，同时也恶补了相关的知识，包括《数字图像处理》，《统计学习基础》，《机器学习》TomMitchell,《数据挖掘
c2a2o2·2024-01-23 06:57

计算机毕业设计 基于SpringBoot的律师事务所案件管理系统的设计与实现 Java实战项目 附源码+文档+视频讲解

博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。
IT学长编程·2024-01-23 06:29

Python爬虫的9个具体应用场景案例分析与具体应用。

文章目录前言一、新闻采集二、数据挖掘三、网站监测四、舆情分析五、爬虫定制化开发六、数据采集与处理七、网络安全八、网络营销九、自动化测试关于Python技术储备一、Python所有方向的学习路线二、Python
只存在于虚拟的King·2024-01-23 04:04

神经网络 推荐

数据挖掘工程师一般都做什么？数据挖掘工程师是做什么的？数据挖掘，从字面上理解，就是在数据中找到有用的东西，哪些东西有用就要看具体的业务目标了AI爱发猫www.aifamao.com。
「已注销」·2024-01-23 00:25
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他