E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
PowerBI:数据清洗
2023-02-03:上海某私募基金实习的第三天心得纪录
这些工作让
数据清洗
和分析的能力更加熟练。工作虽然安逸,但是自我感觉提升空间不大,而且挺无聊的。第三第四份实习就是在私募基金做量化研究,一家在杭州一家在上海,主要做股票的因子策略,全流程基本都有参与了。
aceCrasher
·
2024-01-05 10:20
数据分析系统有哪些
它能够集中存储来自多个数据源的原始数据,并进行
数据清洗
和转换,便于后续的分析工作。常见的数据仓
qingyunliushuiyu
·
2024-01-05 10:52
BI
信息可视化
数据仓库
BI
业务智能系统
JVS规则引擎和智能BI(自助式数据分析)1.3新增功能说明
规则引擎更新功能新增:1、数据源新增Excel数据源;Excel数据源功能允许用户将Excel文件作为数据源导入,并进行
数据清洗
、转换和处理,以实现数据的集成、可视化和深度分析,为决策提供强大支持,同时保持良好的交互性和灵活性
jonyleek
·
2024-01-05 08:20
数据分析
大数据
数据挖掘
java
如何解决大模型的[幻觉]问题?
下面介绍几种可能的解决方法:1.
数据清洗
:确保训练数据集的质量和准确性。数据集中存在错误或噪音可能会导致模型学习到错误的模式或产生不合理的输出。
中微子%5
·
2024-01-05 05:39
数据结构
神经网络
地理空间分析2——优化地理空间分析的关键一步:深入探讨
数据清洗
和预处理
数据清洗
和预处理是确保地理空间数据集合适用于分析的基本步骤。本文将深入研究
数据清洗
在地理空间分析中的重要性,并介绍在Python中执行
数据清洗
的基本流程。
theskylife
·
2024-01-04 12:21
数据分析
python
数据挖掘
数据分析
地理空间分析
mllib可扩展学习库java api使用
mllib可扩展学习库javaapi提供了一系列的数据处理工具,包括
数据清洗
,缺失值填充,特征缩放和编码等。下面是一个使用m
卖兔子的胡萝卜zz
·
2024-01-04 08:43
API接口开发系列
mllib
学习
java
python&Pandas三:
数据清洗
和预处理
让我们通过几个案例来学习如何使用Pandas进行
数据清洗
和预处理,包括处理缺失值、异常值,进行数据转换和规范化,以及处理重复数据等操作。
西玥
·
2024-01-04 05:31
Pandas
Python
python
pandas
数据挖掘
数据分析之数据处理
数据处理包括
数据清洗
、数据抽取、数据合并、数据计算、数据分组等操作。在进行数据处理之前,先要了解数据变量。文/黄成甲数据变量变量就是我们常说的字段,在数据库中,称为字段;在统计学中,称为变量。
黄成甲
·
2024-01-04 02:57
Python数据分析之Pandas的数据加载与预处理
二、
数据清洗
数据加载与预览1、去除/填充有缺失的数据2、去除/修改格式错误或内容错误的数据3、去除/修改逻辑错误的数据4、去除不需要的数据5、关联性验证三、Pandas简介Pandas库是一个基于NumPy
shy014
·
2024-01-04 00:59
python
数据分析
pandas
学习大数据的第43天(python篇)——学习python第3天
的科学计算生态圈NumPy处理一些多维矩阵Scipylibrary主要是积分运算,优化以及图形Matplotlib画图(二维图形)IPythonSympy用的不多pandas主要是数据分析,数据处理(比较重要)
数据清洗
三岁清风
·
2024-01-03 21:18
maven
spring
mysql
python
尝试使用深度学习识别百度旋转验证码
2.2图像矫正接下来对采集的数据进行人工校正2.3
数据清洗
(1)对数据进行进行旋转,达到增加数据量的目的。(2)对数据进行灰度化处理,将三维图片降为二维。(
Dxy1239310216
·
2024-01-03 17:40
验证码识别
深度学习
人工智能
爬虫
python
图像处理
大数据电商公司的卓越之路及api如何应用
数据处理能力:数据公司需具备高效的数据处理能力,包括
数据清洗
、整合、分析和可视化等方面。通过先进的数据处理技术,如大数据分析、云计算等,数据公司能够迅速处理海量数据
代码之路无极限
·
2024-01-03 17:39
电商api
大数据
PowerBI
DAX FILTER多条件过滤
FILTER多条件过滤measure=CALCULATE(DISTINCTCOUNT('talbe'[column]),FILTER('talbe','talbe'[column]匹配不等于FILTER('talbe','talbe'[column]=FALSE())//=匹配等于)
青山白衣
·
2024-01-03 10:10
使用Java和代理IP抓取天眼查公开失信人员信息
目录一、引言二、准备工作三、抓取数据四、使用代理IP五、数据存储与分析六、
数据清洗
与处理七、数据利用与商业应用八、总结一、引言随着互联网的发展,数据已经成为企业决策的重要依据。
小小卡拉眯
·
2024-01-03 10:10
爬虫小知识
python
开发语言
数据治理之主数据管理
文章目录一、主数据管理概述什么是主数据什么是主数据管理主数据管理的意义打破孤岛,提升数据质量统一认知,提升业务效率集中管控,提升管理效能数据驱动,提升决策水平二、主数据管理方法摸家底建体系接数据数据接入
数据清洗
主
数据清洗
规范主
数据清洗
操作数据分发抓运营三
4935同学
·
2024-01-03 08:39
数据治理
数据仓库
大数据
ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的高级应用
ChatGPT、LLaMA、Gemini、DALL·E、Midjourney、StableDiffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮,可以面向科研选题、思维导图、
数据清洗
Teacher.chenchong
·
2024-01-03 06:47
gpt
人工智能
AI大模型引领未来智慧科研暨ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的高级应用
ChatGPT、LLaMA、Gemini、DALL·E、Midjourney、StableDiffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮,可以面向科研选题、思维导图、
数据清洗
asyxchenchong888
·
2024-01-03 06:16
GPT
人工智能
chatgpt
python matplot绘制甘特图--Apple的学习笔记
当时就用numpy,pandas做
数据清洗
和后处理,当初也简单的接触了下matplot。对应python来说无非就是调用api就好了,只要找到api的参数的具体帮忙就知道了使用方法。
applecai
·
2024-01-03 04:22
【AI】大模型的偏见
目录一、大模型的偏见指什么二、大模型的偏见是怎么产生的三、大模型的偏见有什么危害四、如何减小和避免大模型的偏见4.1数据多样性和平衡:4.2
数据清洗
和预处理:4.3模型架构和算法选择:4.4引入反馈机制
giszz
·
2024-01-03 01:14
人工智能
学习笔记
人工智能
认识数据库
应用数据库进行数据的获取即处理的过程又可以分为业务理解、数据理解、
数据清洗
及信息输出(或数据输出)4个环节。
茶盏浮花
·
2024-01-02 17:21
大数据机器学习深入Scikit-learn:掌握Python最强大的机器学习库
的基本概述安装和配置如何安装Scikit-learn安装必要的依赖库Scikit-learn的主要特性强大的预处理功能众多的机器学习算法效果评估和模型选择可视化工具Scikit-learn的数据预处理
数据清洗
数据转换特征提取和特征选择
星川皆无恙
·
2024-01-02 11:28
机器学习与深度学习
大数据人工智能
自然语言处理
机器学习
python
大数据
人工智能
深度学习
scikit-learn
算法
学习小组Day6 学习R包--yu
fwx=1dplyr五个基础函数基础函数dplyr实用技能dplyr包主要用于
数据清洗
和整理https://blog.csdn.net/weixin_43213884/article/details/109480998
Iris09
·
2024-01-02 01:07
ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的高级应用
ChatGPT、LLaMA、Gemini、DALL·E、Midjourney、StableDiffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮,可以面向科研选题、思维导图、
数据清洗
Mr.靳靳477302280
·
2024-01-02 00:03
地学
gis
气象
人工智能
机器学习前的
数据清洗
(异常值检验,标准化处理,哑变量处理)
机器学习简介机器学习模型训练前,需要把原始数据进行预处理,并建立合适的特征工程。机器学习工作流程一般使用pandas库进行数据的清洗表堆叠importpandasaspdimportnumpyasnpdict1={'ID':[1,2,3,4,5,6,7,8,9],'System':['win10','win10',np.nan,'win10',np.nan,np.nan,'win7','win7'
开始King
·
2024-01-01 23:37
数据分析
python
数据挖掘
Python | 机器学习之
数据清洗
机器学习前的
数据清洗
(异常值检验,标准化处理,哑变量处理)Python|机器学习之
数据清洗
机器学习-基础概念-scikit-learn-数据预处理数据的标准化(离差标准化、log函数转换、atan函数转换
kongfanyu
·
2024-01-01 23:05
笔记
Python 成都二手房价数据分析 报告
经过
数据清洗
,使用随机森林、决策树、K-Means算法,对所获取的2万余条数据(链家网成都各区前10
小夕Coding
·
2024-01-01 13:25
python
数据分析
信息可视化
MDM主数据平台如何管理参考数据
MDM基础数据管理平台是进行清洗和治理企业的主数据,使企业的主数据具有唯一性、准确性、一致性、及时性,通过主数据
数据清洗
功能将错误数据和重复数据进行清洗,从而保证企业数据能够做到以上那几点,然后再分发至下游系统
数通畅联
·
2024-01-01 11:30
产品
主数据管理
数据治理
MDM如何配置数据审批功能
MDM基础数据平台是进行清洗和治理企业的主数据,使企业的主数据具有唯一性、准确性、一致性、及时性,通过主数据
数据清洗
功能将错误数据和重复数据进行清洗,从而保证企业数据能够做到以上那几点,然后再分发至下游系统
数通畅联
·
2024-01-01 11:28
产品文档
数据同步
数据审批
数据分发
详解python匹配问题
脏数据匹配一般数据建模步骤中,
数据清洗
耗时占比80%以上,因为现实中接触到的数据相当脏,无法直接简单的用pandas的merge函数解决。
Python_P叔
·
2024-01-01 11:30
python
开发语言
(毕设1)爬虫+mysql+flask+echarts实现网站数据可视化(附源码)
2.数据爬取2.1分析url,网页源码2.2编写代码2.3
数据清洗
3.数据存储3.1?
m0_66557301
·
2024-01-01 09:47
前端
html
npm
vue.js
前端
智慧园区物联综合管理平台之感知数据管理能力简述
物联管理平台感知数据管理主要包含对物联设备运行所产生实时资源数据的
数据清洗
、实时存储、归档计算、解析分析等功能。
shawn_song1212
·
2024-01-01 08:04
物联网
计算机毕业设计hadoop+spark+hive知识图谱酒店推荐系统 酒店数据分析可视化大屏 酒店爬虫 高德地图API 酒店预测系统 大数据毕业设计
流程:1.Python爬取去哪儿网全站旅游数据约10万+,存入mysql;2.使用pandas+numpy/hadoop+mapreduce对mysql中旅游数据进行
数据清洗
,使用高德API计算地理信息
计算机毕业设计大神
·
2024-01-01 06:52
【机器学习】快速入门!关于 Pandas 库的简介和常用方法整理
PandasPandas简介1.数据加载和存储加载数据:存储数据:2.
数据清洗
3.数据统计和汇总4.数据选择和过滤5.数据合并和连接6.时间序列处理创建时间序列数据:索引和选择:时间序列分析:时间序列可视化
SuasyYi
·
2024-01-01 06:58
笔记整理
机器学习
pandas
人工智能
Power BI 协作与共享1 | 如何成为Power BI 管理员
序言:先来个废话,概念
PowerBI
管理是指管理组织范围内的设置,这些设置控制
PowerBI
的工作方式。分配了管理员角色的用户负责配置、监视和预配组织资源。详情请戳:什么是
PowerBI
管理?
阿白_YCH
·
2023-12-31 21:15
电商大数据商品采集:阿里巴巴1688电商网站货源产品信息采集
风险预测:高效信息采集和
数据清洗
,及时应对系统风险。助您
大数据girl
·
2023-12-31 11:48
大数据
人工智能
json
python
sql
php
c++
ETL
数据清洗
ETL,是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取(Extract)、转换(Transform)、加载(Load)至目的端的过程。ETL一词较常用在数据仓库,但其对象并不限于数据仓库在运行核心业务MapReduce程序之前,往往要先对数据进行清洗,清理掉不符合用户要求的数据。清理的过程往往只需要运行Mapper程序,不需要运行Reduce程序。WebL
栈溢出了
·
2023-12-31 09:26
Hadoop
etl
数据仓库
数据库
机器学习(二) -- 数据预处理(2)
系列文章目录机器学习(一)--概述机器学习(二)--数据预处理(1-3)未完待续……目录系列文章目录前言三、【
数据清洗
】1、缺失数据的检测与处理1.1、检测与统计1.2、处理1.1.1、删除缺失值(慎用
₫从心
·
2023-12-31 06:18
人工智能
#
机器学习
机器学习
人工智能
k8s学习 — (运维)第十一章 ELK 日志管理
k8s学习—(运维)第十一章ELK日志管理※各章节重要知识点1ELK组成2集成ELK2.1部署es搜索服务2.2部署logstash
数据清洗
2.3部署filebeat数据采集2.4部署kibana可视化界面
西木Qi
·
2023-12-31 05:10
k8s
kubernetes
Power BI - 5分钟学习合并查询
每天5分钟,今天介绍
PowerBI
合并查询。什么是合并查询?合并查询操作基于一列或多列的匹配值将两个现有表联接在一起。可以选择使用不同类型的联接,具体取决于所需的输出。
牛猫Data
·
2023-12-31 01:52
Power
BI-每天学习5分钟入门
powerbi
microsoft
数据分析
数据可视化
Power BI - 5分钟学习追加查询
每天5分钟,今天介绍
PowerBI
追加查询什么是追加查询?追加操作是通过将一个或多个表的内容创建一个新表,通过聚合所有表中的列标题,为新表创建架构。
牛猫Data
·
2023-12-31 01:21
Power
BI-每天学习5分钟入门
powerbi
数据分析
microsoft
数据可视化
Power BI - 5分钟学习增加条件列
每天5分钟,今天介绍
PowerBI
增加条件列。什么是增加条件列?简单理解,可以根据表中某列设置一个或者多个条件,判定的结果会生成一个新列。
牛猫Data
·
2023-12-31 01:51
Power
BI-每天学习5分钟入门
powerbi
microsoft
数据分析
数据可视化
Power BI - 5分钟学习增加索引列
每天5分钟,今天介绍
PowerBI
增加索引列。什么是增加索引列?增加索引列就是向表中添加一个具有显式位置值的新列,一般从0或者从1开始。
牛猫Data
·
2023-12-31 01:51
Power
BI-每天学习5分钟入门
powerbi
数据分析
数据可视化
microsoft
Power BI - 5分钟学习列填充值
每天5分钟,今天介绍
PowerBI
在列填充值什么是列填充值?可以向上填充和向下将列中的空值,填充为本列中最后一个非空值。举例:以【Product】表为例,表中"Product"列有合并单元格。
牛猫Data
·
2023-12-31 01:51
Power
BI-每天学习5分钟入门
powerbi
数据分析
数据可视化
microsoft
Power BI - 5分钟学习拆分列
每天5分钟,今天介绍
PowerBI
拆分列功能。什么是拆分列?有时导入
PowerBI
的数据表中,某列内容都包含同样的特殊字符如@/&/-/_等,可以利用这个特殊字符进行拆分列的操作,获得我们想要的信息。
牛猫Data
·
2023-12-31 01:50
Power
BI-每天学习5分钟入门
powerbi
microsoft
数据分析
数据可视化
如何修改Power BI Desktop界面为中文?
今天有同事询问如何才能把英文版的
PowerBI
Desktop切换为中文。
牛猫Data
·
2023-12-31 01:50
Power
BI
powerbi
数据分析
数据可视化
microsoft
Power BI - 5分钟学习透视列
每天5分钟,今天介绍
PowerBI
透视列功能什么是透视列?透视列就是把行数据转换成列数据,也就是大家在工作中常说的'行转列'。
牛猫Data
·
2023-12-31 01:50
Power
BI-每天学习5分钟入门
powerbi
数据分析
microsoft
数据可视化
Power BI - 5分钟学习合并文件
每天5分钟,今天介绍
PowerBI
合并文件什么是合并文件?合并文件就是将具有相同架构的多个文件合并到单个逻辑表中。如果要合并同一文件夹中的所有文件时,此功能非常有用。
牛猫Data
·
2023-12-31 01:18
Power
BI-每天学习5分钟入门
powerbi
microsoft
数据分析
数据可视化
对采集到的温湿度数据,使用python进行
数据清洗
,并使用预测模型进行预测未来一段时间的温湿度数据。
使用Python对传感器采集到的数据进行
数据清洗
和预测未来一段时间的温湿度数据,您可以按照以下步骤进行操作:导入必要的库importpandasaspdimportnumpyasnpfromsklearn.model_selectionimporttrain_test_splitfromsklearn.linear_modelimportLinearRegression
澂玙
·
2023-12-30 23:22
python
机器学习
开发语言
物联网
ChatGPT绘制全球植被类型分布图、生物量图、土壤概念图、处理遥感数据并绘图、病毒、植物、动物细胞结构图
ChatGPT、LLaMA、Gemini、DALL·E、Midjourney、StableDiffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮,可以面向科研选题、思维导图、
数据清洗
思考的小猴子
·
2023-12-30 19:04
农业
环境
chatgpt
人工智能
Python数据挖掘与机器学习实践技术应用
掌握Python编程的基础知识与技巧、特征工程(
数据清洗
、变量降维、特征选择、群优化算法
思考的小猴子
·
2023-12-30 19:34
机器学习
遥感
python
数据挖掘
机器学习
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他