数据清理

【Java版】接入支付宝当面付功能-沙箱环境

为保证沙箱稳定，沙箱环境测试数据会进行定期数据清理。Beta测试阶段每周日中午12点至每周一中午12点为维护时间。在此时间内沙箱环境部分功能可能会不可用。配置支付宝沙箱应用环
ZeroOne01·2018-06-13 15:47

阿里云RDS PostgreSQL时序数据的优化

PostgreSQL的一个优势是它可以通过多种方式进行优化，例如数据合并和数据清理。而数据合并和数据清理在一些应用场景下是必需的。
资深架构师·2018-06-08 22:47

机器学习与量化交易项目班 [从零搭建自动交易系统]

在自动交易中的应用简介第二课量化交易系统综述知识点1：回测，自动交易，策略建模，常见平台使用第三课搭建自己的量化数据库知识点1：软件需求，数据获取方式，数据存储方式实战项目：金融数据的存储，读取第四课用Python进行金融数据分析知识点1：数据清理与特征选择实战项目
meixilbj·2018-06-08 12:27

excel交叉表的数据清理

之前在做一个excel的简单教程的时候：B站的一个Excel简单教程当时演示应该把交叉表（图1）转换成数据表格（图2）的形式。但是在excel里没有直接实现这个需求的函数，R的tidyr包有一个spread可以实现这功能，但是，毕竟是R。python同样可以实现这个需求，借助openpyxl这个包和excel互动，然后用一点代码就可以完成了：fromopenpyxlimportWorkbook,l
beneon·2018-06-02 00:00

机器学习项目构建

前言构建机器学习项目，包含主要的学习步骤：1、数据清理和格式化；2、探索性数据分析；3、特征工程和特征选择；4、在性能指标上比较学习模型；5、对最佳模型执行超参数调整；6、解释模型结果；7、结果分析；从数据清理
Hirotransfer·2018-05-28 22:54

机器学习新手必看：Jupyter Notebook入门指南

人工智能头条（公众号ID：AI_Thinker）【人工智能头条导读】JupyterNotebook是一个Web应用程序，便于创建和共享文学化程序文档，支持实时代码、数学方程、可视化和Markdown，其用途包括数据清理和转换
csdn人工智能头条·2018-05-28 18:44

数据预处理基础（—）

数据预处理方法：数据清理，数据集成，数据变换，数据归约。数据预处理意义：数据和特征决定了机器学习的上限，而模型和算法只是
JayKing_csdn·2018-05-17 16:27

8.谷歌《机器学习速成课程》笔记---表示法

数据清理缩放特征值–好处：帮助梯度下降法更快速地收敛。帮助模型为每个特征确定合适的权重。如果没有进行特征缩放，则模型会对范围较大的特征投入过多精力。帮助避免“NaN陷阱”。
Fuego801·2018-05-13 19:31

用编程方法进行 数据清理

用编程方法进行数据清理编程清理步骤分三步:1.Defining2.Coding3.Testing清理之前先将数据备份：df_clean=df.copy()注意：不能只简单地赋值：df_clean=df。
有志青年之遵守常识·2018-05-11 16:18

清理mysql-bin日志

作用：1：数据恢复2：主从服务器之间同步数据清理办
hahhahahahah·2018-05-10 11:03

python中Jupyter Notebook库的安装及安装失败的解决方法学习

用途包括:数据清理和转换，数值模拟，统计建模，机器学习等等。二、Jupyternotebook的安装1）在你
一路繁花绽放·2018-05-09 15:46

糖尿病临床试验 数据分析

糖尿病临床试验数据分析糖尿病临床试验数据分析一、项目背景1.1胰岛素工作原理1.2临床试验及其指标1.3医疗数据常见问题及原因二、数据评估(Assess)2.1质量评估(Quality)目测评估编程评估2.2整洁度评估（Tidness）三、数据清理
有志青年之遵守常识·2018-05-06 15:00

python数据探索

原则正态分布情况下，小概率事件为异常值不服从正太分布的，可以用原离平均值多少倍标准差来分析（3）箱线图分析使用describe()描述主要数据探索函数1.Pandas常用函数总结导入数据导出数据查看、检查数据数据选取数据清理
冷幽篁·2018-04-19 14:00

mysql单表备份和恢复

说明：此脚本经测试可用于数据清理，对单表进行清理，清理出问题，可以回退进行单表的恢复。脚本特点：脚本1用于单表备份脚本2用于对单表进行数据恢复并增加完善的日志记录功能。
曹之进·2018-04-16 22:59

数据预处理

如同一个属性在不同表中的名称不同）、量纲不同如果直接在这些未经处理的数据上进行分析，结果不一定准确，效率也可能较低需要使用清理、集成、变换、归约等预处理方法改善数据质量，从而提高数据分析的效率与质量主要介绍数据清理
necther·2018-04-11 11:03

大型商场销售预测

3.数据清理-输入数据中的缺失值并检查异常值4.特征工程-修改现有变量并创建新的分析5.模型建立-
彭健平6点30·2018-04-05 16:59

oracle 查询重复数据并且删除, 只保留一条数据

数据库操作中，经常会因为导数据造成数据重复，需要进行数据清理，去掉冗余的数据，只保留正确的数据一：重复数据根据单个字段进行判断1、首先，查询表中多余的数据，由关键字段（name）来查询。
把每天当成生命中的最后一天·2018-03-26 14:39

Python爬虫实战：分析《战狼2》豆瓣影评

目标总览主要做了三件事：抓取网页数据清理数据用词云进行展示使用的python版本是3.5.一、抓取网页数据第一步要对网页进行访问，python中使用的是urllib库。
hang·2018-03-26 12:37

远程访问jupyter notebook

用途包括：数据清理和转换，数值模拟，统计建模，机器学习等等。一般Anaconda安装包中会自带jupyter。安装好以后直接输入jupyternotebook命令便可以在浏览器中使用。
Jerry不认识Tom·2018-03-04 01:49

Jupyter notebook初探

其用途包括数据清理和探索、可视化、机器学习和大数据分析(摘之百度)notebook的想法是直接在代码旁边展现描述性的文字,而不是另外起一个文档记录说点题外话：最近，文字表达化编程
Em_dark·2018-01-24 20:23

数据挖掘学习路线【转知乎某人的观点】

---------------------------浓缩精华版--------------------------------第一步：数据准备：（70%时间）获取数据（爬虫，数据仓库）验证数据数据清理
dinner1984·2018-01-19 15:45

数据挖掘工程师知识集

数据挖掘的技术过程：数据清理（消除噪音或不一致数据）数据集成（多种数据源可以组合在一起）数据选择（从数据库中提取与分析任务相关的数据）数据变换（数据变换或统一成适合挖掘的形式；如，通过汇总或聚集操作）数据挖掘
chs007chs·2018-01-19 00:00

数据预处理_数据清理

有大量的数据预处理技术：--数据清理：可以用来清楚数据中的噪声，纠正不一致。--数据集成：将数据由多个数据源合并成一个一致的数据存储，如数据仓库。
远有青山·2018-01-11 15:53

数据挖掘工程师知识集锦

全栈工程师开发手册（作者：栾鹏）python开发大全、系列文章、精品教程数据挖掘的技术过程：数据清理（消除噪音或不一致数据）数据集成（多种数据源可以组合在一起）数据选择（从数据库中提取与分析任务相关的数据
数据架构师·2017-12-26 20:02

Kafka日志及Topic数据清理

由于项目原因，最近经常碰到Kafka消息队列拥堵的情况。碰到这种情况为了不影响在线系统的正常使用，需要大家手动的清理KafkaLog。但是清理KafkaLog又不能单纯的去删除中间环节产生的日志，中间关联的很多东西需要手动同时去清理，否则可能会导致删除后客户端无法消费的情况。在介绍手动删除操作之前，先简单的介绍一下Kafka消费Offset原理。一、Kafka消费Offset在通过Client端消
qiaqia609·2017-12-26 10:45

最详尽使用指南：超快上手Jupyter Notebook

它的用途包括：数据清理和转换、数值模拟、统计建模、数据可视化、机器学习等等。它具有以下优势：可选择语
DataCastle·2017-12-25 11:54

最详尽使用指南：超快上手Jupyter Notebook

它的用途包括：数据清理和转换、数值模拟、统计建模、数据可视化、机器学习等等。它具有以下优势：可选择语
DataCastle·2017-12-25 11:54

数据挖掘（清华公开课）

数据挖掘常用算法分类算法决策树ID3C4.5聚类K-mean算法DBSCAN回归线性回归多项式回归关联规则时间序列分析文本挖掘Web挖掘数据挖掘流程数据清理（消除噪声和不一致的数据）数据集成（多中数据源可以组合在一起
alicelmx·2017-12-13 17:20

数据挖掘-引论

一、什么是数据挖掘数据挖掘指的是从大量数据中挖掘有趣的模式或知识的过程：简称数据中的知识发现（KDD），有如下的迭代序列组成：（1）数据清理（清除噪声和删除不一致的数据）（2）数据集成（将多种数据源组合在一起
FreeLuo·2017-12-08 04:34

方正乐家盒子怎么恢复出厂设置? 乐家盒子恢复出厂设置的方法

乐家连接电视2、打开电视，将画面调节到盒子界面3、乐家盒子接通电源，同时快速按遥控器的左键，进入盒子的recovery模式4、按遥控器的下键，选择wipedata/factoryreset，点击确定5、进入数据清理选择确认界面
佚名·2017-11-16 09:39

Ubuntu安装Jupyter Notebook教程

用途包括：数据清理和转换，数值模拟，统计建模，机器学习等等。二.安装步骤环境：Docker(17.04.0-ce)、镜像Ubuntu(16.04.3)1.更新软件列
faramita2016·2017-10-18 09:11

java定时任务实现的几种方式

摘要：在开发测试工具的应用后台，经常听到同事说要做个定时任务把做日志处理，或者数据清理，包括做些复杂的业务计算逻辑，在选择定时任务的时候，怎么能够快速实现，并且选择一种更适合自己的方式呢？
Leon04095·2017-10-13 09:48

iOS逆向实践ASO之【数据清理】：1、Accounts帐号信息的分析以及清除(应用场景：ASO) 2、Keychain Dumper (keychain数据的读取)

文章目录前言I、Accounts3.sqlite1.1表：ZACCOUNT1.2表：ZACCOUNTTYPEII、Accounts3.sqlite-shmIIIKeychainDumper3.1iOS系统的keychain存储类型3.2使用theos进行开发,获取数据3.2.1build3.2.2FixforrecentiOS11JBs3.3使用monkeydev进行开发,获取数据seelaso前
#公众号：iOS逆向·2017-10-10 18:16

angular2学习 之 组件

Constructor:构造器初始化OnChanges:触发数据变化钩子OnInit:组件初始化(处理业务逻辑)OnChanges:运行期间触发数据变化钩子(n多次触发)OnDestroy:组件销毁前(数据清理
Flying_Leaves·2017-09-16 16:31

Python urllib爬取拉勾网职位信息

之所以选择拉勾网作为本项目的数据源，主要是因为相对于其他招聘网站，拉勾网上的岗位信息非常完整、整洁，极少存在信息的缺漏，并且几乎所有展现出来的信息都是非常规范化的，极大的减少了前期数据清理和数据整理的工作量
YoLean·2017-09-04 16:21

hive数据表清洗

今天分享一下用map-reduce做数据清理并且将HDFS的文件导入到hive表中的操作，首先我所统计的信息中的字段user_id和subject_id在hive表中是
小鱼人儿·2017-08-02 20:45

RocketMQ（二）——集群部署

多Slave模式异步复制多Master多Slave模式同步双写物理部署结构双主集群部署服务器环境配置IP映射上传解压创建存储路径修改配置文件替换成以下内容修改日志配置文件修改启动脚本参数启动部署管控台数据清理
张连海·2017-08-02 11:02

python爬虫实战一：分析豆瓣中最新电影的影评

目标总览主要做了三件事：抓取网页数据清理数据用词云进行展示使用的python版本是3.5.运行环境：jupyernotebook，如在其他环境下运行报错了，请查看评论区的讨论，里面有一些解决办法。
hang·2017-08-02 00:00

关于Redis的数据清理

我们数据平台中有使用Redis来给线上提供低延时（20毫秒以内）的高并发读写请求，其中最大的Redis使用了阿里云的Redis集群（256G），存储的记录超过10亿，Key的有效期设置为15天，每天写入的记录大概5000万左右，QPS大概在6万左右。由于过期Key的产生速度大于Redis自动清理的速度，因此在Redis中会有大量过期Key未被及时清理。为什么有过期的Key未被清理呢？这个得先熟悉一
[email protected]·2017-07-26 15:00

jupyter配置scala和Spark学习环境

用途包括：数据清理和转换，数值模拟，统计建模，机器学习等等在学习Python的时候无意见
堡垒-93·2017-06-15 18:55

数据挖掘的一般过程

数据预处理提高数据质量：准确性、完整性和一致性，包括数据清理、数据集成、数据规约和数据变换方法。(1)数据清
evillist·2017-06-15 10:58

Mac数据清理软件cleanmymac好用吗

作为一款非常好用的mac清理内存软件，cleanmymac可以很好的帮助我们清理每一台Mac在长时间使用之后所产生一些垃圾文件，从而释放出我们宝贵的内存。图1：苹果电脑清理接下来就为大家介绍一下这款软件具体清理功能。智能清理在我们选择“智能清理”之后，CleanMyMac会自动检查系统垃圾、照片垃圾、邮件附件、iTunes垃圾、废纸篓、大型和旧文件这几类中存在的垃圾文件，检查完毕之后会在清理项目中
mym10·2017-06-07 20:25

如何提高你的数据分析能力？

一、数据分析的一般步骤第一步：数据准备（80%时间）获取数据(爬虫，数据仓库)验证数据数据清理(缺失值、孤立点、垃圾信息、规范化、重复记录、
葡萄喃喃呓语·2017-06-04 20:04

Kafka某topic无法消费解决方案&Kafka某Topic数据清理

由于项目原因，最近经常碰到Kafka消息队列某topic在集群宕机重启后无法消费的情况。碰到这种情况，有三步去判断原因所在：stepA：如果用kafka串口（即console-consumer）是可以正常消费该topic，则排除kafka集群出现故障stepB：若平台业务能正常消费其他topic的消息，则排除平台业务代码逻辑问题stepC：不到万不得已，则只能手动删除kafka的对应topic的L
scuter_victor·2017-05-25 22:49

Jupyter的安装和使用（windows）

用途包括：数据清理与转换，数值模拟，统计建模，机器学习等等。
HevenYin·2017-05-09 10:32

阅读岛第二天打卡

未能实践数据清理、抽样、计算。明天打算怎么做：
放松身心·2017-04-19 10:38

Spark Streaming 数据清理机制

SparkStreaming数据清理机制时间2016-05-1110:29:5451CTO原文http://developer.51cto.com/art/201605/511024.htm主题SparkStreamingSparkStreaming
XiaoGuang-Xu·2017-03-24 23:50

Vbs 清理备份数据-保留数据量

清理备份数据-保留数据量我们前面文章介绍了，通过vbs脚本对文件进行压缩备份，但是通过计划任务备份的话，备份的数据会越来越多，对于我们的磁盘空间利用来说比较浪费，所以我们又通过以下脚本进行判断，将多余的备份数据清理
高文龙·2017-03-18 16:51

数据预处理—剔除异常值，平滑处理，标准化(归一化)

数据预处理的主要任务如下：（1）数据清理：填写空缺值，平滑噪声数据，识别，删除孤立点，解决不一致性（2）数据集成：集成多个数据库，数据立方体，文件（3）数据变换：规范化（消除冗余属性）
IT界的小小小学生·2017-03-06 10:32

数据分析之旅（一）

数据分析过程提出问题数据再加工（包括数据采集和数据清理）数据探索(培养直觉，找出数据模式)–>总结，进行预测–>与他人交流结果（博客、论文、电子邮件、PPT、面谈）并且所有的过程都可能回到第一个阶段：提出问题数据采集的方式
y4ung·2017-02-11 16:48
上一页 16 17 18 19 20 21 22 23 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他