E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
时序数据异常检测
数据挖掘导论(一)
本书涵盖:数据预处理、可视化、预测建模、关联分析、聚类和
异常检测
绪论什么是数据挖掘数据挖掘是在大型数据存储库中,自动地发现有用信息的过程。数据挖掘技
^思无邪
·
2020-07-27 21:22
(数据挖掘)如何用大数据做用户异常行为分析
▼▍什么是
异常检测
?
异常检测
是在数据中找到不符合“正常”的行为模式的过程。
LT_Ge
·
2020-07-27 17:23
大数据
各类数据库使用场景比较
onlineanalyticalprocess)场景,支持各种数据统计分析场景;单表查询能力性能超过其他类型OLAP数据库;缺陷:没有完整的事务支持;修改与删除数据能力不足;可以构建物化视图,进行数据预聚合;Druid适合OLAP场景;
时序数据
库
菜鸟棒
·
2020-07-27 17:32
存储
(数据挖掘)如何用大数据做用户异常行为分析
▼▍什么是
异常检测
?
异常检测
是在数据中找到不符合“正常”的行为模式的过程。
LT_Ge
·
2020-07-27 17:44
数据挖掘
使用Thanos实现Prometheus指标联邦
Prometheus将其指标(metrics)作为
时序数据
库存储在本地磁盘上,因此Prometheus的本地存储会受到磁盘大小以及所能保留的指标数量的制约
RancherLabs
·
2020-07-27 17:09
kubernetes
监控工具
监控
prometheus
基于docker搭建Prometheus
prometheus本质上是一个
时序数据
库,再配以alermanagerpushgateway等子组件,便可搭建成一个监控平台,目前已经是比较主流的做法,本文主要介绍一下此组件的简单使用和可以应用到的场景
JhonSmith
·
2020-07-27 17:06
prometheus
Simulink中从Workspace中读取
时序数据
的方法
1.首先,我从adams得到是时长5秒的500组加速度数据,将其存为txt格式。并放入matlab路径中,其第一列为时间序号,234列为三轴的加速度数据。2.在workspace中使用textread函数读取文本中的数据到自定义变量A中。A=textread('Acc-3.txt');B=A(:,2:4)/1000;A(:,2:4)=B;//Adams中得到的数据以毫米为单位,这里将数据转换成米得
云昇ys
·
2020-07-27 16:31
matlab
simulink
如何基于 Flink 与 TensorFlow 构建实时智能
异常检测
平台?
本文整理自携程实时计算负责人潘国庆在QCon全球软件开发大会(北京站)2019的演讲,他介绍了携程如何基于Flink与TensorFlow构建实时智能
异常检测
平台,以解决规则告警系统准确率低、时效性低、
pythoncxy
·
2020-07-27 16:01
Python
大规模场景下 Prometheus 的优化手段
大规模场景下Prometheus的优化手段概述Prometheus几乎已成为监控领域的事实标准,它自带高效的
时序数据
库存储,可以让单台Prometheus能够高效的处理大量的数据,还有友好并且强大的PromQL
byte
·
2020-07-27 16:17
prometheus
精读《SQL vs Flux》
1引言对
时序数据
的处理有两种方式,如图所示,右边是SQL,左边是自定义查询语言,也称为NoSQL,处于中间地带的称为SQL-LIKE语言。
黄子毅
·
2020-07-27 16:25
sql
数据挖掘导论课后习题答案 第一章
1.需要抓住数据挖掘任务两大类任务以及四种主要数据挖掘任务的特点:预测任务、相关分析、聚类分析、
异常检测
。(a)并不是数据挖掘任务,只是简单的数据库查询工作。
Catherine Lan
·
2020-07-27 16:37
数据挖掘
时序数据
库
【引言】
时序数据
库,又名时间序列数据库。
时序数据
库会成为新趋势。
天府云创
·
2020-07-27 15:04
新型
时序数据
库TimelineDB在风电监控应用中的技术优势
风能是一种清洁而稳定的新能源,在环境污染和温室气体排放日益严重的今天,风力发电作为全球公认可以有效减缓气候变化、提高能源安全、促进低碳经济增长的方案,得到各国政府、机构和企业等的高度关注。此外,由于风电技术相对成熟,且具有更高的成本效益和资源有效性,因此,风电也成为近年来世界上增长最快的能源之一。目前,我国已经成为全球风力发电规模最大、增长最快的市场。根据全球风能理事会统计数据,全球风电累计装机容
dreamcode
·
2020-07-27 15:13
数据库技术
如何用 Uber JVM Profiler 等可视化工具监控 Spark 应用程序?
-在设计性能监控系统时有三个目标——收集服务器和应用程序指标、在
时序数据
库中存储指标,并提供用于数据可视化的仪表盘。
weixin_34059951
·
2020-07-27 13:12
TensorflowTutorial_一维数据构造简单CNN
使用一维数据构造简单卷积神经网络觉得有用的话,欢迎一起讨论相互学习~神经网络对于一维数据非常重要,
时序数据
集、信号处理数据集和一些文本嵌入数据集都是一维数据,会频繁的使用到神经网络。
武科大许志伟
·
2020-07-27 13:36
tensorflow
深度学习
Deeplearning
with
Tensorflow
时序数据
库及应用场景介绍
一,
时序数据
库时间序列数据库简称
时序数据
库(TimeSeriesDatabase),用于处理带时间标签(按照时间的顺序变化,即时间序列化)的数据,带时间标签的数据也称为时间序列数据。
秦岭熊猫
·
2020-07-27 13:20
数据库
如何用Uber JVM Profiler等可视化工具监控Spark应用程序?
-在设计性能监控系统时有三个目标——收集服务器和应用程序指标、在
时序数据
库中存储指标,并提供用于数据可视化的仪表盘。
世上我最好
·
2020-07-27 11:03
使用Thanos实现Prometheus指标联邦
Prometheus将其指标(metrics)作为
时序数据
库存储在本地磁盘上,因此Prometheus的本地存储会受到磁盘大小以及所能保留的指标数量的制约
RancherLabs
·
2020-07-20 11:36
kubernetes
K8S
Prometheus
Kubernetes
使用Thanos实现Prometheus指标联邦
Prometheus将其指标(metrics)作为
时序数据
库存储在本地磁盘上,因此Prometheus的本地存储会受到磁盘大小以及所能保留的指标数量的制约
RancherLabs
·
2020-07-20 10:00
初次使用
时序数据
库InfluxDB,安装、简单的命令及配置
InfluxDB是一款开源的
时序数据
库,使用GO语言编写,无需外部依赖,其设计目标是实现分布式和水平伸缩扩展。主要用于监控基础设施,IoT监控(公路摄像头、手机、微波炉、冰箱)等场景。
程就人生
·
2020-07-19 20:59
异常检测
简介 Anomaly Detection
AnomalyDetection,也叫做
异常检测
,目的在于让机器知道我所不知道的事情。1.什么是Anomaly(异常)?虽然说是异常,但其实是以训练集为核心,判断输入数据是否与训练集中的数据“类似”。
Jerry_Jin
·
2020-07-17 23:00
NLP课程
NLP课程文本预处理语言模型n元语法
时序数据
的采样循环神经网络从零开始实现循环神经网络文本预处理文本是一类序列数据,一篇文章可以看作是字符或单词的序列,本节将介绍文本数据的常见预处理步骤,预处理通常包括四个步骤
格拉迪沃
·
2020-07-16 05:00
pytorch
Android App
异常检测
及处理
AndroidApp常见的异常可分为三种:ANR,Crash及OOM。当异常发生时如何正确的获取日志定位问题非常重要。本文针对这三种异常分别给出了处理建议,并提供了一些日志收集框架及日志上传的思路。ANRANR(ApplicationNoResponse),俗称应用卡顿。在Android中所有KeyEvent和TouchEvent都是按照先后顺序放入队列中,依次执行,并且只有当前一个事件执行完毕,
TommyL1
·
2020-07-16 01:59
Android
打造云原生大型分布式监控系统(一):大规模场景下 Prometheus 的优化手段
Prometheus几乎已成为监控领域的事实标准,它自带高效的
时序数据
库存储,可以让单台Prometheus能够高效的处理大量的数据,还有友好并且强大的PromQL语法,可以用来灵活的查询各种监控数据以及配置告警规则
Docker_
·
2020-07-15 18:47
基于大数据分析的
异常检测
方法及其思路实例
转自:http://www.2cto.com/Article/201601/485562.html1概述随着人类社会信息化程度的不断深入,信息系统产生的数据也在呈几何级数增长。对这些数据的深入分析可以得到很多有价值的信息。由于数据量太大以及数据属性的多样性,导致经典的统计分析方法已经无法适用,必须采用以机器学习理论为基础的大数据分析方法。目前,大数据分析的方法已经被广泛用于商业智能(BI)领域,并
ASIA_kobe
·
2020-07-15 16:26
大数据安全
Android客户端
异常检测
一、崩溃检测原理通过thread.setDefaultUncaughtExceptionHandler(),设置默认异常处理Handler,对未被捕获异常进行处理。虚拟机会将没有处理的异常交给默认的UncaughtExceptionHandler处理,我们需要做的是将异常上报至服务端处理,APP端按照原本的逻辑走下去。代码很简单:/***系统默认的handler*/Thread.UncaughtE
Hanami_ss
·
2020-07-15 14:43
Android
移动开发
python时间序列画图plot总结
画图从直觉上来讲就是为了更加清晰的展示
时序数据
所呈现的规律(包括趋势,随时间变化的规律(一周、一个月、一年等等)和周期性规律),对于进一步选择时序分析模型至关重要。
abc1676167
·
2020-07-15 14:03
pandas-
时序数据
时序数据
时序的创建四类时间变量时间点的创建1、to_datetime方法pd.to_datetime('2020.1.1')pd.to_datetime('20201.1')pd.to_datetime
zhuo_bao
·
2020-07-15 12:54
pandas
分析挖掘常用方法
数据分析和挖掘常用方法聚类分析回归分析分类分析常用分析手段不同方法内在业务联系聚类分析用户是那些群体组成的这些群体有那些明显的特征回归分析未来销售趋势预测营销投入如何影响销售分类分析筛选出更值得营销的用户其他分析手段关联分析
异常检测
分析聚类分析聚类就是把相似特征的划分一个类别经常用于数据探索和挖掘前期没有之前经验的背景下也是用与样本量比较大的时候常用语客户分群目的就是为了用户分组组内用户特征显示不
候乐
·
2020-07-15 09:51
数据分析
joyful pandas第9章
时序数据
joyfulpandas第9章
时序数据
一、时序的创建1.四类时间变量2.时间点的创建(a)to_datetime方法(b)时间精度与范围限制(c)date_range方法3.DateOffset对象(a
DA之路
·
2020-07-15 09:49
joyful_pandas
Pandas 交通
时序数据
画图与求差集
Pandas交通
时序数据
画图与求差集这几天在处理从PEMS上下载下来的交通流数据,今天下午主要做了pandas
时序数据
画图与求差集方面的工作,在这里整理下。
weixin_37734052
·
2020-07-15 06:38
时间序列数据的处理
https://yq.aliyun.com/download/2663本次分享主要分为以下几个方面:1.
时序数据
库的应用场景2.面向分析的
时序数据
存储3.
时序数据
库的时序计算4.
时序数据
库的计算引擎5.
weixin_34128501
·
2020-07-15 05:27
R语言学习笔记—K近邻算法
KNN算法广泛应用在推荐系统、语义搜索、
异常检测
。KNN算法分类原理图:图中绿色的圆点是归属在红色三角还是蓝色方块一类?如果K=5(离绿色圆点最近的5个邻居,虚线圈内),则有3个蓝
weixin_30734435
·
2020-07-15 03:35
Python爬虫(三)——URLError和HTTPError异常处理
造成原因本地网络未连接服务器不存在连接不到特点的服务器既然异常处理就会使用到try/except,下面简单介绍try/except捕获异常二、try/except异常捕获使用try/except来捕捉
异常检测
浅然言而信
·
2020-07-15 02:14
●
Python数据获取/处理
避开数据海洋的“暗礁”:识别用户异常行为
▼▍什么是
异常检测
?
异常检测
是在数据中找到不符合“正常”的行为模式的过程。在时间序列数据中检测到与预期行为有偏差的数据对于确保
tecdat拓端
·
2020-07-15 01:02
Anomaly Detection
异常检测
的几种方法
异常检测
首先要先根据业务情况确定什么是异常数据,再选择合适的方法进行算法实现。
CC思SS
·
2020-07-15 00:24
时序数据
特征提取:用 pandas 进行上采样、下采样
#对温度做分段常数逼近处理,下采样defconstant_appro_low(df_data_by_date_tem):df_data_by_date_tem=df_data_by_date_tem.reset_index(drop=True)df_appro=pd.DataFrame()date_index=pd.date_range(end='01/01/2019',periods=len(d
tutu96177
·
2020-07-14 23:00
上采样
下采样
常值逼近处理
pandas学习笔记—pandas
时序数据
处理需要注意的一点(TypeError: float() argument must be a string or a number, not 'Times)
大家在处理
时序数据
时可能会遇到以下错误:TypeError:float()argumentmustbeastringoranumber,not'Timestamp'用以下两种代码处理dataframe时
ACE-Mayer
·
2020-07-14 23:52
机器学习
数据科学
信号处理
[集群监控]使用cAdvisor + Heapster + InfluxDB + Grafana
InfluxDB:
时序数据
库,存储监控数据。Grafana:可视化展示。
lyzkks
·
2020-07-14 22:54
Kubernetes
解决Mac influxDB进程kill-9无法杀死
背景前段时间实验室有个
时序数据
库基准的项目要写,脑子抽了在自己mac上搭建了一个influxdb的环境,结果今天帮舍友调代码的时候,发现自己的8086端口被占用了。
rainmaple_ty
·
2020-07-14 21:29
常用技术
区块链学习笔记
(区块链-数据库/账本)区块链的特点去中心化整个网络无中心化硬件或机构,用纯数学方法而非中心机构来建立分布式系统结构与节点间信任关系
时序数据
采用带有时间戳的链式区块结构存储数据,从而为数据增加了时间维度
花丶小伟
·
2020-07-14 20:07
机器学习在网络安全领域的应用(三)
机器学习在网络安全研究中的应用本节主要介绍机器学习在网络基础设施的安全以及网络安全检测方面的相关研究成果,主要包括机器学习技术在BGP的
异常检测
、恶意域名检测、僵尸网络检测、网络入侵检测以及恶意加密流量的识别中的应用研究
luckmia
·
2020-07-14 18:26
【机器学习】
时序数据
处理
相关参考文献:1.时间序列交叉验证2.机器学习与时间序列预测3.
时序数据
预测案例:O2OCouponUsageForecast4.时间序列模型中样本时间窗口的选择-华泰期货5.scikit-learn交叉验证时间序列数据的自定义拆分
喜东东cc
·
2020-07-14 18:57
数据挖掘
深度学习---
时序数据
的采样(随机采样和相邻采样)
随机采样在随机采样照片那个,每个样本是原始序列上任意截取的一段序列。相邻的两个随机小批量在原始序列上的位置不一定相毗邻。因此,无法用一个小批量的最终时间步的隐藏状态来初始化下一个小批量的隐藏状态。在训练模型时,每次随机采样前都需要重新初始化隐藏状态num_examples=(len(corpus_indices)-1)//num_stepsepoch_size=num_examples//batc
小白827
·
2020-07-14 17:26
深度学习
时序数据
库技术体系 – Druid 多维查询之Bitmap索引
转载自http://hbasefly.com/2018/06/19/timeseries-database-8/
时序数据
库从抽象语义上来说总体可以概括为两个方面的基本需求,一个方面是存储层面的基本需求:
千淘万漉
·
2020-07-14 15:47
云计算/大数据
pandas学习-第九章-
时序数据
时序数据
的创建importpandasaspdimportnumpyasnp四类时间变量[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Ywu2mJqc-1593446125517
lx12633036
·
2020-07-14 14:40
python
深入机器学习前,这6个框架你得了解!
本质上,机器学习框架涵盖用于分类,回归,聚类,
异常检测
等各种学习方法,并且其可以不包括神经网络方法。深度学习或深度神经网络(DNN)框架涵盖具有许多隐藏层的神经网络拓扑。
阳光下绿茵场
·
2020-07-14 14:48
AI
人工智能
pandas
时序数据
-task4
pandas的
时序数据
0.前言1.pandas时间类型数据0.前言这里写一点自己的理解吧,之前学习完材料后做了一些总结,但做练习题目时完全不会,目前想法是掌握了多少写多少,这里主要掌握了date_range
尘归尘-北尘
·
2020-07-14 11:10
pandas学习总结
【解决办法】pandas画出
时序数据
(股票数据)横轴不是时间
简述遇到了这个问题,被坑了很久。首先我们要假设我们一直认为index是时间数据。然后我们发现没有看到横轴为时间(如果不是的这么认为的话,就记得先把index设置为时间数据)可能性遇到这个问题有很多种可能。读取的时候,时间所在的列没有被设置为index。这种可能下的样子就是:画出的图,横轴为数字(默认index)解决办法:重新设置为index(往往这个问题,会伴随着下面的问题)df=pd.read_
肥宅_Sean
·
2020-07-14 06:13
Python
金融IT
【
时序数据
处理】pandas某些列由于n个数据导致的,通过Series生成Dataframe
简述经常会遇到这样的情况,比如说,我们认为当天的温度,是由于前面几段时间的影响导致的。但是我们手头上只有温度的列表,为了捕捉到这样的特征,我们往往需要把这样的一维的数据,转成二维的数据。实例初始数据:左边是index,右边是真实数据0112233445dtype:int64如果我们认为当前的数据是由于前面两天的数据导致的,就会需要下面的矩阵dtype:int64c0c1y012312342345这
肥宅_Sean
·
2020-07-14 06:43
Python
数据处理
python
pandas
dataframe
时序数据
上一页
64
65
66
67
68
69
70
71
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他