E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
时序数据库influxdb
干货丨
时序数据库
分区教程(一)
1.为什么对数据进行分区?对数据库进行分区可以极大的降低系统响应延迟同时提高数据吞吐量。具体来说,分区有以下几个好处:分区使得大型表更易于管理。对数据子集的维护操作也更加高效,因为这些操作只针对需要的数据而不是整个表。一个好的分区策略将通过只读取满足查询所需的相关数据来减少要扫描的数据量。当所有的数据都在同一个分区上,对数据库的查询,计算,以及其它操作都会被限制在磁盘访问IO这个瓶颈上。分区使得系
DolphinDB
·
2020-12-14 14:34
dolphindb
分布式系统
数据库
数据库开发
数据处理
InfluxDB
基础操作
一、
InfluxDB
简介
时序数据库
InfluxDB
版是一款专门处理高写入和查询负载的
时序数据库
,用于存储大规模的时序数据并进行实时分析,包括来自DevOps监控、应用指标和IoT传感器上的数据主要特点:
邋遢的流浪剑客
·
2020-12-13 14:12
其他数据库
InfluxDB
干货丨
时序数据库
DolphinDB数据导入教程
企业在使用大数据分析平台时,首先需要把海量数据从多个数据源迁移到大数据平台中。在导入数据前,我们需要理解DolphinDBdatabase的基本概念和特点。DolphinDB数据表按存储介质分为3种类型:内存表:数据只保存在本节点内存,存取速度最快,但是节点关闭后,数据将会丢失。本地磁盘表:数据保存在本地磁盘上,即使节点重启,也可以方便地通过脚本把数据加载到内存中。分布式表:数据在物理上分布在不同
DolphinDB
·
2020-12-11 15:59
分布式系统
dolphindb
数据库
数据库开发
数据处理
时序数据库
作为量化金融研究平台的优势在哪里?
大数据下金融行业面临的四大痛点当前整个金融市场环境日趋严峻,监管越来越严,无论是银行的零售、公司、交易或同业业务,都需要直面营销与风险的效率与准确率的问题。越来越多的金融机构都希望依靠大数据来拉动业务模式进行创新,但是由于行业特点,存在着四大痛点。第一个痛点是数据来源多样化,需要整合后分析。金融行业的数据来源通常包含三大类:业务信息数据、行为数据和第三方数据。这些来源的数据包括结构化数据和非结构化
DolphinDB
·
2020-12-11 15:23
dolphindb
数据库
量化
金融
数据库开发
干货丨
时序数据库
DolphinDB数据导入教程
企业在使用大数据分析平台时,首先需要把海量数据从多个数据源迁移到大数据平台中。在导入数据前,我们需要理解DolphinDBdatabase的基本概念和特点。DolphinDB数据表按存储介质分为3种类型:内存表:数据只保存在本节点内存,存取速度最快,但是节点关闭后,数据将会丢失。本地磁盘表:数据保存在本地磁盘上,即使节点重启,也可以方便地通过脚本把数据加载到内存中。分布式表:数据在物理上分布在不同
DolphinDB
·
2020-12-11 14:40
分布式系统
dolphindb
数据库
数据库开发
数据处理
时序数据库
作为量化金融研究平台的优势在哪里?
大数据下金融行业面临的四大痛点当前整个金融市场环境日趋严峻,监管越来越严,无论是银行的零售、公司、交易或同业业务,都需要直面营销与风险的效率与准确率的问题。越来越多的金融机构都希望依靠大数据来拉动业务模式进行创新,但是由于行业特点,存在着四大痛点。第一个痛点是数据来源多样化,需要整合后分析。金融行业的数据来源通常包含三大类:业务信息数据、行为数据和第三方数据。这些来源的数据包括结构化数据和非结构化
DolphinDB
·
2020-12-11 14:28
dolphindb
数据库
量化
金融
数据库开发
干货丨如何在
时序数据库
中将高频信号转化成离散的买卖信号
高频交易中,我们通常首先基于tick级的报价信息和交易信息来生成信号量,然后将这些信号量转化成离散的买卖信号,譬如说1(买入),0(不变),-1(卖出),接着根据资金和已有头寸以及其他优化规则来生成订单发送到交易系统。本文要讨论第二个步骤,即如何将信号量转化成离散的买卖信号,也就是把一个浮点数类型的数组signal转化成一个取值为1,0或-1的整型数组direction。如果转化规则简单,譬如超过
DolphinDB
·
2020-12-11 09:24
量化金融
数据库
DolphinDB
数据处理
高频交易
数据库开发
Grafana如何连接DolphinDB?
DolphinDB作为新一代的高性能
时序数据库
,不仅提供了Grafana的数据接口,还提供了Grafana的dolphindb-datasource插件。
DolphinDB
·
2020-12-10 21:50
dolphindb
grafana
数据库开发
数据库
数据分析
Grafana如何连接DolphinDB?
DolphinDB作为新一代的高性能
时序数据库
,不仅提供了Grafana的数据接口,还提供了Grafana的dolphindb-datasource插件。
DolphinDB
·
2020-12-10 20:16
dolphindb
grafana
数据库开发
数据库
数据分析
干货丨如何使用
时序数据库
进行淘宝用户行为分析
本文将教你如何使用
时序数据库
对淘宝的用户行为进行分析。
DolphinDB
·
2020-12-10 18:00
时序数据库使用教程
DolphinDB
数据库
数据分析
mysql
大数据
时序数据库
在工业物联网中的应用
工业物联网的数据特点和痛点工业物联网的数据采集有着频率高、设备多、维度高的特点,数据量非常大,对系统的吞吐量有很高的要求。同时工业物联网往往需要系统能够实时处理数据,对系统预警,监控,甚至反控。不少系统还需要提供图形化终端供操作工人实时监控设备的运行,这给整个系统带来了更大的压力。对于采集到的海量历史数据,通常还需要进行离线的建模和分析。因此,工业物联网的数据平台有着非常苛刻的要求,既要有非常高的
DolphinDB
·
2020-12-10 14:45
dolphindb
数据库
数据库开发
物联网
大数据处理
时序数据库
在工业物联网中的应用
工业物联网的数据特点和痛点工业物联网的数据采集有着频率高、设备多、维度高的特点,数据量非常大,对系统的吞吐量有很高的要求。同时工业物联网往往需要系统能够实时处理数据,对系统预警,监控,甚至反控。不少系统还需要提供图形化终端供操作工人实时监控设备的运行,这给整个系统带来了更大的压力。对于采集到的海量历史数据,通常还需要进行离线的建模和分析。因此,工业物联网的数据平台有着非常苛刻的要求,既要有非常高的
DolphinDB
·
2020-12-10 14:14
dolphindb
数据库
数据库开发
物联网
大数据处理
时序数据库
DolphinDB横截面引擎教程
在处理实时流数据时,不仅需要按照时间做纵向聚合计算(时间序列聚合引擎),还需要对最新的数据做横向比较和计算,如金融里对所有股票的最新报价求百分位、工业物联网中计算一批设备的温度均值等。DolphinDBdatabase提供了横截面聚合引擎,可以对流数据中所有分组的最新数据做聚合运算。横截面引擎的主体分为两部分:横截面数据表和计算引擎。横截面数据是横截面引擎的内部表,保存了所有分组最新的截面数据。计
DolphinDB
·
2020-12-10 09:42
时序数据库使用教程
DolphinDB
数据库
数据库开发
量化金融
工业物联网
如何使用Window Join快速估计个股交易成本
本文将介绍如何在分布式
时序数据库
DolphinDB中,如何使用asofjoin和windowjoin快速估计每个股票的交易成本。需要的数据包括含有
DolphinDB
·
2020-12-09 21:48
dolphindb
数据库
数据库开发
量化
物联网
如何使用Window Join快速估计个股交易成本
本文将介绍如何在分布式
时序数据库
DolphinDB中,如何使用asofjoin和windowjoin快速估计每个股票的交易成本。需要的数据包括含有
DolphinDB
·
2020-12-09 20:45
dolphindb
数据库
数据库开发
量化
物联网
监控预警丨
时序数据库
DolphinDB异常检测引擎教程
DolphinDB作为一个高性能的分布式
时序数据库
(timeseriesdatabase),内置了一个流数据框架,既能实时处理分析这些物联网数据,也能对历史数据进行计算分析,帮助用户利用、发挥这些数据的价值
DolphinDB
·
2020-12-09 17:30
时序数据库使用教程
DolphinDB
数据库
数据库开发
工业物联网
量化金融
如何在
时序数据库
中利用高频数据找到最相关的股票
在制定投资策略时,我们往往会研究股票之间的相关性。研究个股的相关性或者个股与指数,ETF之间的相关性,从而通过对冲套利来获得稳定收益。找到最相关的股票,可以根据交易员的经验,也可以根据股票的相关信息(行业,beta,每日回报等)。本文将介绍如何利用海量的高频数据寻找最相关的股票。假设我们有一个数据表quotes,包含以下字段:symbol:股票代码date:日期time:时间bid:买入价格ofr
DolphinDB
·
2020-12-09 15:37
dolphindb
数据库
数据库开发
量化
金融
如何用数据库实现动量交易策略详解
DolphinDBdatabase是一款高性能分布式
时序数据库
。与其它通常的数据库不同,DolphinDB不仅可以存储和检索数据,而且具备强大的编程和分
DolphinDB
·
2020-12-09 15:20
dolphindb
数据库
数据库开发
量化
金融
如何在
时序数据库
中利用高频数据找到最相关的股票
在制定投资策略时,我们往往会研究股票之间的相关性。研究个股的相关性或者个股与指数,ETF之间的相关性,从而通过对冲套利来获得稳定收益。找到最相关的股票,可以根据交易员的经验,也可以根据股票的相关信息(行业,beta,每日回报等)。本文将介绍如何利用海量的高频数据寻找最相关的股票。假设我们有一个数据表quotes,包含以下字段:symbol:股票代码date:日期time:时间bid:买入价格ofr
DolphinDB
·
2020-12-09 14:24
dolphindb
数据库
数据库开发
量化
金融
如何用数据库实现动量交易策略详解
DolphinDBdatabase是一款高性能分布式
时序数据库
。与其它通常的数据库不同,DolphinDB不仅可以存储和检索数据,而且具备强大的编程和分
DolphinDB
·
2020-12-09 14:18
dolphindb
数据库
数据库开发
量化
金融
时序数据库
DolphinDB历史数据回放教程
一个量化策略在用于实际交易时,处理实时数据的程序通常为事件驱动。而研发量化策略时,需要使用历史数据进行回测,这时的程序通常不是事件驱动。因此同一个策略需要编写两套代码,不仅耗时而且容易出错。在DolphinDBdatabase中,用户可将历史数据按照时间顺序以“实时数据”的方式导入流数据表中,这样就可以使用同一套代码进行回测和实盘交易。DolphinDB的流数据处理框架采用发布-订阅-消费的模式。
DolphinDB
·
2020-12-09 14:32
时序数据库使用教程
DolphinDDB
数据库
量化金融
工业物联网
大数据
时序数据库
DolphinDB基于Docker的集群部署教程
Docker是一个开源的引擎,可以轻松地为任何应用创建一个轻量级的、可移植的、自给自足的容器。DolphinDBdatabase提供了基于docker的分布式集群部署包,可以让用户方便快捷的部署DolphinDB分布式集群。本教程的目标是通过4个centos容器搭建一个5节点的多机集群,最终搭建好的集群情况如下:部署分布式集群时,需要分别配置控制器节点(controller)、代理节点(agent
DolphinDB
·
2020-12-09 09:54
时序数据库使用教程
docker
dolphindb
数据库
分布式
hadoop
最简最快的WorldQuant 101 Alpha因子实现
DolphinDBdatabase是一款高性能分布式
时序数据库
(time-seriesdatabase),它特别适用于投资银行、对冲基金和交易所的定量查询和分析,可以用于构建基于历史数据的策略测试。
DolphinDB
·
2020-12-08 21:29
dolphindb
数据库开发
数据库
量化
数据处理
最简最快的WorldQuant 101 Alpha因子实现
DolphinDBdatabase是一款高性能分布式
时序数据库
(time-seriesdatabase),它特别适用于投资银行、对冲基金和交易所的定量查询和分析,可以用于构建基于历史数据的策略测试。
DolphinDB
·
2020-12-08 20:18
dolphindb
数据库开发
数据库
量化
数据处理
时序数据库
DolphinDB插件开发教程
DolphinDB支持动态加载外部插件,以扩展系统功能。插件用C++编写,需要编译成".so"或".dll"共享库文件。本文着重介绍开发插件的方法和注意事项,并详细介绍以下几个具体场景的插件开发流程:如何开发支持时间序列数据处理的插件函数如何开发用于处理分布式SQL的聚合函数如何开发支持新的分布式算法的插件函数如何开发支持流数据处理的插件函数如何开发支持外部数据源的插件函数1.如何开发插件1.1基
DolphinDB
·
2020-12-08 18:40
时序数据库使用教程
DolphinDB
时序数据库
数据库
量化金融
工业物联网
DolphinDB与Elasticserach在金融数据集上的性能对比测试
使用ElasticSearch作为
时序数据库
,并且取得了非常不错的效果。很多知乎用户不禁询问,Elasticsearch是否可以用于海量金融数据的存储和分析?
DolphinDB
·
2020-12-08 15:38
dolphindb
数据库开发
数据库
elasticsearch
sql
DolphinDB与
InfluxDB
对比测试报告
InfluxDB
是一款开源的
时序数据库
,由Go语言实现。它的核心是一款定制的存储引擎TSMTree,对时间序列数据做了优化,优先考虑插入和查询数据的性能。
DolphinDB
·
2020-12-08 15:17
数据库
数据库开发
dolphindb
influxdb
c++
DolphinDB与
InfluxDB
对比测试报告
InfluxDB
是一款开源的
时序数据库
,由Go语言实现。它的核心是一款定制的存储引擎TSMTree,对时间序列数据做了优化,优先考虑插入和查询数据的性能。
DolphinDB
·
2020-12-08 15:16
数据库
数据库开发
dolphindb
influxdb
c++
DolphinDB与Elasticserach在金融数据集上的性能对比测试
使用ElasticSearch作为
时序数据库
,并且取得了非常不错的效果。很多知乎用户不禁询问,Elasticsearch是否可以用于海量金融数据的存储和分析?
DolphinDB
·
2020-12-08 14:59
dolphindb
数据库开发
数据库
elasticsearch
sql
时序数据库
DolphinDB作业管理概述
作业(Job)是DolphinDB中最基本的执行单位,可以简单理解为一段DolphinDB脚本代码在DolphinDB系统中的一次执行。Job根据阻塞与否可分成同步作业和异步作业。同步作业同步作业也称为交互式作业(InteractiveJob),它的主要来源有:WebnotebookDolphinDBGUIDolphinDB命令行界面通过DolphinDB提供的各个编程语言API接口由于这种类型的
DolphinDB
·
2020-12-08 14:40
时序数据库使用教程
DolphinDB
时序数据库
量化金融
工业物联网
数据库开发
高速迁移MySQL数据到分布式
时序数据库
DolphinDB
DolphinDB提供了两种导入MySQL数据的方法:ODBC插件和MySQL插件。我们推荐使用MySQL插件导入MySQL数据,因为它的速度比ODBC导入更快,导入6.5G数据,MySQL插件的速度是ODBC插件的4倍,并且使用MySQL插件无需任何配置,而ODBC插件需要配置数据源。在使用MySQL插件之前,请先参考DolphinDB安装使用指南安装DolphinDB。1.下载插件Dolphi
DolphinDB
·
2020-12-08 09:22
时序数据库使用教程
DolphinDB
时序数据库
mysql
量化金融
工业物联网
Kdb+有可能不再是最快的
时序数据库
?
最近了解到有一款新的数据库产品DolphinDB,官方宣称速度极快,比同类型产品快1~2个数量级。而业界熟知的kdb+也正是以快著称,所以我想要了解一下DolphinDB的性能是不是真的这么快,并且想要知道DolphinDB和kdb+哪一个的性能更好。本次比较主要从3个方面展开:加载数据和保存数据、数据库查询和计算、表连接。环境配置首先,分别从官网下载试用版,由于kdb+的只有32位版本是免费的,
DolphinDB
·
2020-12-07 09:37
对比测试
kdb+
DolphinDB
分布式时序数据库
量化金融
工业物联网
部署Telegraf+
Influxdb
+Grafana 架构来监控 MySQL
文章,详细了介绍了采集器telegraf,
时序数据库
influxdb
,数据展示Grafana的部署以及系统主机侧的监控添加,图表的展示。
民工哥
·
2020-12-06 13:31
grafana
mysql
后端
运维
程序员
部署Telegraf+
Influxdb
+Grafana 架构来监控 MySQL
文章,详细了介绍了采集器telegraf,
时序数据库
influxdb
,数据展示Grafana的部署以及系统主机侧的监控添加,图表的展示。
民工哥
·
2020-12-06 12:48
grafana
mysql
后端
运维
程序员
终于有人把Prometheus入门讲明白了 | 留言送书
Prometheus既是一个
时序数据库
,又是一个监控系统,更是一套完备的监控生态解决方案。
Docker_
·
2020-12-06 08:00
数据库
大数据
分布式
编程语言
python
分布式
时序数据库
作为工业物联网数据后台的7大优势
数据是工业物联网的血液。但是国内绝大部分的MES系统,以及所谓的智慧工厂,对生产过程中产生的海量的工艺数据,保存不会超过三个月,更不用说进一步对积累的数据研究利用了。数据的实时采集、计算和反控则对工业物联网背后的数据平台的实时计算能力提出了很高的要求。传统的关系型数据库,大部分开源的NoSQL,以及新一代的NewSQL离工业物联网数据平台的这两个苛求要求还有较远的距离。以DolphinDBData
DolphinDB
·
2020-12-05 10:47
工业物联网
DolphinDB
分布式时序数据库
工业物联网
数据分析
大数据
如何使用
时序数据库
快速计算买方或卖方驱动交易
给定高频交易数据以及报价数据,如何判断每笔交易是由买方驱动或是卖方驱动,是进行高频交易数据分析经常需要处理的问题。本文将介绍如何使用DolphinDB快速计算每笔交易的驱动方,只需不到2秒钟即可对美国一天的level1的高频交易数据进行计算并存入数据库。本文使用了非同时连接(asofjoin)以及map-reduce。本文用到的数据是含有逐笔交易的交易表trade和买卖报价表nbbo。它们分别包含
DolphinDB
·
2020-12-04 09:35
量化金融
DolphinDB
分布式时序数据库
量化金融
工业物联网
mysql
如何使用DolphinDB处理Tushare金融数据
DolphinDB是新一代的
时序数据库
,不仅可以作为分布式数据仓库或者内存数据库来使用,而且自带丰富的计算工具,可以作为研究工具或研究平台来使用,非常适用于量化金融、物联网等领域的海量数据分析。
DolphinDB
·
2020-12-03 20:52
量化金融
DolphinDB
分布式时序数据库
量化金融
工业物联网
数据分析
prometheus 发送恢复 值_
时序数据库
连载系列:指标届的独角兽Prometheus
简介Prometheus是SoundCloud公司开发的一站式监控告警平台,依赖少,功能齐全。于2016年加入CNCF,广泛用于Kubernetes集群的监控系统中,2018.8月成为继K8S之后第二个毕业的项目。Prometheus作为CNCF生态圈中的重要一员,其活跃度仅次于Kubernetes。开局一张图:Prometheus的架构关键功能包括:多维数据模型:metric,labels灵活的
weixin_39665507
·
2020-12-01 19:50
prometheus
发送恢复
值
分布式
时序数据库
DolphinDB与
InfluxDB
对比测试报告2
2019年1月,我们曾发布测试报告DolphinDB与
InfluxDB
对比测试报告。
DolphinDB智臾科技
·
2020-11-26 20:46
DolphinDB与大数据
数据库
大数据
python
java
mysql
从前世今生聊一聊,大厂为啥亲睐
时序数据库
摘要:本文会从
时序数据库
的基本概念、应用场景、需求与能力等方面一一展开,带你了解
时序数据库
的前世今生。
时序数据库
忽然火了起来。
华为云开发者社区
·
2020-11-24 21:44
数据库
数据
云服务
从前世今生聊一聊,大厂为啥亲睐
时序数据库
摘要:本文会从
时序数据库
的基本概念、应用场景、需求与能力等方面一一展开,带你了解
时序数据库
的前世今生。
时序数据库
忽然火了起来。
华为云开发者社区
·
2020-11-24 21:43
数据库
数据
云服务
influxdb
原理与实战 pdf_面试进阶必备:JVM+Redis+设计模式+SpringBoot.pdf文档资料
前言金九银十已经要到来,2019的接近尾声,作为一个开发人员,你是否面上了自己理想的公司,薪资达到心中理想的高度?面试:如果不准备充分的面试,完全是浪费时间,更是对自己的不负责。今天给大家分享下我整理的Java架构面试专题及答案,其中大部分都是大企业面试常问的面试题,可以对照这查漏补缺,当然了,这里所列的肯定不可能覆盖全部方式,不过也希望能对即将找工作的朋友起到一些帮助!Java面试的重点:数据结
weixin_39960920
·
2020-11-24 02:32
influxdb原理与实战
pdf
java23种设计模式个人整理
springboot
gateway
负载均衡
springboot
redis
刷新时间
springboot
启动
ssl
InfluxDB
开源分布式时序、事件和指标数据库
InfluxDB
是一个开源分布式时序、事件和指标数据库。使用Go语言编写,无需外部依赖。其设计目标是实现分布式和水平伸缩扩展。
lidashuang
·
2020-11-23 22:54
influxdb
prometheus使用简介
Prometheus由go语言编写的基于
时序数据库
的监控告警系统,已加入CNCF基金会,是CNCF推荐使用的监控告警系统。
吃水果毫不费力zz
·
2020-11-22 18:11
prometheus
监控
docker-compose部署zk+kafka+storm集群的实现
172.22.12.20172.22.12.21172.22.12.22172.22.12.23172.22.12.24zoo1:2181zoo2:2182zoo3:2183zkui:9090(admin/manager)kafka1:9092kafka2:9092kafka3:9092kafdrop:9000
influxdb
·
2020-11-20 11:24
双汇大数据方案选型:从棘手的
InfluxDB
+Redis到毫秒级查询的TDengine
双汇发展多个分厂的能源管控大数据系统主要采用两种技术栈:
InfluxDB
/Redis和Kafka/Redis/HBase/Flink,对于中小型研发团队来讲,无论是系统搭建,还是实施运维都非常棘手。
涛思数据
·
2020-11-18 17:43
大数据
tdengine
涛思数据
物联网
数据库
双汇大数据方案选型:从棘手的
InfluxDB
+Redis到毫秒级查询的TDengine
双汇发展多个分厂的能源管控大数据系统主要采用两种技术栈:
InfluxDB
/Redis和Kafka/Redis/HBase/Flink,对于中小型研发团队来讲,无论是系统搭建,还是实施运维都非常棘手。
涛思数据
·
2020-11-18 13:45
Case
Study
数据库
涛思数据
tdengine
物联网
大数据
数据管道 Logstash 入门
Logstash是什么Logstash就是一个开源的数据流工具,它会做三件事:从数据源拉取数据对数据进行过滤、转换等处理将处理后的数据写入目标地例如:监听某个目录下的日志文件,读取文件内容,处理数据,写入
influxdb
rife
·
2020-11-18 00:19
后端
node.js
golang
elk
大数据
docker | 从零开始搭建prometheus+Grafana+node-exporter监控阿里云ECS服务器(一)
grafana是一款采用go语言编写的开源应用,主要用于大规模指标数据的可视化展现,是网络架构和应用分析中最流行的时序数据展示工具,目前支持绝大部分常用的
时序数据库
。node
炒面Z
·
2020-11-17 10:14
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他