E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
tpc-ds
面对国产基础软件困境,进击的星环如何突围?
5月3日,星环科技在上海举办了2018第二届前沿科技论坛暨星环用户大会,在此次大会上,星环宣布了众多的重磅消息:发布最新的系列产品、星环TDH平台通过
TPC-DS
基准测试、与新加坡人工智能核心项目签署了战略合作协议
cuichun6294
·
2020-08-03 16:10
面对国产基础软件困境, 进击的星环如何突围?
点击蓝色字关注"数据库技术大会"一起玩耍哦~5月3日,星环科技在上海举办了2018第二届前沿科技论坛暨星环用户大会,在此次大会上,星环宣布了众多的重磅消息:发布最新的系列产品、星环TDH平台通过
TPC-DS
gaokeke
·
2020-08-03 10:18
Flink1.10和Hive集成一些需要注意的点
比如:Flink1.10同时还标志着对Blink的整合宣告完成,随着对Hive的生产级别集成及对
TPC-DS
的全面覆盖,Flink在增强流式SQL处理能力的同时也具备了成熟的批处理能力。
大数据技术与架构
·
2020-08-03 05:32
CDH整合Flink1.10(小白教程)
而且随着对Hive的生产级别集成及对
TPC-DS
的全面覆盖,Flink在增强流式SQL处理能力的同时也具备了成熟的批处理能力。
joshua_qi
·
2020-07-30 15:30
Flink
CDH
Jindo SQL 性能优化之 RuntimeFilter Plus
背景介绍
TPC-DS
测试集采用星型和雪花型等多维数据模型,包含7张事实表和17张维度表,以storechannel为例,事实表和维度表的关联关系如下所示:分析
TPC-DS
全部99个查询语句不难发现,绝大部分语句
weixin_45906054
·
2020-07-29 07:36
MaxCompute SQL大数据公开数据集实战
MaxCompute公开数据集简介目前阿里云MaxCompute已经免费向全部用户开放了多种公用数据集,包括:股票价格数据房产信息影视及其票房数据
TPC-DS
数据集这些公开数据现已免费开放给用户,并已经完成了数据分析前序较复杂的数据获取
一天_pika
·
2020-07-27 11:40
MaxCompute
【原创】大数据基础之Benchmark(4)
TPC-DS
测试结果(hive/hive on spark/spark sql/impala/presto)...
1测试集群内存:256GCPU:32Core(Intel(R)Xeon(R)
[email protected]
)Disk(系统盘):300GDisk(数据盘):1.5T*12测试数据tpcdsparquet10gtpcdsorc10g3测试对象hive-2.3.4【setmapreduce.map.memory.mb=4096;setmapreduce.map.java.opts=-Xmx3
weixin_30697239
·
2020-07-13 17:37
TPC-DS
性能测试及使用方法
一、安装
TPC-DS
工具1、下载工具 下载地址:http://www.tpc.org/tpc_documents_current_versions/download_programs/tools-download-request.asp
奋斗, 拼
·
2020-07-13 15:06
性能测试相关
spark-sql-perf
测试环境:spark2.4.0spark-sql-perf_2.11-0.5.0-SNAPSHOT测试tpcds-kit通过tpcds-kit生成
TPC-DS
数据。
breeze_lsw
·
2020-07-13 07:04
Spark
Spark
SQL
基于AWS一键部署运行Spark + Alluxio + S3技术栈与
TPC-DS
查询基准测试
常用链接Alluxio项目官网AlluxioInc网站Alluxio在各大厂用例关注Alluxio微信公众号:Alluxio_ChinaSpark+Alluxio+S3组合是当前非常流行的数据分析技术栈。Alluxio沙盒(sandbox)技术是对部署在公有云环境多节点集群上的Spark+Alluxio+S3组合进行测试的最简单方法。沙盒集群已经完成全部配置,可供用户运行从hello-world示
Alluxio
·
2020-07-12 21:07
flink图表 sql query流程图
1、分析sqlquery我们以
tpc-ds
生成的query1.sql为例子进行分析。
应许怀袖
·
2020-07-11 07:10
Flink
flink图表:analyze流程图
1、analyzetable流程图以
tpc-ds
生成的表作为例子,先从短小的reason表开始。它一共有3个字段,分别是r_reason_sk,r_reason_id,r_reason_desc。
应许怀袖
·
2020-07-11 07:09
Flink
AntDB OLAP测试之--
TPC-DS
基准测试
AntDBOLAP测试之–
TPC-DS
基准测试一、下载安装
TPC-DS
工具下载
TPC-DS
源码:http://www.tpc.org/tpc_documents_current_versions/current_specifications.asp
AntDB-billyzhu
·
2020-07-08 09:01
AntDB
自研云原生数据仓库AnalyticDB再破权威评测
TPC-DS
世界纪录!
简介:阿里云自研云原生数据仓库AnalyticDB连续两年成为
TPC-DS
榜单第一的数据仓库!性能较前世界纪录提升29%,单位成本仅为其1/3。
阿里技术
·
2020-06-30 14:46
数据库
阿里云EMR计算速度提升2.2倍 连续两年打破大数据领域最难竞赛世界纪录!
4月26日,大数据领域权威竞赛
TPC-DS
公布了最新结果,阿里云作为全球唯一入选的云计算公司获得第一。值得一提的是,去年阿里云EMR首次打破该竞赛纪录,成为全球首个通过TPC认证的公共云产品。
weixin_45906054
·
2020-06-29 16:39
TPC-DS
用于Clickhouse和Doris性能测试
大致介绍
TPC-DS
采用星型、雪花型等多维数据模式。它包含7张事实表,17张纬度表平均每张表含有18列。其工作负载包含99个SQL查询,覆盖SQL99和2003的核心部分以及OLAP。
Coder李海波
·
2020-06-24 13:10
3.大数据技术
TPC-DS
Clickhouse
Doris
OLAP
大数据
技术解析:阿里云 AnalyticDB 如何实现全球性能第一
简介:北京时间2020年5月4日,TPC官网正式公布,阿里云自研云原生数据仓库AnalyticDB通过严苛的
TPC-DS
全流程测试,性能较前世界纪录提升29%,单位成本仅为其1/3,再次成为全球性能领先的数据仓库
阿里技术官方号
·
2020-06-22 13:43
自研云原生数据仓库AnalyticDB再破权威评测
TPC-DS
世界纪录!
北京时间2020/5/4青年节,TPC(全球最知名非盈利的数据管理系统评测基准标准化组织)官网正式上线AnalyticDBTPC-DS成绩,AnalyticDB通过严苛的
TPC-DS
全流程测试,性能QphDS
阿里技术官方号
·
2020-06-22 13:43
SQL
15篇大数据精品文章大合集
大家快来学习吧~1.数据工程师必须掌握的7个大数据实战项目查看原文值得收藏,数据工程师必须掌握的7个大数据实战项目2.阿里云大数据+AI技术沙龙上海站回顾|揭秘
TPC-DS
榜单第一名背后的强大引擎查看原文
阿里技术官方号
·
2020-06-22 13:42
大数据
数据库基准测试标准 TPC-C or TPC-H or
TPC-DS
其中被业界广泛接受和使用的有TPC-C、TPC-H和
TPC-DS
。
BillowX
·
2020-06-21 19:30
TPC-DS
在大数据中的使用
大数据测试基准的选择
TPC-DS
简介编译hive-testbench运行测试案例大数据测试基准的选择企业在选择大数据测试基准时,首先应考虑基准与其自身业务的相关性。
熊_看不见
·
2020-06-21 08:42
阿里云自研数据仓库 AnalyticDB 再捧 TPC 全球冠军
作者|马超责编|伍杏玲出品|CSDN(ID:CSDNnews)5月14日,TPC官网正式公布,阿里云自研的AnalyticDB通过了
TPC-DS
全流程测试,将前世界纪录的性能提升了29%,并把单位成本降低了三分之二
CSDN资讯
·
2020-06-21 00:42
Apache Parquet 技术干货分享
本文整理于最近的一次公司内训,主要分四个部分:1、Parquet简介2、架构解析3、基本操作4、
TPC-DS
基准测试介绍一、Parq
大数据技术架构
·
2020-05-27 12:08
向Hive导入TPC-H测试数据集
常用且主要的TPC数据集有如下几种:TPC-C:模拟一个库存-订单系统以及其上的多用户并发事务;TPC-DI:模拟多种类型的大数据源的ETL过程;
TPC-DS
:模拟大型零售业务的系统,该系统主要用于BI
LittleMagic
·
2020-04-12 19:24
[R-001]TPC-DS-1TB report for PK(ARM)
step0:
TPC-DS
的1T数据造数tdh-user@tdh01:~$tar-jxvftpcds-6.X_with_arm_support.tar.bz2tdh-user@tdh01:~$beeline-u"jdbc
JeffenCheung
·
2020-03-13 14:30
Apache Flink 1.10.0 重磅发布,年度最大规模版本升级!
Flink1.10同时还标志着对Blink[1]的整合宣告完成,随着对Hive的生产级别集成及对
TPC-DS
的全面覆盖,Flink在增强流式SQL处理能力的同时也具备了成熟的批处理能力。
ApacheFlink
·
2020-02-13 23:45
flink
大数据
大数据处理
实时计算
流计算-storm
【SparkSQL】 选择 Parquet作为DF默认类型外部数据源的原因
为了了解Parquet有多么强大,我们从spark-perf-sql中挑选了24个从
TPC-DS
中衍生的查询来完成比较(总共有99个查询,一些查询在1TB的缩放比例下无法用于平面的CSV数据文件。
lemon胡
·
2019-12-24 22:00
Hive 性能测试工具 hive-testbench
github.com/hortonworks/hive-testbench/gitclonehttps://github.com/hortonworks/hive-testbench/编译:有两种数据
TPC-DS
青色蔷薇
·
2019-11-18 11:00
基于hive-testbench实现
TPC-DS
测试
文章目录
TPC-DS
测试概述1.TPC-H2.TPC-DS使用hive-testbench生成hive基准测试数据1.环境准备拉取代码安装gcc安装maven2.执行编译3.生成数据并加载到hive中4
这个昵称好不好
·
2019-05-20 09:07
大数据
漫谈加持Blink的Flink和Spark
譬如:Blink在
TPC-DS
上和Spark相比有着非常明显的性能优势,而且这种性能优势随着数据量的增加而变得越来越大。
祝威廉
·
2019-01-28 18:19
tpc-ds
测试tidb结果
1.环境说明(1)硬件环境:3台机器CPU:Intel(R)Xeon(R)
[email protected]
核MEM:256GDISK:SSD(2)软件环境:tidb环境为3台机器,3tikv+3pd+1tidb--1.1版本为1.1.0-alpha.1-77-g274a344--1.0版本为1.0.7tispark配置为1master+2slave,tidb-ansible对应版本
瑞_xlows
·
2018-02-08 17:14
TPC-DS
标准规范(三)
TPC-DS
是一套决策支持系统测试基准,主要针对零售行业。
唐犁
·
2017-10-19 14:51
Big
Data
Processing
HBase最佳实践-用好你的操作系统
作者: 范欣欣终于又切回HBase模式了,之前一段时间因为工作的原因了解接触了一段时间大数据生态的很多其他组件(诸如Parquet、Carbondata、Hive、SparkSQL、
TPC-DS
/TPC-H
·
2017-05-25 00:00
BigData
TPC-DS
测试hadoop 安装步骤
1.TPC-DS下载地址如下http://www.tpc.org/tpc_documents_current_versions/current_specifications.asp1.安装依赖yum-yinstallgccgcc-c++libstdc++-develbisonbyaccflex2.安装unzipa3083c5a-55ae-49bc-8d6f-cc2ab508f898-tpc-ds-
蘑菇丁
·
2017-05-10 10:08
hive
TPC
后面又出现了TPC-C,TPC-D,TPC-E,TPC-H,
TPC-DS
等。其中TPC-C
UltraSQL
·
2017-03-06 17:42
TPC
TPC-C
TPC-E
SQL
Server
管理
tpc-ds
性能测试
1.安装依赖yum-yinstallgccgcc-c++libstdc++-develbisonbyaccflex2.下载http://www.tpc.org/tpc_documents_current_versions/current_specifications.asp3安装unziptpc-ds-tool.zipcdv2.3.0/toolsmake4.生成数据生成100G数据./dsdgen
蘑菇丁
·
2017-03-06 11:23
经验
hive
TPC-DS
生成数据
简介其实,使用
TPC-DS
生成系统性能测试的数据,说简单也简单,说难,确实也不好做!关键是在每一步的操作中,如果遇到了问题,该怎么样处理,这个是个问题的关键。
huangmr0610
·
2017-01-14 14:32
SQL
对Imapla&Spark2.0.0SQL进行
TPC-DS
性能测试
1.tpcds_test_gentableTherearetwopartsofthisUnix-Shellproject.Part-1:Buildingthetpcds-gen-.jar,recentlyversion=1.1isuptodate.Part-2:Generatingthetpcdsflatdata,creatingtpcdstables.Part-1YOUNEEDNOTRUNPAR
蘑菇丁
·
2016-11-17 12:50
hadoop
大数据+机器学习+oracle
spark-shell用非sql API 改写 hql
这里我们来举个例子:hql先来看下想要执行的sql,这里选用了
TPC-DS
中的query3:select/*+MAPJOIN(dt,item)*/dt.d_year,item.i_brand_idbrand_id
小爷Souljoy
·
2016-08-29 12:22
tpc-ds
1.3.1的dsqgen生成查询sql用法
./dsqgen-input../query_templates/templates.lst-directory../query_templates-dialectoracle-scale1要自己在每个模板sql里加上define_END=“”;
guotong1988
·
2015-07-16 17:00
TPC-DS
建表sql
createtabletpcds.dbgen_version(dv_versionvarchar(16),dv_create_datedate,dv_create_timetime,dv_cmdline_argsvarchar(200)); createtabletpcds.customer_address(ca_address_skintegernotnull,ca_address_idcha
guotong1988
·
2015-07-15 15:00
解析大数据基准测试——TPC-H or
TPC-DS
随着开源Hapdoop、Map/Reduce、Spark、HDFS、HBASE等技术的商用化,大数据管理技术得到了突飞猛进的发展。一般来说,大数据具有3V特性,即Volume(海量)、Velocity(高速)和Variety(多样)[1]。TPC联合主席、Cisco高级工程师RaghunathNambiar进一步认为大数据还面临Value(价值)和Veracity(精确)的挑战。如何客观地比较不同
真爱无敌86
·
2015-05-19 10:54
大数据
解析大数据基准测试——TPC-H or
TPC-DS
随着开源Hapdoop、Map/Reduce、Spark、HDFS、HBASE等技术的商用化,大数据管理技术得到了突飞猛进的发展。一般来说,大数据具有3V特性,即Volume(海量)、Velocity(高速)和Variety(多样)[1]。TPC联合主席、Cisco高级工程师RaghunathNambiar进一步认为大数据还面临Value(价值)和Veracity(精确)的挑战。如何客观地比较不同
dongzhumao86
·
2015-05-19 10:00
大数据
Hadoop发行版厂商星环发布
TPC-DS
评测结果
引言大数据基础技术领域中Hadoop的地位已获得广泛认同,但目前国内外市场上的Hadoop版本也是林林总总,到底该参照什么标准来考评Hadoop,尤其是给企业应用的Hadoop发行版平台呢?大家可能都听说过TPC–TransactionProcessingPerformanceCouncil,它是一个非赢利的标准化组织。它定义了多组标准测试集用于客观地/可重现地评测数据库的性能。TPC中有个Dec
江南晚来客
·
2014-11-12 16:34
hadoop
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他