E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
carbondata
Holodesk VS
CarbonData
总概Holodesk应用场景增强在交互分析中Ad-hocquery的高效性支持流应用insert&update&delete这里写图片描述
CarbonData
这里写图片描述应用场景支持bigscan&少列结果支持在亚秒级响应主键查找支持大数据上涉及一个
小爷Souljoy
·
2020-04-06 07:48
提交PR的git 流程
前言上次花了点时间让
CarbonData
集成到StreamingPro中,方便大家更快速的体验到
CarbonData
的好处,集成完毕后就写了篇文章:让
CarbonData
使用更简单文章里面有下载链接,下载下来就能用
祝威廉
·
2020-04-03 09:13
CarbonData
1.2.0集成Spark 2.1.0调研
编译
carbondata
1.2已经支持hive+presto,carbon生态圈基本健全。
分裂四人组
·
2020-03-23 01:49
CarbonData
集群模式体验
前言之前专门写过一篇
CarbonData
的文章;由
CarbonData
想到了存储和计算的关系。可惜碍于时间问题到现在才开始真正的尝试。
祝威廉
·
2020-03-14 13:04
让
CarbonData
使用更简单
CarbonData
是什么引用官方的说法:ApacheCarbonData是一种新的高性能数据存储格式,针对当前大数据领域分析场景需求各异而导致的存储冗余问题,
CarbonData
提供了一种新的融合数据存储方案
祝威廉
·
2020-03-01 14:14
利用 Spark DataSource API 实现Rest数据源
典型如Parquet,
CarbonData
,Postgrep(JDBC类的都OK)等实现。本文则介绍如何利用SparkDataSource对标准Rest接口实现读取引子先说下这个需求的来源。
祝威廉
·
2020-02-29 04:12
CarbonData
实践(一)
前言
CarbonData
拥有不错的明细查询能力,比如简单的where条件过滤,性能大概是Parquet的20倍。
祝威廉
·
2020-02-14 18:51
CarbonData
编译打包
背景
CarbonData
是什么?
数大招疯
·
2020-02-11 04:31
单表千亿电信大数据场景,使用Spark+
CarbonData
替换Impala案例
【背景介绍】国内某移动局点使用Impala组件处理电信业务详单,每天处理约100TB左右详单,详单表记录每天大于百亿级别,在使用impala过程中存在以下问题:详单采用Parquet格式存储,数据表使用时间+MSISDN号码做分区,使用Impala查询,利用不上分区的查询场景,则查询性能比较差。在使用Impala过程中,遇到很多性能问题(比如catalog元数据膨胀导致元数据同步慢等),并发查询性
mtxcat
·
2020-01-09 15:00
大数据小视角3:
CarbonData
,来自华为的中国力量
华为公司在2016年开源了类parquet的列存格式:
CarbonData
,并且贡献给了Apache社区。
LeeHappen
·
2019-12-23 05:44
《深度访谈:华为开源数据格式
CarbonData
项目,实现大数据即席查询秒级响应》
深度访谈:华为开源数据格式
CarbonData
项目,实现大数据即席查询秒级响应Tina阅读数:146012016年7月13日19:00华为宣布开源了
CarbonData
项目,该项目于6月3日通过Apache
cx_2016
·
2019-12-17 14:00
carbondata
编译部署
简介
carbondata
是华为开源的一种数据格式(如textfile,parquet,ORC……),号称实现大数据即席查询秒级响应。支持hadoop列式存储,文件格式,支持索引、压缩以及解编码等。
pholien
·
2019-12-14 12:52
《
CarbonData
》
深度访谈:华为开源数据格式
CarbonData
项目,实现大数据即席查询秒级响应Tina阅读数:145842016年7月13日19:00华为宣布开源了
CarbonData
项目,该项目于6月3日通过Apache
cx_2016
·
2019-12-13 12:00
CarbonData
安装
前一阶段看下
CarbonData
,说是基于HDFS列式存储,据说性能很好,支持复杂的查询,对我们的业务来说目前很需要,所以想尝试下。1.源码下载去官网下载源码,没有编译好的,只能自己编译,好搓哦。
明翼
·
2019-11-05 12:14
由
CarbonData
想到了存储和计算的关系
原本不知道啥时候才有时间写,没想到在等高铁的时候就顺带写了。这篇文章谈谈我对目前存储和计算该如何结合的一些看法交代下背景,之前花了半天时间试用了下,主要想解决ElasticSearch历史数据查询的问题,之前出现过在ES上查询一个月数据直接把一些节点跑挂了。然后我打算把历史数据单独出来,这个时候有三个选择:将历史数据导入到Apachekylin,这是一个风头还不错的产品使用SparkParquet
祝威廉
·
2019-11-04 03:39
【译】Apache
CarbonData
:一种为更加快速数据分析而生的新Hadoop文件版式
github:https://github.com/apache/incubator-
carbondata
参考:陈亮,华为:《Spark+
CarbonData
(NewFileFormatForFasterDataAnalysis
小爷Souljoy
·
2019-11-03 00:10
Flink+Druid构建实时OLAP的探索
方案实时入库SQL支持度Spark+
CarbonData
支持SparkSQL语法丰富Kylin不支持支持joinFlink+Druid支持0.15以前
ChouYarn
·
2019-08-09 18:00
Carbondata
+ Spark
1.Spark环境2.
carbondata
_XXX.jar包3.carbon.properties配置文件:#carbon.storelocationcarbon.storelocation=/tmp/
merrily01
·
2019-04-18 00:00
CarbonData
Carbon Thrift Server集成OSS - 测试步骤
环境信息:CarbonDataCarbonThriftServer集成OSS-环境搭建1、运行carbondatathriftserver/home/
carbondata
/spark-2.2.1-bin-hadoop2.7
文竹小二
·
2019-02-03 22:58
CarbonData
Carbon Thrift Server集成OSS - 环境搭建
1、基础环境见:
CarbonData
集成OSS-基础环境搭建2、spark环境cd~wgethttp://archive.apache.org/dist/spark/spark-2.2.1/spark-
文竹小二
·
2019-02-03 22:11
CarbonData
SDK集成OSS - 测试步骤
1、环境搭建见:
CarbonData
集成OSS-基础环境搭建2、执行如下命令java-classpath/home/
carbondata
/
carbondata
/assembly/target/scala
文竹小二
·
2019-02-03 19:12
Apache
CarbonData
1.5.0 发布,华为大数据存储方案
CarbonData
1.5.0发布了,该版本更贴近于统一分析。我们希望能够从更多的引擎/库中读取
CarbonData
文件,以支持各种用例。
·
2018-10-25 22:00
软件更新新闻
carbondata
1.1.0安装文档
1.概念
carbondata
是一种带索引的列型数据格式,用于大数据快速分析平台例如:hadoop、spark等。说白了:一种数据格式!
九师兄-梁川川
·
2018-09-26 14:24
数据格式-carbondata
(HDP2.6.2)
Carbondata
1.3.1+Spark2.1.0+Hadoop2.7.3实现
一、
Carbondata
下载编译1、下载
Carbondata
代码包https://github.com/apache/
carbondata
/archive/apache-
carbondata
-1.3.1
Jonathan丶Wei
·
2018-03-28 18:58
HBase最佳实践-用好你的操作系统
作者: 范欣欣终于又切回HBase模式了,之前一段时间因为工作的原因了解接触了一段时间大数据生态的很多其他组件(诸如Parquet、
Carbondata
、Hive、SparkSQL、TPC-DS/TPC-H
·
2017-05-25 00:00
BigData
CCTC 2017开幕在即,全部讲师和议程公布
50+位Spark、
CarbonData
、HBase、Docker、Mesos、Kubernetes、Rancher、
少数pai
·
2017-05-08 13:23
人工智能
cctc
spark
云计算
大数据
使用StreamingPro 快速构建Spark SQL on
CarbonData
前言
CarbonData
已经发布了1.0版本,变更还是很快的,这个版本已经移除了kettle了,使得部署和使用变得很简单,而且支持1.6+,2.0+等多个Spark版本。
祝威廉
·
2017-02-21 13:52
华为开源数据格式
CarbonData
项目,实现大数据即席查询秒级响应
华为宣布开源了
CarbonData
项目,该项目于6月3日通过Apache社区投票,成功进入Apache孵化器。
CarbonData
是一种低时延查询、存储和计算分离的轻量化文件存储格式。
Footloose_
·
2017-02-06 10:04
Other(其他)
让
CarbonData
使用更简单
CarbonData
是什么引用官方的说法:ApacheCarbonData是一种新的高性能数据存储格式,针对当前大数据领域分析场景需求各异而导致的存储冗余问题,
CarbonData
提供了一种新的融合数据存储方案
祝威廉
·
2016-11-29 19:00
深度访谈:华为开源数据格式
CarbonData
项目,实现大数据即席查询秒级响应
华为宣布开源了
CarbonData
项目,该项目于6月3日通过Apache社区投票,成功进入Apache孵化器。
CarbonData
是一种低时延查询、存储和计算分离的轻量化文件存储格式。
曹振华
·
2016-07-24 12:38
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他