E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【Doris】
一个人可能走得更快,但一群人会走得更远[
Doris
社区的访谈]
ApacheDoris代码仓库地址:apache/incubator-
doris
欢迎大家关注加星「社区人物志」是ApacheDoris社区推出的系列专栏,我们关注每一个对
Doris
做出过贡献的Contributor
hf200012
·
2023-10-31 20:59
Doris
big
data
人工智能
数据挖掘
生态扩展:Flink
Doris
Connector
生态扩展:FlinkDorisConnector官网地址:https://
doris
.apache.org/zh-CN/docs/dev/ecosystem/flink-
doris
-connectorflink
墨卿风竹
·
2023-10-31 20:56
flink
大数据
doris
Apache
Doris
(四十七):
Doris
表结构变更-Schema变更
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2023-10-31 07:52
大数据OLAP体系技术栈
Apache
Doris
doris
Apache
Doris
(四十八):
Doris
表结构变更-替换表
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2023-10-31 07:17
大数据OLAP体系技术栈
doris
Doris
扩容缩容
一、FE扩缩容
Doris
集群FE分为三个角色:Leader、Follower、Observer,默认只有一个Leader和多个Follower和Observer,当Leader宕机后,Followr会参与选举
爱过java
·
2023-10-30 10:06
大数据
Doris
开发手记2:用SIMD指令优化存储层的热点代码
最近一直在进行
Doris
的向量化计算引擎的开发工作,在进行CPU热点排查时,发现了存储层上出现的CPU热点问题。于是尝试通过SIMD的指令优化了这部分的CPU热点代码,取得了较好的性能优化效果。
LeeHappen
·
2023-10-30 07:28
一文教你玩转 Apache
Doris
分区分桶新功能|新版本揭秘
数据分片(Sharding)是分布式数据库分而治之(DivideAndConquer)这一设计思想的体现。过去的单机数据库在大数据量下往往面临存储和IO的限制,而分布式数据库则通过数据划分的规则,将数据打散分布至不同的机器或节点上,形成分布式存储,因此突破了单机存储空间和IO的瓶颈、使库表数据量可以无限拓展。数据分片主要有范围分片或哈希分片这两种方式,而在实际数据库的实现中,往往呈现为分区和分桶两
hf200012
·
2023-10-30 06:58
Doris
数据库
apache
java
分布式数据库Apache
Doris
简易体验
哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工作经验一位上进心十足的【大数据领域博主】!中国DBA联盟(ACDU)成员,目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。✨如果有对【数据库】感兴趣的【小可爱】,欢迎关注【IT邦德】❤️❤️❤️感谢各位大可爱小可爱!❤️❤️
IT邦德
·
2023-10-30 06:24
CDH大数据平台
分布式
数据库
apache
doris
Table[xxxx]‘s state is not NORMAL. Do not allow doing ALTER ops问题
问题:
doris
建好表后对表结构进行修改,使用alter语句修改,但多个alter执行就会报Table[xxxx]'sstateisnotNORMAL.DonotallowdoingALTERops。
今朝花落悲颜色
·
2023-10-29 08:09
数据库
doris
修改列名
1.
Doris
是否支持修改列名?在1.2.0版本之后,开启"light_schema_change"="true"选项时,可以支持修改列名。
今朝花落悲颜色
·
2023-10-29 08:39
数据库
Apache
Doris
(七) :
Doris
分布式部署(四) BE扩缩容
目录1.BE扩容(创建BE与FE关系)2.BE缩容3.BE扩缩容注意问题进入正文之前,欢迎订阅专题、对博文点赞、评论、收藏,关注IT贫道,获取高质量博客内容!
IT贫道
·
2023-10-28 17:35
Apache
Doris
大数据OLAP体系技术栈
sql
database
大数据
数据仓库
etl
墨天轮访谈 | SelectDB 衣国垒:Apache
Doris
(incubating)1.0版本特性解析与未来规划
分享嘉宾:衣国垒ApacheDorisCommitter、SelectDB联合创始人&CTO整理:墨天轮社区导读大家好,我是来自ApacheDoris社区的衣国垒,也是SelectDB的联合创始人,今天为大家分享的内容是《ApacheDoris(incubating)1.0版本特性解析与未来规划》。ApacheDoris介绍1、ApacheDoris发展历程ApacheDoris(incubati
MoMoSQL666
·
2023-10-28 17:02
apache
big
data
java
下一代实时数据库:Apache
Doris
【四】扩容缩容
2.5扩容和缩容
Doris
可以很方便的扩容和缩容FE、BE、Broker实例。2.5.1FE扩容和缩容可以通过将FE扩容至3个以上节点来实现FE的高可用。
大模型Maynor
·
2023-10-28 17:32
#
Doris
数据库
apache
《Python编程:从入门到实践》组织列表课后习题:宴会名单
names=['Sally','Jason','
Doris
','Aimee']print(names[0]+"wou
甜茸
·
2023-10-28 16:38
Flink将数据写入MySQL(JDBC)
一、写在前面在实际的生产环境中,我们经常会把Flink处理的数据写入MySQL、
Doris
等数据库中,下面以MySQL为例,使用JDBC的方式将Flink的数据实时数据写入MySQL。
文文鑫
·
2023-10-28 13:19
#
Flink
flink
大数据
基于Apache
doris
怎么构建数据中台(一)-什么是数据中台
这是数据中台系列的第一篇文章,主要阐述数据中台概念,从技术和业务视觉看数据中台及数据中台要解决的问题1.什么是数据中台数据是从业务系统产生的,而业务系统也需要数据分析的结果,那么是否可以把业务系统的数据存储和计算能力抽离,由单独的数据处理平台提供存储和计算能力?这样不仅可以简化业务系统的复杂性,还可以让各个系统采用更合适的技术,专注做本身擅长的事。这个专用的数据处理平台即数据中台。数据中台是一个用
张家锋
·
2023-10-28 10:09
Centos7 编译安装
Doris
与测试
Centos7编译安装DorisDB与测试安装只介绍docke模式下载https://github.com/DorisDB/incubator-
doris
安装docker测试过实体机编译,问题过多,所以改为
ciqingloveless
·
2023-10-28 09:11
hadoop
1.OLAP 技术选型 Apache Kylin、Apache
Doris
、Clickhouse对比
文章目录一、功能对比二、其他对比三、使用场景一、功能对比支持用Y表示,不支持用N表示,支持的不好用B表示功能ApacheKylinApacheDorisClickhouse标准SQLYYYMysql协议NYN离线导入YYY实时导入YYY聚合查询YYY明细查询BYYAdhoc查询NYY点更新NYN并发YBB分区数据原子重导YNN二、其他对比对比项ApacheKylinApacheDorisClick
终回首
·
2023-10-28 08:27
大数据
olap
clickhouse
kylin
doris
clickhouse、
Doris
、Kylin对比
clickhouseClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,是基于MPP架构的分布式ROLAP(RelationalOLAP)分析引擎主要用于在线分析处理查询(OLAP),能够使用SQL查询实时生成分析数据报告,可以支持任意指标、任意维度并秒级给出反馈。最大的特色是高性能的向量化执行引擎,而且功能丰富、可靠性高。OLAP(On-L
大地你王哥
·
2023-10-28 08:53
clickhouse
kylin
大数据
【遇见
Doris
】基于
Doris
的有道精品课数据中台建设实践
李荣谦有道精品课数据中台团队数据中台实时数仓负责人我们本次想要和大家分享一下有道精品课数据中台的架构演进过程,以及
Doris
作为一个MPP分析型数据库是如何为不断增长的业务体量提供有效支撑并进行数据赋能的
ApacheDoris
·
2023-10-28 02:44
大数据
数据库
java
flink
人工智能
【遇见
Doris
】6.29线下开发者沙龙分享--
Doris
主创团队
6月29日,
Doris
有幸得到中国信通院云大所、大数据技术标准推进委员会的支持,在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。
ApacheDoris
·
2023-10-28 02:43
大数据
python
java
数据库
编程语言
Apache
Doris
在京东广告的应用实践
最后将介绍
Doris
在我们在生产环境下的使用情况,包括ApacheDoris在京东“618”,“双11”大促中的表现。希望通过我们的使用实践为大家提供一些经验参考,也欢迎大家对我们的不足之处提出建议。
浪尖聊大数据-浪尖
·
2023-10-28 02:12
kylin
大数据
分布式
数据库
人工智能
数据分析
Apache
Doris
在京东搜索实时OLAP中的应用实践
1、前言本文讨论了京东搜索在实时流量数据分析方面,利用ApacheFlink和ApacheDoris进行的探索和实践。流式计算在近些年的热度与日俱增,从GoogleDataflow论文的发表,到ApacheFlink计算引擎逐渐站到舞台中央,再到ApacheDruid等实时分析型数据库的广泛应用,流式计算引擎百花齐放。但不同的业务场景,面临着不同的问题,没有哪一种引擎是万能的。我们希望京东搜索业务
浪尖聊大数据-浪尖
·
2023-10-28 02:12
数据仓库
大数据
数据库
人工智能
数据分析
java
应用实践 | 10 亿数据秒级关联,货拉拉基于 Apache
Doris
的 OLAP 体系演进
分享人|货拉拉大数据引擎负责人杨秋吉,张斌业务背景货拉拉成立于2013年,成长于粤港澳大湾区,是一家从事同城、跨城货运、企业版物流服务、搬家、汽车销售及车后市场服务的互联网物流公司。截至2022年4月,货拉拉的业务范围已经覆盖了国内352座城市,月活司机达到58万,月活用户达到760万,包含8条以上的业务线。货拉拉大数据体系为支撑公司业务,现在已经成立三个IDC集群、拥有上千台规模的机器数量,存储
hf200012
·
2023-10-28 02:10
Doris
apache
大数据
数据库
doris
big
data
如何基于 Apache
Doris
与 Apache Flink 快速构建极速易用的实时数仓
随着大数据应用的不断深入,企业不再满足离线数据加工计算的时效,实时数据需求已成为数据应用新常态。伴随着实时分析需求的不断膨胀,传统的数据架构面临的成本高、实时性无法保证、组件繁冗、运维难度高等问题日益凸显。为了适应业务快速迭代的特点,帮助企业提升数据生产和应用的时效性、进一步挖掘实时数据价值,实时数仓的构建至关重要。本文将分享如何基于ApacheDoris和ApacheFlink快速构建一个极速易
SelectDB技术团队
·
2023-10-28 02:40
大数据
doris
数据库
数据仓库
kafka
Doris
开发实践建表,模型选择,分区使用,函数使用问题汇总
建表注意事项1.建表时候主键需要手动指定notnull语句2.主键指定的顺序需要按照建表的语句的字段顺序3.建表中comment语句放置的位置也要注意,否则会报错。CREATETABLEIFNOTEXISTSexample_db.expamle_tbl(`user_id`LARGEINTNOTNULLCOMMENT"用户id",`date`DATENOTNULLCOMMENT"数据灌入日期时间",
HD0do(迪答数据)
·
2023-10-28 02:09
Doris
实时大数据
数据库
【大数据 -
Doris
实践】数据表的基本使用(五):ROLLUP
数据表的基本使用(五):ROLLUP1.基本概念2.Aggregate和Uniq模型中的ROLLUP2.1获得每个用户的总消费2.2获得不同城市,不同年龄段用户的总消费、最长和最短页面驻留时间3.Duplicate模型中的ROLLUP3.1前缀索引3.2ROLLUP调整前缀索引4.ROLLUP的几点说明ROLLUP在多维分析中是“上卷”的意思,即将数据按某种指定的粒度进行进一步聚合。1.基本概念在
G皮T
·
2023-10-28 02:38
#
Doris
大数据
Doris
rollup
物化索引
数据仓库
数据同步
数据库
Doris
--基础--13.4--SQl函数--字符串函数
Doris
–基础–13.4–SQl函数–字符串函数1、append_trailing_char_if_absent(VARCHARstr,VARCHARtrailing_char)如果’str’字符串非空并且末尾不包含
勤径苦舟
·
2023-10-27 15:52
Doris
sql
数据库
mysql
基于docker的
doris
集群升级
1.下载新版本的
Doris
安装包访问如下链接https://cloud.baidu.com/doc/PALO/s/Ikivhcwb5找到想使用的版本,然后下载,可以下载编译好的版本,也可以下载源码再次编译
彪悍程序员
·
2023-10-27 12:03
大数据实时分析
大数据
type:ETL_QUALITY_UNSATISFIED; msg:quality not good enough to cancel
1.
Doris
倒入数据异常,如果在日志里看不出来,需要查看具体的情况。2.可以通过执行相应的sql去查看对应的报错信息,在客户端会提示我们查看异常详情的地址。3.通过访问详情会提示我们数据出错的原因。
'煎饼侠
·
2023-10-27 01:31
数仓
etl
数据仓库
clickhouse、
Doris
、Kylin对比
clickhouseClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,是基于MPP架构的分布式ROLAP(RelationalOLAP)分析引擎主要用于在线分析处理查询(OLAP),能够使用SQL查询实时生成分析数据报告,可以支持任意指标、任意维度并秒级给出反馈。最大的特色是高性能的向量化执行引擎,而且功能丰富、可靠性高。OLAP(On-L
大地你王哥
·
2023-10-26 12:07
clickhouse
kylin
大数据
doris
的单节点安装部署(详细)
doris
的单节点安装部署环境准备:1.jdk8进入官网:https://www.oracle.com/java/technologies/downloads/在linux服务上创建jdk安装的目录mkdir
墨卿风竹
·
2023-10-26 11:30
doris
大数据
集群
doris
的be其中失败的原因
doris
的be其中失败的原因修改limits文件vim/etc/security/limits.conf1在文件的末尾处添加或者修改*softnofile204800*hardnofile204800
墨卿风竹
·
2023-10-26 11:52
doris
开源BI系统调研
DataEase比较新,主要跟
doris
集成度比较高,其他数据源支持
wangfann
·
2023-10-26 03:38
BI
bi
大数据
测试连接:MYSQL、
Doris
、ORACLE、SQLSERVER、PostgreSQL、Hive、Elasticsearch、minIO
com.jcraftjsch0.1.54cn.hutoolhutool-all5.8.5commons-netcommons-net3.8.0io.miniominio8.3.5/***数据源url拼接及连接测试**@paramsysDatasource数据源对象*@returnResponse对象*/privateMaptestConn(SysDatasourcesysDatasource){M
m0_57164467
·
2023-10-25 12:02
mysql
oracle
sqlserver
Doris
数仓的4大特点
Doris
是一款基于MPP技术的SQL分析型数据库系统,能够在海量数据的OLAP场景下提供毫秒级的查询响应性能。
Elivis Hu
·
2023-10-25 11:44
数仓
1024程序员节
Redis为什么变慢了
Doris
是一款基于MPP技术的SQL分析型数据库系统,能够在海量数据的OLAP场景下提供毫秒级的查询响应性能。
Elivis Hu
·
2023-10-25 11:08
架构师
redis
bootstrap
数据库
1024程序员节
[1.2.0新功能系列:二] Apache
Doris
1.2.0 JDBC外表 及 Mutil Catalog
JDBC外表JDBCExternalTableOfDoris提供了
Doris
通过数据库访问的标准接口(JDBC)来访问外部表,外部表省去了繁琐的数据导入工作,也省去了之前ODBC繁杂的驱动安装部署及版本匹配问题
张家锋
·
2023-10-25 10:26
Day7+8组+83号
Doris
周《学习力》
这个星期以来,我将《学习力》这本书反复翻看,由于要输出其中的一些内容,所以不得不这样做,这算是打卡才能产生的效果吧,自律真的不是嘴上说说就能行的。这本书不论是从什么地方开始读,都能给我们提供一些作者亲身实践的总结的一些方法,选出适合自己的几个方法,然后做就行了。现在对我来说人生开启了一个新的阶段,我也即将有了一个新的身份--妈妈。所以对书中作者提到的与这个有关的内容,我都会看的很慢,边读边想,面对
木词
·
2023-10-25 05:40
D77 2组阿德
doris
+《活出生命的意义》读书笔记
昨天晚上,大群里进行了每周一问,问题是:你过往人生中有过特别艰难的生活经历吗?当时自己是怎么熬过去的?这段经历给了你什么启发?我的回答是目前为止,对我来说特别艰难的生活经历应该就是怀孕初期的孕反了。怀女儿的时候,刚好是暑假,从七月23号确定怀孕开始,一直到8月31日,整整吐了一个多月,每天吃什么吐什么,如果没吃就吐胃酸液,不管吃什么都没办法缓解。当时真的就是硬撑着度过了这一个多月,前三个月瘦了六斤
阿德doris
·
2023-10-25 03:01
D47 2组阿德
doris
+《这些人,那些事》读书笔记
今天阅读的是第四辑一封情书的重量和第五辑这些人,那些事对其中《长梦》一篇印象深刻。之所以对《长梦》印象深刻是因为我也曾经像那个女孩子一样收到过这样的一封情书。那是初中的时候,因为过去那么久了,甚至已经记不起是初几了。只记得那是我收到的第一封情书,来自隔壁班一个成绩不怎么样,长得还行,说过几次话的男孩子。在那个情窦初开的年纪,班里有几个女孩子有了男朋友,每天都很甜蜜开心的样子。所以对于长得并不好看的
阿德doris
·
2023-10-25 03:07
利用 Databend + COS助力 CDH 分析 | 某医药集团
黄志武某医药集团信息中心数据库组组长,13年数据库行业从业经历,OracleOCM,关注Oracle、MySQL、Redis、MongoDB、Oceanbase、Tidb、Polardb-X、TDSQL、CDH、Clickhouse、
Doris
云存储小天使
·
2023-10-24 19:26
对象存储
COS
Flink实时写入Apache
Doris
如何保证高吞吐和低延迟
随着实时分析需求的不断增加,数据的时效性对于企业的精细化运营越来越重要。借助海量数据,实时数仓在有效挖掘有价值信息、快速获取数据反馈、帮助企业更快决策、更好的产品迭代等方面发挥着不可替代的作用。在这种情况下,ApacheDoris作为一个实时MPP分析数据库脱颖而出,它具有高性能和易用性,并且支持多种数据导入方式。结合ApacheFlink,用户可以从MySQL等上游数据库快速导入来自Kafka和
后季暖
·
2023-10-24 18:01
flink
apache
大数据
Apache
Doris
的数据导入insert、数据删除delete
目录1.数据导入insert2.数据删除delete1.数据导入insertInsertInto命令包含以下两种。其中withlabel是可选的,默认会自动生成insertintotbwithlabellabel_nameselect…;insertintotbwithlabellabel_name(col1,col2,…)values(…),(…),…;:不建议用于生产环境示例:mysql>in
Bulut0907
·
2023-10-23 22:58
#
Apache
Doris
doris
insert
数据导入
delete
数据删除
Doris
系列14-数据导入之批量删除
文章目录一.批量删除概述1.1原理1.2读取1.3CumulativeCompaction1.4BaseCompaction1.5语法二.启用批量删除支持参考:一.批量删除概述目前
Doris
支持brokerload
只是甲
·
2023-10-23 22:53
大数据和数据仓库
#
Doris
Doris批量删除
Doris数据删除
Doris删除
Apache
Doris
入门教程20:变更表结构
目前
Doris
支持以下几种修改:增加、删除列修改列类型调整列顺序增加、修改BloomFilter增加、删除bitmapindex本文档主要介绍如何创建SchemaChange作业,以及进行SchemaChange
sunjian286
·
2023-10-23 22:23
sql
数据仓库
大数据
数据分析
mysql
Apache
Doris
入门教程09:数据导入之导入场景
支持的数据源
Doris
提供多种数据导入方案,可以针对不同的数据源进行选择不同的数据导入方式。
sunjian286
·
2023-10-23 22:23
apache
数据仓库
大数据
kafka
mysql
Apache
Doris
入门教程06:数据划分
本文主要介绍
Doris
的建表和数据划分,以及建表操作中可能遇到的问题和解决方法。基本概念在
Doris
中,数据都以表(Table)的形式进行逻辑上的描述。
sunjian286
·
2023-10-23 22:52
数据结构
大数据
数据库架构
数据库
apache
Apache
Doris
(十) :
Doris
基础
目录1.基本概念2.建表语法及参数解释2.1column_definition_list2.2index_definition_list2.3engine_type2.4key_type
IT贫道
·
2023-10-23 22:19
Apache
Doris
大数据OLAP体系技术栈
sql
database
数据库
数据仓库
etl
apache
Apache
Doris
(十五) :
Doris
分区和分桶1-Range分区
目录1.分区Partition2.Ranage分区2.1创建Range分区方式2.2删分区2.3多列分区进入正文之前,欢迎订阅专题、对博文点赞、评论、收藏,关注IT贫道,获取高质量博客内容!
IT贫道
·
2023-10-23 22:19
Apache
Doris
大数据OLAP体系技术栈
sql
database
apache
数据库
数据仓库
etl
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他