E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
DORIS
【技术选型】
Doris
vs starRocks
比对结论仅从当前能看到的数据中,相比于
doris
,starRocks在性能方面具备优势,且更新频率高(降低维护成本)。
偏振万花筒
·
2024-01-12 08:41
大数据
大数据
分布式
大数据
Doris
(五十四):SQL函数之日期函数(二)
文章目录SQL函数之日期函数(二)一、DAYOFMONTH(DATETIMEdate)二、dayofweek(DATETIMEdate)
Lansonli
·
2024-01-11 20:30
大数据OLAP技术体系
sql
数据库
Doris
大数据
Flink/
Doris
生产环境方案选型的一些思考
以Flink为主的计算组件和以
Doris
为代表的存储+计算一体的方案选择问题是我们在技术选型过程中最常见的问题之一。也是很多公司和业务支持过程中会遇到的问题。
王知无(import_bigdata)
·
2024-01-11 09:37
flink
大数据
Apache
Doris
聚合函数源码阅读与解析|源码解读系列
笔者最近由于工作需要开始调研ApacheDoris,通过阅读聚合函数代码切入ApacheDoris内核,同时也秉承着开源的精神,开发了array_agg函数并贡献给社区。笔者通过这篇文章记录下对源码的一些理解,同时也方便后面的新人更快速地上手源码开发。聚合函数,顾名思义,即对一组数据执行聚合计算并返回结果的函数,在统计分析过程中属于最常见的函数之一,最典型的聚合函数包括count、min、max、
SelectDB技术团队
·
2024-01-11 07:16
数据库
大数据
数据分析
数据仓库
Apache
Doris
Apache
Doris
入门 10 问
在开始之前,我们先对本文相关的名词进行解释:FE:Frontend,即
Doris
的前端节点。主要负责接收和返回客户端请求、元数据以及集群管理、查询计划生成等工作。
SelectDB技术团队
·
2024-01-11 07:16
apache
数据库
大数据
数据分析
doris
doris
批量创建分区
大数据
Doris
(十五):
Doris
分区Partition-腾讯云开发者社区-腾讯云CREATETABLEIFNOTEXISTSexample_db.example_range_tbl3(`user_id
青云游子
·
2024-01-10 15:51
大数据
doris
doris
,DUPLICATE KEY类型不支持update
明细表只能支持insert/delete,不支持update语句。update需要通过delete+insert实现
青云游子
·
2024-01-10 15:51
大数据
doris
Apache
Doris
(六十三): Spark
Doris
Connector - (3)-配置型及列映射关系
个人主页:IT贫道-CSDN博客私聊博主:私聊博主加WX好友,获取更多资料哦~博主个人B栈地址:豹哥教你学编程的个人空间-豹哥教你学编程个人主页-哔哩哔哩视频目录1.Spark操作
Doris
配置项
IT贫道
·
2024-01-10 14:35
大数据OLAP体系技术栈
Apache
Doris
apache
spark
大数据
doris
李家的张麻子:ETL工程师的数据库编程之旅,用ChatGPT打破常规!
数据库编程大赛:一条SQL计算扑克牌24点12月27日,NineData和云数据库技术社区主办,华为云、火山引擎、开源中国、云和恩墨、TDengine、云猿生数据、
DORIS
、ITPUB等协办单位和媒体
NineData
·
2024-01-10 13:58
云数据库技术
SQL
开发
etl工程师
数据库
数据仓库
mysql
云计算
sql
chatgpt
Apache
Doris
(六十二): Spark
Doris
Connector - (2)-使用
个人主页:IT贫道-CSDN博客私聊博主:私聊博主加WX好友,获取更多资料哦~博主个人B栈地址:豹哥教你学编程的个人空间-豹哥教你学编程个人主页-哔哩哔哩视频目录1.将编译jar包加入本地Maven仓库
IT贫道
·
2024-01-10 08:54
大数据OLAP体系技术栈
apache
spark
大数据
doris
大数据OLAP引擎发展原因及特性分析
在大数据高速发展时期,多个技术团队基于OLAP的应用需求,开发出多种OLAP技术,如Hive、SparkSql、FlinkSql、Impala、Kylin、ClickHouse、
Doris
等,或者在实现其他应用需求的时候
i7杨
·
2024-01-10 01:31
大数据技术分析
大数据
Doris
案例篇——长安汽车基于
Doris
的车联网数据分析平台建设实践
Doris
案例篇——长安汽车基于
Doris
的车联网数据分析平台建设实践随着消费者更安全、更舒适、更便捷的驾驶体验需求不断增长,汽车智能化已成必然趋势。
不二人生
·
2024-01-09 12:20
#
Doris
数据仓库
Doris
大数据
doris
部署
doris
-2.0.1.1部署安装一、下载
doris
安装包二、解压到/data下,修改名称三、修改fe配置文件四、启动
doris
-fe五、验证
doris
-fe六、修改be配置文件七、启动
doris
-be
码海小虾米_
·
2024-01-09 09:50
数据库
adb
doris
linux
数据库
doris
使用笔记
1将数据导到本地csvselect*fromtableNameintooutfile"file:///root/
doris
/data/dis_"formatasCSVproperties("max_file_size
西门不止会吹雪
·
2024-01-09 00:00
笔记
数据库
大数据
数仓建设学习路线(二)模型建设(1)
OLAP概念全称OnLineAnalyticalProcessing,中文名联机分析处理系统,支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果,例如、ClickHouse、
Doris
、K
语兴数据
·
2024-01-08 18:58
数仓建设-学习路线
大数据
数据仓库
人工智能
浅谈
Doris
在物联网应用
一、
Doris
简介
Doris
是一个高性能的分布式列式存储系统,支持PB级别的数据存储和查询。
shinelord明
·
2024-01-08 11:03
大数据
物联网
大数据
iotdb
Doris
初识(01)
Doris
初识初识ApacheDoris是一个基于MPP架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景
不二人生
·
2024-01-07 16:14
#
Doris
大数据
数据仓库
Doris
Doris
的概述及使用场景
Doris
介绍ApacheDoris是一个基于MPP架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景
一座野山
·
2024-01-06 16:16
bigdata
Doris
big
data
数据库开发
hbase
sql
database
Apache
Doris
2.0.2 安装步骤 Centos8
Linux操作系统版本需求Linux系统版本当前系统版本CentOS7.1及以上CentOS8Ubuntu16.04及以上-软件需求软件版本当前版本Java1.81.8.0_391GCC4.8.2及以上gcc(GCC)8.5.020210514(RedHat8.5.0-4)1、查看操作系统版本方法1:使用命令行打开终端或命令行窗口。运行以下命令来查看CentOS版本信息:cat/etc/cento
Feike_Feng
·
2024-01-06 07:30
Doris
Apache
Doris
(六十一): Spark
Doris
Connector - (1)-源码编译
博主个人B栈地址:豹哥教你学编程的个人空间-豹哥教你学编程个人主页-哔哩哔哩视频目录1.SparkDorisConnector2.Spark与
Doris
版本兼容
IT贫道
·
2024-01-05 14:40
大数据OLAP体系技术栈
apache
spark
大数据
doris
P3704数字表格(莫比乌斯反演)
题目背景
Doris
刚刚学习了fibonacci数列。
yusen_123
·
2024-01-05 11:48
数论
算法
大数据 -
Doris
系列《一》-
Doris
简介
目录1.1
Doris
概述1.2OLAP和OLTP(面试)1.应用场景联机事务处理OLTP(On-LineTransactionProcessing)联机分析处理OLAP(On-LineAnalyticalProcessing
王哪跑nn
·
2024-01-05 09:55
大数据
Doris
大数据
大数据 -
Doris
系列《二》-
Doris
安装(亲测成功版)
设置系统最大文件打开句柄数==>启动一个程序的时候,打开文件的数量就是句柄数3.时钟同步4.关闭交换分区(swap)2.2安装FE2.3安装BE2.4BE向FE注册2.5扩容和缩容(搭建集群)2.5.1
doris
王哪跑nn
·
2024-01-05 09:49
大数据
Doris
大数据
Apache
Doris
(五十八):
Doris
- Join优化原理
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.RuntimeFilterJoin优化</
IT贫道
·
2024-01-05 04:49
大数据OLAP体系技术栈
doris
优化
Apache
Doris
(五十九):
Doris
- BITMAP精准去重
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2024-01-05 04:49
大数据OLAP体系技术栈
Doris
Apache
Doris
(六十):
Doris
- 物化视图
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你学编程的个人空间-豹哥教你学编程个人主页-哔哩哔哩视频目录
IT贫道
·
2024-01-05 04:48
大数据OLAP体系技术栈
Apache
Doris
apache
doris
Doris
系列2-
Doris
编译和安装
一.编译前准备1.1环境准备主机配置:IP主机名部署10.31.1.119hp5FEFS_Broker10.31.1.120hp6BEFS_Broker10.31.1.121hp7BEFS_Broker,FEObserver10.31.1.122hp8BEFS_Broker硬件配置:每台主机:CPU4核、内存8G、硬盘150G软件版本:名称版本操作系统CentOSrelease7.8(Final)
只是甲
·
2024-01-04 19:09
Doris
数仓使用规范(经验版)
第一部分:字符集规范【强制】数据库字符集指定utf-8,并且只支持utf-8。命令规范【建议】库名统一使用小写方式,中间用下划线(_)分割,长度62字节内【建议】表名称大小写敏感,统一使用小写方式,中间用下划线(_)分割,长度64字节内第二部分:建表规范【强制】确保每个tablet大小为1-3G之间。举例:假设表内单分区数据量在100G,按天分区,bucket数量100个。【强烈建议】不要使用Au
hf200012
·
2024-01-03 19:30
数据库
java
前端
Doris
大数据
【大数据】
Doris
数仓使用规范原则
第一部分:字符集规范【强制】数据库字符集指定utf-8,并且只支持utf-8。命令规范【建议】库名统一使用小写方式,中间用下划线(_)分割,长度62字节内【建议】表名称大小写敏感,统一使用小写方式,中间用下划线(_)分割,长度64字节内第二部分:建表规范【强制】确保每个tablet大小为1-3G之间。举例:假设表内单分区数据量在100G,按天分区,bucket数量100个。【强烈建议】不要使用Au
奔向理想的星辰大海
·
2024-01-03 16:48
大数据
云原生
技术研发
大数据
数据库
数字化转型必备:数睿通 2.0 数据中台升级详解
引言转眼又过了一个月的时间,数睿通2.0数据中台也迎来了本月的更新,本次更新主要包括:数据资产完善(资源评价)数据集市完善,打通审批流程修复数据生产由于DruidSQLUtils不支持
Doris
导致无法建表的问题优化贴源数据模块
小螺旋丸
·
2024-01-03 10:51
hadoop
git
数据仓库
大数据
Apache
Doris
(五十七):
Doris
- Runtime Filter
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2024-01-02 04:42
大数据OLAP体系技术栈
Apache
Doris
apache
php
开发语言
Apache
Doris
单节点(可多节点)Docker集群制作教程
集群制作Author:苏奕嘉脚本研发Author:种益调研测试Author:杨春东前言ApacheDoris是当下非常火热和流行的MPP架构OLAP数据库,很多同学想自学/测试
Doris
的使用和能力,但是又苦于没有环境或者畏惧冗长的编译
张家锋
·
2024-01-01 11:14
【Apache
Doris
】自定义函数之 JAVA UDF 详解
【ApacheDoris】自定义函数之JAVAUDF详解一、背景说明二、原理简介三、环境信息3.1硬件信息3.2软件信息四、IDE准备五、JAVAUDF开发流程5.1源码准备5.1.1pom.xml5.1.2JAVA代码5.2mvn打包5.2.1clean5.2.2package5.3函数使用5.3.1upload5.3.2使用六、注意事项七、总结一、背景说明UDF主要适用于,用户需要的分析能力D
乙真仙人
·
2023-12-31 17:51
Apache
Doris
大数据
大数据
java
大数据
Doris
(四十五):物化视图选择最优
文章目录物化视图选择最优物化视图选择最优下面详细解释一下第一步最优物化视图是被如何选择出来的。这里分为两个步骤:对候选集合进行一个过滤。只要是查询的结果能从物化视图数据计算(取部分行,部分列,或部分行列的聚合)出都可以留在候选集中,过滤完成后候选集合大小>=1。从候选集合中根据聚合程度,索引等条件选出一个最优的也就是查询花费最少物化视图。这里再举一个相对复杂的例子,来体现这个过程。
Lansonli
·
2023-12-31 14:18
大数据OLAP技术体系
大数据
Doris
go操作
doris
踩坑记录
go操作
doris
踩坑记录1.
doris
无法用deletefrom删除整个表数据2.
doris
本身事务只支持insert、rollback、commitError1105(HY000):TException
清盏涂墨衣
·
2023-12-31 10:56
golang
开发语言
后端
【遇见
Doris
】Apache
Doris
(incubating) 0.12.0版本预览
Doris
线下沙龙完美收官!本次沙龙邀请了来自百度、美团、京东的技术大牛带来实战分享。了解更多详情请关注
Doris
官方公众号,嘉宾分享回顾会陆续放出。
ApacheDoris
·
2023-12-31 03:15
运维
大数据
数据库
python
java
【遇见
Doris
】Apache
Doris
(incubating) 0.11.0新版本预览线下沙龙
此次
Doris
有幸得到中国信通院云大所、大数据技术标准推进委员会的支持,在中国信通院举行了0.11.0新版本预览线下沙龙。
ApacheDoris
·
2023-12-31 03:45
百度
大数据
python
java
编程语言
【遇见
Doris
】Apache
Doris
在京东广告平台的应用
6月29日,
Doris
有幸得到中国信通院云大所、大数据技术标准推进委员会的支持,在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。
ApacheDoris
·
2023-12-31 03:44
运维
大数据
数据库
java
python
【遇见
Doris
】Apache
Doris
Parquet文件读取的设计与实现
6月29日,
Doris
有幸得到中国信通院云大所、大数据技术标准推进委员会的支持,在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。
ApacheDoris
·
2023-12-31 03:44
数据库
python
mysql
java
大数据
Apache
Doris
在京东搜索实时OLAP中的应用实践
1、前言本文讨论了京东搜索在实时流量数据分析方面,利用ApacheFlink和ApacheDoris进行的探索和实践。流式计算在近些年的热度与日俱增,从GoogleDataflow论文的发表,到ApacheFlink计算引擎逐渐站到舞台中央,再到ApacheDruid等实时分析型数据库的广泛应用,流式计算引擎百花齐放。但不同的业务场景,面临着不同的问题,没有哪一种引擎是万能的。我们希望京东搜索业务
小晨说数据
·
2023-12-31 03:11
Doris专栏
数据库
大数据
人工智能
数据分析
java
推荐:一个不错的介绍Apache
Doris
的PPT
原来ApacheDoris居然是百度开源出来的,不错。部分节选:完整下载地址网盘:链接:https://pan.baidu.com/s/18WR70R_f72GxCjh0lykStQ提取码:umd3复制这段内容后打开百度网盘手机App,操作更方便哦--来自百度网盘超级会员v7的分享
jackyrongvip
·
2023-12-31 03:40
doris
Apache
Doris
(五十六):
Doris
Join类型 - 四种Join对比
博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频
Doris
支持两种物理算子,一类是HashJoin,另一类是NestLoopJoin。
IT贫道
·
2023-12-30 15:32
大数据OLAP体系技术栈
Apache
Doris
doris
Flink实时电商数仓(九)
用户注册汇总表需求分析统计各窗口的注册用户数,写入
Doris
思路分析读取kafka用户注册主题数据转换数据结构string->JSONObject->javaBean使用user_info表中的数据代表用户注册设置水位线开窗聚合写入
十七✧ᐦ̤
·
2023-12-30 11:16
flink
大数据
Flink实时电商数仓之DWS层
org.apache.dorisflink-
doris
-connector-1.17com.janeluoikanalyzer测试代码如下:publicclassIkUtil{publicsta
十七✧ᐦ̤
·
2023-12-29 17:19
flink
大数据
Hive和Spark生产集群搭建(spark on
doris
)
1.环境准备1.1版本选择序号bigdata-001bigdata-002bigdata-003bigdata-004bigdata-005MySQL-8.0.31mysqlDataxDataxDataxDataxDataxDataxSpark-3.3.1SparkSparkSparkSparkSparkHive-3.1.3HiveHive1.2主要组件官网hive官网:https://hive.
tuoluzhe8521
·
2023-12-28 23:56
Hive相关
hive
spark
hadoop
大数据
yarn
doris
-升级版本
一、简介
doris
可以进行平滑升级,详情可根据官网查看安装包下载地址:github,界面二、升级步骤1.原数据备份将FE-Master节点的
doris
-meta目录进行完整备份!
与数据交流的路上
·
2023-12-28 18:14
doris
数据库
doris
-修改be的存储路径
一、背景因为之前的BE的数据目录在机械盘上,性能太低,打算换到SSD盘,在不改变端口且没有多余机器的情况下,更改磁盘存储位置相对来说比较方便,因为业务尚没有正常使用,所以操作起来更方便重点:非常不推荐这种方式更改,如无必要,不要采取该方式二、具体操作1.备份数据数据量少的时候可以用mysqldump,数据量大的时候可以选择其他方式,详情见官网mysqldump-h192.168.1.1-P9030
与数据交流的路上
·
2023-12-28 18:14
doris
数据库
Flink开发利器StreamX
在目前云原生架构的普及和湖仓一体化的大背景下,我们已经确定了将
Doris
作为离线数据仓库,将TiDB(目前已经应用于生产)作为实时数据平台,同时因为
Doris
具有onMySQL的odbc能力,所以又可以对外部数据库资源进行整合
Apache StreamPark
·
2023-12-28 15:34
StreamX
Flink
flink
大数据
big
data
Apache
Doris
(五十五):
Doris
Join类型 - Colocation Join
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.ColocationJoin原理
IT贫道
·
2023-12-28 13:43
大数据OLAP体系技术栈
Apache
Doris
apache
算法
Apache
Doris
详细教程(一)
1、
Doris
简介1.1、
doris
概述ApacheDoris由百度大数据部研发(之前叫百度Palo,2018年贡献到Apache社区后,更名为
Doris
),在百度内部,有超过200个产品线在使用,部署机器超过
白鸽呀
·
2023-12-28 12:09
Doris
apache
Doris
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他