Doris物化视图

Doris 1.1.2版本部署

Doris1.1.2版本部署1Doris整体架构介绍2环境分配3前置条件4FE部署5BE部署6检查部署情况1Doris整体架构介绍Doris架构非常简单,只有两类进程。
浅谈_·2022-12-24 09:57

Doris Summit 2022 议程首公布！｜即刻报名

在数字化转型的大趋势下，“数据”成为新的生产要素已达成共识，如何更好进行数据分析成为了数据价值挖掘的关键手段。而当下大多数企业坐拥海量数据，而因资源限制、原架构冗余、数据难以迁移等问题，导致数据的实时性及准确性无法得到保证，数据的价值也大打折扣，数字化转型也遭遇瓶颈。作为当今业界最为流行的实时分析型数据库之一，ApacheDoris自开源伊始的目标就是为了帮助更多人解决数据分析的难题。凭借极致的分
·2022-12-20 12:21

olap——入门ClickHouse

文章目录ClickHousequickstart表引擎CURDHA+集群副本分片优化explain建表优化sql优化单表多表join数据一致性物化视图MaterializeMySQL引擎常见问题ClickHouse
友培·2022-12-18 08:29

喜讯 | 百度大数据4款产品通过DCA大数据能力评测

本期测评，百度4款大数据产品：时序数据库TSDB数据仓库Palo（现已更名Doris，Apache孵化中）数据科学与机器学习平台Jarvis分布式事务数据库TafDB全部顺利完成测评，获得权威认证。
百度智能云·2022-12-17 11:23

clickhouse物化视图详解

clickhouse物化视图有常见的两种模式假设源表定义如下：createtablesource_table(idint32,ageint32,create_timeDateTime)engine=mergeTree
lixia0417mul2·2022-12-15 11:13

[1.2.0新功能系列：三]Apache doris 1.2.0 Java UDF 函数开发及使用

一部分可以通过引擎自带的内置函数去解决，但内置函数不可能解决所有人的问题，所以一般SQL引擎会提供UDF功能，方便用户通过自己写逻辑来满足特定的需求，Doris也不例外。
hf200012·2022-12-15 00:17

[1.2.0新功能系列:二] Apache Doris 1.2.0 JDBC外表 及 Mutil Catalog

JDBC外表JDBCExternalTableOfDoris提供了Doris通过数据库访问的标准接口(JDBC)来访问外部表，外部表省去了繁琐的数据导入工作，也省去了之前ODBC繁杂的驱动安装部署及版本匹配问题
hf200012·2022-12-15 00:16

Doris数据更新及删除

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星1.数据更新Doris中存储的数据都是以追加（Append）的方式进入系统，这意味着所有已写入的数据是不可变更的
hf200012·2022-12-15 00:46

Apache doris 使用过程中常见问题汇总

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星这是从社区很多人在使用过程中遇到的问题进行的总结，汇总发布出来方便大家查阅1.tabletwriterwritefailed
hf200012·2022-12-15 00:46

通过Nginx TCP反向代理实现Apache Doris负载均衡

概述Nginx能够实现HTTP、HTTPS协议的负载均衡，也能够实现TCP协议的负载均衡。那么，问题来了，可不可以通过Nginx实现ApacheDoris数据库的负载均衡呢？答案是：可以。接下来，就让我们一起探讨下如何使用Nginx实现ApacheDoris的负载均衡。环境准备注意：使用Nginx实现ApacheDoris数据库的负载均衡，前提是要搭建ApacheDoris的环境，ApacheDo
hf200012·2022-12-15 00:46

Apache doris BE配置参数说明

今天刚整理完，英文版整理完成后会提交RP到社区，现在这发布一下ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星BE配置项该文档主要介绍BE的相关配置项。
hf200012·2022-12-15 00:16

doris 各种数据导入及数据备份恢复使用方式

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星dorisminiload1.创建表（这里采用DUPLICATE模型，也可以用其他模型）CREATETABLE
hf200012·2022-12-15 00:16

[1.2.0新功能系列:一] Apache Doris 1.2.0 版本 Light Schema Change

如用户可以通过FlinkCDC，可实现上游数据库到Doris的DML和DDL同步，进一步提升了实时
hf200012·2022-12-15 00:56

Apache Doris 1.2.0 Release 版本正式发布｜版本通告

亲爱的社区小伙伴们，经历数月的等候，我们很高兴地宣布，ApacheDoris于2022年12月7日迎来了1.2.0Release版本的正式发布！有近118位Contributor为ApacheDoris提交了超2400项优化和修复，感谢每一位让ApacheDoris更好的你！自从社区正式确立LTS版本管理机制后，在1.1.x系列版本中不再合入大的功能，仅提供问题修复和稳定性改进，力求满足更多社区用
·2022-12-14 14:03

Doris 入门：集群部署（二）

  使用最新的1.1.4版本Doris进行部署  云服务器环境：三台服务器hybrid01、hybrid02、hybrid03，Centos7.9，2C4G，40G硬盘  资源规划hybrid01：FE
AcWare 学习笔记·2022-12-12 01:55

秒级加速质变，Apache Doris与360数科的“化学反应”

随着信贷科技的不断发展，使大数据分析场景相应地增加了许多，对于金融科技平台而言，这些新场景对数据的安全性、准确性、实时性提出更严格的要求。与此同时，指数级增长的用户数，也向业务端施加了交付效率、稳定性、用户体验等多重压力。日前，毓数大数据平台架构全面升级，360数科完成了ApacheDoris在毓数大数据分析多场景落地应用。值得一提的是，不同于市面上应用最为广泛的实时数仓场景，360数科独创的Do
CSDN云计算·2022-12-09 23:57

Apache Doris 1.2.0 Release 版本正式发布｜版本通告

亲爱的社区小伙伴们，经历数月的等候，我们很高兴地宣布，ApacheDoris于2022年12月7日迎来了1.2.0Release版本的正式发布！有近118位Contributor为ApacheDoris提交了超2400项优化和修复，感谢每一位让ApacheDoris更好的你！自从社区正式确立LTS版本管理机制后，在1.1.x系列版本中不再合入大的功能，仅提供问题修复和稳定性改进，力求满足更多社区用
SelectDB技术团队·2022-12-08 11:53

基于 Impala 的高性能数仓实践之物化视图服务

本文将主要介绍NDHImpala的物化视图实现。接上篇讲到了虚拟数仓，它们是让一个SQL又快又好地执行的关键。
Java那点事儿·2022-12-08 09:44

[选型] 实时数仓之技术选型

2.关于实时数仓的选型如果选择hbase，建议选择kudu如果选择kudu,还可以选择doris如果选择doris，建议选择iceberg以上三种选择，要配合具体的场景；技术选型方案方案一：doris作为实时数仓
fct2001140269·2022-12-08 08:45

神通数据库常见问题解决方案

触发器只能在PL块中调用系统函数2.新建模式、新建用户3.神通数据库服务器OSRDB实例服务启动后停止4.安装数据库的时候弹出的参数配置程序点不了“下一步”按钮5.SQL错误[40000]:ERROR,未开启物化视图功能
拒绝冗余·2022-12-06 22:31

基于 Impala 的高性能数仓实践之物化视图服务

本文将主要介绍NDHImpala的物化视图实现。接上篇，前两篇分别讲了执行引擎和虚拟数仓，它们是让一个SQL又快又好地执行的关键。
·2022-12-01 13:23

多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能揭秘！

自ApacheDoris1.1.0版本发布距今已经有数月之久，在这一期间，我们重新思考并确立了社区新版本发布的流程，正式引入了LTS（Long-TermSupport，长周期支持）版本的概念，在1.1.x系列版本中不再引入大的功能Feature、仅提供问题修复和稳定性改进，力求满足更多社区用户在稳定性方面的高要求。值得高兴的是，这一行动已经有了明显的成效，目前1.1.x系列最新版本的稳定性经受了众
·2022-11-30 07:33

小米 A/B 实验场景基于 Apache Doris 的查询提速优化实践

经过一系列基于Doris的性能优化和测试，A/B实验场景查询性能的提升超过了我们的预期。希望本次分享可以给有需要的朋友提供一些参考。
·2022-11-30 06:13

【Hive---05】DDL数据定义语言『 数据库操作 | 表操作 | 视图 vs 物化视图』

文章目录1.DDL概述2.查看已存在的数据库/表/视图创建时的语句3.数据库操作⭐3.1创建数据库3.2查询数据库3.3切换数据库3.4修改数据库3.5删除数据库4.表操作⭐4.1创建表4.1.1完整建表语句⭐4.1.2external：管理表/外部表⭐4.1.3partitionedby：分区表⭐4.1.4clusteredby：分桶表⭐4.1.5rowformat：分隔符⭐4.1.6store
别闹'·2022-11-29 16:48

小白使用visual studio code——创建c#项目

1、打开vscode2、shift+ctrl+`3、创建名称为MyVscodeApp的解决方案：[zeo@doris~]$pwd/home/zeo[zeo@doris~]$lsDesktopDocumentsDownloadsMusicMyAppPicturesPublicTemplatesVideosVirtualBoxVMsvmware
Lingoesforstudy·2022-11-28 15:20

Doris 提供了完善的 Profile 机制

对于慢查询和慢导入，Doris提供了完善的Profile机制，在了解相关技术细节后，我们在线上集群开启了Profile收集，通过调度任务定时收集慢查询、慢导入的Profile信息并落库。
feidodo小程序·2022-11-26 00:27

数据60秒 | 金仓K宝带你秒懂数据库（下）

物化视图和force视图作为特殊的视图概念，物化视图和force视图各自拥有哪些特殊性？各自又具备什么样的特点和作用？请戳下方视频，查看详细内容~序列生活中，将事物按照某种标准排
金仓数据库·2022-11-25 09:53

Rowset 的元数据一直存储在内存中

支持物化视图LightSchemaChange也实现了对物化视图的支持。对读写流程修改之
zcypaicom·2022-11-24 16:40

基于Java的一个可自由拖拽的BI可视化系统（附源码）

介绍这是一个可自由拖拽的BI可视化系统支持主流的关系数据：MySQL，Oracle，PostgreSQL等同时支持ApacheDoris，这个一开始初衷就是为了Doris数据可视化分析做的后端框架使用了若依功能按项目管理数据看板看板具备分享功能可以自由拖拽实现数据看板自由拖拽实现图表开发提供数据报表开发工具提供
Java程序员-张凯·2022-11-22 21:45

StarRocks从入门到精通系列一：StarRocks简介、系统架构和产品特性

简介、系统架构和产品特性一、StarRocks简介二、系统架构1.FE2.BE3.数据管理三、产品特性1.MPP分布式执行框架2.全面向量化执行引擎3.CBO优化器4.可实时更新的列式存储引擎5.智能的物化视图
勇敢羊羊在飞奔·2022-11-21 22:38

Doris系列之建表操作

Doris系列注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2022-11-21 18:53

应用实践 | 特步集团基于 Apache Doris 的零售数据仓库项目实践

背景特步集团有限公司是中国领先的体育用品企业之一，主要从事运动鞋、服装及配饰的设计、开发、制造和销售。为了提高特步零售BI主题数据分析的准确性和时效性，降低对SAPHANA平台的依赖，2020年11月特步集团首次引入了ApacheDoris进行数据仓库搭建试点。在经历实时日报（移动端）和《特步全网零售战绩》大屏两个小项目的成功后，于2021年3月开始逐步启动特步儿童BI、特步电商BI、双十一大屏、
小晨说数据·2022-11-21 18:33

StarRocks 技术内幕 | 多表物化视图的设计与实现

StarRocksCommitter李雪岩，国双科技技术架构师、StarRocksActiveContributor龚磊（本文为作者在StarRocksSummitAsia2022上的分享）本文先介绍物化视图的一些需求分析
StarRocks_labs·2022-11-21 09:39

1024，我们干了点儿大事 | StarRocks 2.4 新版本特性介绍

StarRocks近期发布了2.4版本，核心功能有：多表物化视图，无状态的ComputeNode（CN）以及StarRocksKubernetes(K8s)Operator，catalog支持ApacheHudi
StarRocks_labs·2022-11-21 09:07

得物 × StarRocks：潮流网购社区的极速 OLAP 实践

StarRocks来支持多种数据分析场景的极速分析；架构简洁，采用了全面向量化引擎，并配备全新设计的CBO优化器，查询极速（尤其是多表关联查询）；很好地支持了实时数据分析，并能对实时更新数据进行高效查询，还支持现代化物化视图以进一步加速查询
StarRocks_labs·2022-11-21 09:06

StarRocks 技术内幕 | 多表物化视图的设计与实现

StarRocksCommitter李雪岩，国双科技技术架构师、StarRocksActiveContributor龚磊（本文为作者在StarRocksSummitAsia2022上的分享）本文先介绍物化视图的一些需求分析
·2022-11-16 23:38

可更新的物化视图

快速刷新可更新的物化视图SQL>execdbms_mview.refresh('MV_T','F');BEGINdbms_mview.refresh('MV_T','F');END;*ERRORatline1
congbao6525·2022-11-16 07:11

DM管理工具的使用

二、功能DM管理工具包含如下基本功能：1.服务器管理2.数据库实例管理3.模式对象管理4.表对象管理5.外部表对象管理6.索引对象管理7.视图对象管理8.物化视图对象管理9.存储过程对象管理10.函数对象管理
weixin_43322993·2022-11-15 08:08

字节、腾讯争先部署，ClickHouse+Doris 赶超 MySQL 810 倍

里流传着这样一句话，“一切业务数据化，一切数据业务化”。作为大数据从业者，你一定明白有数据是一回事，可要想让数据发挥价值、成为生产力是另一回事。手里得有两把刷子，才能成为大数据圈儿的“大拿”！如何实现智能路径检测，查询出符合条件的路径详情及符合路径的用户数？关于有序漏斗转化，如果想要更准确一些该怎么做？面对大量的订单记录，如果想按照地域、时间、来源等维度等进行实时分析，该怎么实现？对于海量评论数据
Java佳佳·2022-11-11 11:00

Apache Doris性能优化之Join Reorder和Doris Join调优原则

目录1.JoinReorder1.1介绍1.2JoinReorder逻辑2.DorisJoin调优原则1.JoinReorder1.1介绍JoinReorder功能可以通过代价模型自动帮助调整SQL中Join的顺序，先让大表和小表进行过滤，这样能过滤掉大表中大部分的数据。以便获得最优的Join效率。可通过会话变量开启，默认是关闭的mysql>showvariableslike'%enable_co
Bulut0907·2022-11-10 11:13

最佳实践｜Apache Doris Join 实现与调优实践

8月14号，由示说网和上海白玉兰开源开放研究院联合举办的开源大数据技术线上Meetup如期举行，ApacheDoris社区受邀参与本次Meetup，来自百度的数据内核高级研发工程师、ApacheDorisContributor李昊鹏为大家带来了题为“ApacheDoris的Join实现与调优实践”的主题分享，主要介绍了ApacheDorisJoin的实现机制以及调优策略实战，以下是分享内容。非常高
ApacheDoris·2022-11-10 11:40

一步一步编译最新版Apache Doris 0.15版本的详细过程

ApacheDoris于2021年11月29日迎来了0.15.0Release版本的正式发布！有99位Contributor为ApacheDoris提交了近700项优化和修复。在0.15.0Release版本中，增加了诸多新功能，对ApacheDoris的查询性能、易用性、稳定性方面等进行了全面优化。本文将详细演示如何一步一步完成编译最新版ApacheDoris0.15版本。一、下载Docker开
vbnetfun·2022-11-10 11:10

应用实践 | Apache Doris 在小米集团的运维实践

在小米集团，质量就是生命线，随着业务持续增长，如何保障线上Doris集群的服务质量，
ApacheDoris·2022-11-10 11:10

「硬刚Doris系列」Apache Doris的向量化和Roaring BitMap

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！一.向量化假如有个sql：select c1 , c2 from t where c1 < 100 and c4 = 10用户通过SQL语句向数据库发起计算请求，SQL中的计算主要包括两类：expression级别的计算和operator级别的计算。该SQL包含了3个operator：tablesca
王知无(import_bigdata)·2022-11-10 11:40

apache doris的一些重点笔记，参数实践调优

参数调优：FE参数：这里设置为：3-5sbdbje_replica_ack_timeout_second这里设置为：20==================================================1，命令SHOWVARIABLES;showroutineload;SHOWBACKENDS;HELPALTERTABLE;Name:'ALTERTABLE'Description
黄瓜炖啤酒鸭·2022-11-10 11:03

干货 | Apache Doris在小米集团的运维实践

本期技术干货，我们邀请到了小米OLAP引擎研发工程师魏祚、小米存储计算引擎SRE工程师孟子楠，和大家从运维的角度分享ApacheDoris在小米集团的应用实践。一、背景为了提高小米增长分析平台的查询性能以及降低平台的运维成本，2019年9月小米集团首次引入了ApacheDoris系统。在过去两年多的时间里，ApacheDoris在小米集团得到了广泛的应用，目前已经服务了增长分析、集团数据看板、天星
小米技术·2022-11-10 11:33

Doris开发手记4：倍速性能提升，向量化导入的性能调优实践

正好有Doris社区的小伙伴吐槽向量化的导入性能表现并不是很理想，就借这个机会
[虚幻私塾】·2022-11-10 11:31

Apache Doris 在橙联的应用实践：数仓架构全面革新，千万数据计算时间从 2 小时变成 3 分钟

业务背景橙联股份是一家服务全球跨境电商的科技公司，致力于通过市场分析、系统研发及资源整合，为客户提供物流、金融、大数据等多方面的服务产品，为全球跨境电商提供高品质、全方位的服务解决方案。随着公司业务的发展和数据的不断增长，早期基于MySQL的传统数仓架构已经无法应对公司数据的快速增长。业务的需求和运营的决策对于数据时效性的要求越来越高，对数仓准实时能力的需求越发强烈。为了适应快速的增长需求，橙联于
SelectDB技术团队·2022-11-10 10:51

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用，并在使用过程中逐渐发掘出ApacheDoris更多强大之处以及优势，最终决定在2022年全面应用ApacheDoris，基于ApacheDoris来构建云积互动企业级实时离线统一数仓。作者｜云
SelectDB技术团队·2022-11-10 10:51

Apache Doris数据模型详解及适用场景

在Aggregate聚合模型下，Doris也可以保存完整的明细数据，例如增加时间列。在Base表之上，我们可以创建任意多个ROLLUP表，获得更粗粒度的聚合数据。在某些多维分
Super .Wein（星痕）·2022-11-10 10:51
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他