Doris物化视图

重构实时离线一体化数仓，Apache Doris 在思必驰的应用实践

社区贡献：Doris-spark-connector的实时读写和优化。
SelectDB技术团队·2022-11-10 10:50

查询性能显著提升，Apache Doris 向量化版本在小米 A/B 实验场景的调优实践

随着小米互联网业务的快速发展，用户对ApacheDoris的查询性能提出了更高的要求，Doris向量化版本在小米内部上线已经迫在眉睫。
SelectDB技术团队·2022-11-10 10:44

两个列表的最小索引总和

LeetCode链接假设Andy和Doris想在晚餐时选择一家餐厅，并且他们都有一个表示最喜爱餐厅的列表，每个餐厅的名字用字符串表示。你需要帮助他们用最少的索引和找出他们共同喜爱的餐厅。
兜兜转转m·2022-10-31 13:21

ORACLE 数据库：表的创建、修改与删除、数据增删改

目录一、表的创建、修改与删除二、数据增删改三、单表查询四、分页查询五、单行函数六、分析函数七、集合运算八、视图九、物化视图十、序列十一、同义词十二、索引十三、PL/SQL十四、存储函数十五、存储过程十六
满分的宅男·2022-10-31 10:22

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用，并在使用过程中逐渐发掘出ApacheDoris更多强大之处以及优势，最终决定在2022年全面应用ApacheDoris，基于ApacheDoris来构建云积互动企业级实时离线统一数仓。作者｜云
·2022-10-30 23:21

Apache Doris Colocate Join 原理实践教程

目录WhatColocateJoinWhyColocateJoinHowColocateJoin核心思路术语定义1数据导入时保证本地性2ColocateJoinQueryPlan3ColocateJoinQuerySchedule4ColocateJoinAtBucketSeqLevel5ColocateJoinMetadataMaintenance6Howtodecideaquerycancol
·2022-10-27 19:44

Apache Doris Join 优化原理详解

目录背景&目标Doris数据划分PartitionBucketJoin方式总览Broadcast/ShuffleJoinBucketShuffleJoinPlanRuleColocateJoinRuntimeFilter
·2022-10-27 19:43

Doris Join 优化原理文档详解

方式对比RuntimeFilterJoin优化RuntimeFilter类型JoinReorderDorisJoin调优方法调优案例实战案例一案例二案例三DorisJoin调优建议DorisJoin优化原理Doris
·2022-10-27 19:43

Docker搭建Doris集群监控grafana+prometheus

说明：Doris使用Prometheus和Grafana进项监控项的采集和展示。
彪悍程序员·2022-10-24 18:58

Docker安装部署Doris集群

参考Doris的开源站点，有不懂的赶紧查https://github.com/apache/incubator-doris准备好装有Docker的虚拟机，这里我们部署Doris的最低配置的集群方式部署按照官方所说
彪悍程序员·2022-10-24 18:28

Doris系列1-Doris介绍

文章目录一.Doris简介二.Doris整体架构2.1Doris整体架构简介2.2Doris数据分布2.3Doris的使用方式三.Doris关键技术3.1数据可靠性3.2易运维3.3MySQL兼容性3.4
只是甲·2022-10-24 18:20

大数据应用之 --- apache doris 集群安装部署

lsyk01FE(LEADER)lsyk02FE(FOLLOWER)、BE、BROKERlsyk03FE(OBSERVER)、BE、BROKERlsyk04BE、BROKER解压tar-xzvfapache-doris
fa_lsyk·2022-10-24 18:19

Doris实践（一）——Doris编译安装及环境准备

文章目录一、编译：1.Docker准备2.下载Docker镜像3.Doris源码下载4.挂载编译5.编译后压缩二、安装1、部署2、配置FE：3、启动FE4、配置BE5、启动be6、编译broker7、在
扫地增·2022-10-24 18:48

centos 7环境部署百度开源apache doris 1.1

了解到doris作为百度推出的分析型数据库，据文档说明，能够兼容mysql的操作，甚至客户端完全可以使用mysql客户端连接服务器进行操作。具体情况怎样，搭建一个基本环境来测试一下。
程序猿（攻城狮）·2022-10-24 17:14

使用Docker快速搭建Doris集群

好的，坏的，回头看都是对的，你要相信一切都是最好的安排想深入交流doris的私聊我加微信xiaolm1213以DORIS-0.12.21-release为例，如果想自己编译也可以，去下载docker镜像进行编译
来一块提拉米苏·2022-10-24 17:44

Apache Doris 单节点（可多节点）Docker集群制作教程

集群制作Author：苏奕嘉脚本研发Author：种益调研测试Author：杨春东前言ApacheDoris是当下非常火热和流行的MPP架构OLAP数据库，很多同学想自学/测试Doris的使用和能力，但是又苦于没有环境或者畏惧冗长的编译
hf200012·2022-10-24 17:10

Apache Doris1.0版本集群搭建、负载均衡与参数调优

ApacheDoris我的架构是3FE+7BE首先操作系统安装要求#设置系统最大打开文件句柄数vi/etc/security/limits.conf*softnofile65536*hardnofile65536时钟同步Doris
Mumunu-·2022-10-24 17:40

Apache Doris 环境安装部署

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星这里以百度的Doris发行版Palo-0.14.13版本为例进行演示编译安装部署1.Doris编译1.1docker
hf200012·2022-10-24 17:40

Apache Doris集群搭建（BE扩容）

BE节点的扩容和缩容过程，不影响当前系统运行以及正在执行的任务，并且不会影响当前系统的性能。数据均衡会自动进行。根据集群现有数据量的大小，集群会在几个小时到1天不等的时间内，恢复到负载均衡的状态。1、添加两个BE节点（1）命令ALTERSYSTEMADDBACKENDMySQL[(none)]>ALTERSYSTEMADDBACKEND"10.17.12.158:9050";QueryOK,0ro
程裕强·2022-10-24 17:10

Apache Doris集群搭建（FE扩容）

参考官方文档http://doris.apache.org/master/zh-CN/installing/install-deploy.html#%E6%89%A9%E5%AE%B9%E7%BC%A9%
程裕强·2022-10-24 17:09

Doris集群环境搭建

Doris集群机器规划以下是Doris集群的服务器规划配置信息，目前采用3节点混部模式。FE3个实例，BE3个实例，构成最低配集群。
潮浪之巅·2022-10-24 17:04

Apache Doris 1.1.3 版本正式发布！｜版本通告

亲爱的社区小伙伴们，我们很高兴地告诉大家，在2022年10月17日我们迎来了ApacheDoris1.1.3版本的正式发布。作为1.1LTS版本基础之上的Bugfix版本，在1.1.3版本中有超过80个Issue或性能优化项被合入，系统稳定性和性能得以进一步加强，推荐所有用户下载和使用。下载使用GitHub下载：https://github.com/apache/dor...官网下载页：https
·2022-10-17 14:33

clickhouse 批量插入数据及ClickHouse常用命令详解

目录一.安装使用Ⅰ).安装Ⅱ).配置Ⅲ).启停服务二.常用命令Ⅰ).创建表Ⅱ).创建物化视图Ⅲ).插入数据Ⅳ).查询数据Ⅴ).创建NESTED表Ⅵ).NESTED表数据查询Ⅶ).配置字典项Ⅷ).字典查询
·2022-10-14 23:55

基于 Impala 的高性能数仓实践之物化视图服务

本文将主要介绍NDHImpala的物化视图实现。接上篇，前两篇分别讲了执行引擎和虚拟数仓，它们是让一个SQL又快又好地执行的关键。
·2022-10-13 18:39

实时数仓-Doris ON ES

原理介绍：原文点击Doris通过创建外部表方式将Doris的分布式查询规划能力和ES(Elasticsearch)的全文检索能力相结合，提供更完善的OLAP分析场景解决方案，支持：ES中的多index分布式
不看白不看，看了不白看·2022-10-12 20:24

Yukon对气象观测数据的处理方法

Yukon对气象观测数据的处理方法目的需求工具环境部署生成空间数据插入网格物化视图作者：YuCJ目的需求气象数据来自多个观测站点，是离散的，想要得到连续的变化显示效果，可以使用Yukon中的栅格插值算法
supermapsupport·2022-10-12 07:58

得物 × StarRocks：潮流网购社区的极速 OLAP 实践

StarRocks来支持多种数据分析场景的极速分析；架构简洁，采用了全面向量化引擎，并配备全新设计的CBO优化器，查询极速（尤其是多表关联查询）；很好地支持了实时数据分析，并能对实时更新数据进行高效查询，还支持现代化物化视图以进一步加速查询
·2022-10-11 20:32

重构实时离线一体化数仓，Apache Doris 在思必驰的应用实践

社区贡献：Doris-spark-connector的实时读写和优化。
·2022-10-10 16:40

恭喜 SelectDB 三位开发者成为 Apache Doris 新晋 Committer！

初秋虽至，但开源社区的温度仍然热烈！最近，经过ApacheDoris项目管理委员会的推荐与投票，ApacheDoris社区正式迎来了7位新晋Committer的加入，值得关注的是，这7位新晋Committer中有3位来自SelectDB，分别是李文强（GithubID：Gabriel39）、张文歆（GithubID：morrySnow）、文杰（GithubID：jackwener）。他们对开源一腔
SelectDB技术团队·2022-10-10 13:48

如何进行 Apache Doris 集群 Docker 快速部署

作者：苏奕嘉｜SelectDB生态研发工程师Docker容器化部署是当前最常见的部署方式之一，具有创建简单、快速部署、移植性强等特点，可极大节省应用开发、测试和部署时间，一次构建，随处运行。本教程可指导有快速部署测试和Docker学习需求的同学，快速进行部署单节点ApacheDoris集群或伪分布式ApacheDoris集群。同时介绍如何自主的构建ApacheDoris的Docker生态内容，如D
SelectDB技术团队·2022-10-10 13:18

Doris Connector 结合 Flink CDC 实现 MySQL 分库分表 Exactly Once精准接入

导读：本篇文档将演示如何使用ApacheDorisFlinkConnector结合FlinkCDC以及DorisStreamLoad的两阶段提交，实现MySQL数据库分库分表实时高效接入，并实现ExactlyOnce。作者｜ApacheDorisPMC成员张家锋1.概述在实际业务系统中为了解决单表数据量大带来的各种问题，我们通常采用分库分表的方式对库表进行拆分，以达到提高系统的吞吐量。但是这样给后
SelectDB技术团队·2022-10-10 13:17

小米如何搭建以 Apache Doris 的核心数据生态｜覆盖10+业务线

本篇文章转录自Doris社区线上Meetup主题演讲，旨在分享ApacheDoris在小米数据场景的落地实践与优化实践。
SelectDB技术团队·2022-10-10 13:17

如何高效解决 C++内存问题，Apache Doris 实践之路｜技术解析

导读：ApacheDoris使用C++语言实现了执行引擎，C++开发过程中，影响开发效率的一个重要因素是指针的使用，包括非法访问、泄露、强制类型转换等。本文将会通过对Sanitizer和CoreDump分析工具的介绍来为大家分享：如何快速定位ApacheDoris中的C++问题，帮助开发者提升开发效率并掌握更高效的开发技巧。作者｜ApacheDorisCommitter杨勇强ApacheDoris
SelectDB技术团队·2022-10-10 13:17

Apache Doris 安装部署指南

前言本文隶属于专栏《大数据安装部署》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！准备建议下载下面的2个安装包ApacheDoris1.1.2FE安装包ApacheDoris1.1.2BE安装包另外建议参考我的这篇博客部署好MySQL客户端——CentOS7安装MySQL5.7部署FE首先将FE安装包复制到指定的节点。配置FE配置文件是conf/fe.conf。注意：
Shockang·2022-10-10 11:39

字节跳动基于Doris的湖仓分析探索实践

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群Doris简介Doris是一种MPP架构的分析型数据库，主要面向多维分析，数据报表，用户画像分析等场景。
·2022-09-29 15:17

得物基于 StarRocks 的 OLAP 需求实践

StarRocks来支持多种数据分析场景的极速分析；架构简洁，采用了全面向量化引擎，并配备全新设计的CBO优化器，查询速度（尤其是多表关联查询）；很好地支持实时数据分析，并能实现对实时更新数据的高效查询，还支持现代化物化视图
·2022-09-29 11:01

Apache Doris的Bitmap索引和BloomFilter索引使用及注意事项

目录1.Bitmap索引的使用1.1Bitmap索引介绍1.2Bitmap索引使用的注意事项1.3Bitmap索引的使用2.BloomFilter索引2.1BloomFilter索引介绍2.2BloomFilter原理2.3BloomFilter索引的使用2.4DorisBloomFilter使用场景2.5DorisBloomFilter使用注意事项1.Bitmap索引的使用1.1Bitmap索引
·2022-09-26 20:47

Doris入门到精通-阶段一（简介&安装&使用）

简介ApacheDoris是一个基于MPP架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，ApacheDoris能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景，用户可以在此之上构建用户行为分析、AB实验平台、日志检索分析、用户画像分析、
顶尖高手养成计划·2022-09-26 20:34

「ClickHouse系列」实时分析优化AggregateFunction及物化视图

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜八股文教给我，你们专心刷题和面试Hi，我是王知无，一个大数据领域的原创作者。放心关注我，获取更多行业的一手消息。AggregateFunctionAggregatingMergeTree有些许数据立方体的意思，它能够在合并分区的时候，按照预先定义的条件，聚合数据。同时，根据预先定义的聚合函数，计算数据并通过二进制的格式存入表内。将同一分组下
王知无(import_bigdata)·2022-09-22 05:22

故障分析 | ClickHouse 物化视图插入时间变为“1970-01-01 08:00:00”问题复盘

物化视图使用to的方式写入到存储表中，即如下：CREATE MATERIALIZED VIEW[IF NOT EXISTS][db.]table_name[ON CLUSTER] TO[db.]nameASSELECT
ActionTech·2022-09-21 18:11

如何进行 Apache Doris 集群 Docker 快速部署

作者：苏奕嘉｜SelectDB生态研发工程师Docker容器化部署是当前最常见的部署方式之一，具有创建简单、快速部署、移植性强等特点，可极大节省应用开发、测试和部署时间，一次构建，随处运行。本教程可指导有快速部署测试和Docker学习需求的同学，快速进行部署单节点ApacheDoris集群或伪分布式ApacheDoris集群。同时介绍如何自主的构建ApacheDoris的Docker生态内容，如D
·2022-09-20 11:33

「硬刚Doris系列」Doris高级用法

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！1.1添加RollupRollup可以理解为Table的一个物化索引结构。物化是因为其数据在物理上独立存储，而索引的意思是，Rollup可以调整列顺序以增加前缀索引的命中率，也可以减少key列以增加数据的聚合度。以下举例说明。原表table1的Schema如下:+----------+--------
王知无(import_bigdata)·2022-09-15 16:24

硬刚Doris系列」Apache Doris基本使用和数据模型

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：八股文教给我，你们专心刷题和面试一.基础使用1.1创建数据库MySQL> CREATE DATABASE example_db;MySQL> SHOW DATABASES;+--------------------+| Database           |+--------------------+| example_db 
王知无(import_bigdata)·2022-09-15 16:54

恭喜 SelectDB 三位开发者成为 Apache Doris 新晋 Committer！

初秋虽至，但开源社区的温度仍然热烈！最近，经过ApacheDoris项目管理委员会的推荐与投票，ApacheDoris社区正式迎来了7位新晋Committer的加入，值得关注的是，这7位新晋Committer中有3位来自SelectDB，分别是李文强（GithubID：Gabriel39）、张文歆（GithubID：morrySnow）、文杰（GithubID：jackwener）。他们对开源一腔
·2022-09-15 14:53

故障分析 | ClickHouse 物化视图插入时间变为“1970-01-01 08:00:00”问题复盘

物化视图使用to的方式写入到存储表中，即如下：CREATE MATERIALIZED VIEW[IF NOT EXISTS][db.]table_name[ON CLUSTER] TO[db.]nameASSELECT
·2022-09-14 14:44

比MySQL快801倍，OLAP两大神器ClickHouse和Doris到底怎么选？

对于匠人而言，一项手艺，如果学不会，结果只有两种：一是低头求人，二是花钱买成品。对于程序员而言，一款热门软件，如果玩不转，结果也是两种：一是向高手求教，二是看着别人升职加薪。2021年4月程序员薪资水平，大数据开发工程师：月薪低至5K，高达45K，差距相当大在信息化时代，数据即价值。在商业运作的营销战场，数据分析OLAP对于高层决策者而言，无异于策马扬鞭的实时导航，速度和精准度方面是否具备优势往往
公众号:肉眼品世界·2022-09-14 07:16

Clickhouse物化视图进阶：Projection

Projection前言概念特点缺陷分类如何选择正确地ProjectionClickhouse物化视图痛点Projection使用通用的机制完备地解决了前述三大问题Projection的一致性保障前言Projection
派大星的海洋ku·2022-09-14 07:16

Apache Doris 快速学习大纲

1.介绍Doris是一种MPP架构的分析型数据库，主要面向多维分析、数据报表、用户画像分析等场景。自带分析引擎和存储引擎，支持向量化执行引擎，不依赖其他组件，兼容MySQL协议。
aaaak_·2022-09-06 20:19

如何高效解决 C++内存问题，Apache Doris 实践之路｜技术解析

导读：ApacheDoris使用C++语言实现了执行引擎，C++开发过程中，影响开发效率的一个重要因素是指针的使用，包括非法访问、泄露、强制类型转换等。本文将会通过对Sanitizer和CoreDump分析工具的介绍来为大家分享：如何快速定位ApacheDoris中的C++问题，帮助开发者提升开发效率并掌握更高效的开发技巧。作者｜ApacheDorisCommitter杨勇强ApacheDoris
·2022-09-06 15:18

如何高效解决 C++内存问题，Apache Doris 实践之路｜技术解析

导读：ApacheDoris使用C++语言实现了执行引擎，C++开发过程中，影响开发效率的一个重要因素是指针的使用，包括非法访问、泄露、强制类型转换等。本文将会通过对Sanitizer和CoreDump分析工具的介绍来为大家分享：如何快速定位ApacheDoris中的C+
SeleectDB·2022-09-05 17:00
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他