Doris

复杂查询响应速度提升10+倍，度言软件基于 Apache Doris 实时数仓建设实践

作者|杭州度言软件大数据团队杭州度言软件有限公司（度言软件）成立于2014年，是信贷不良资产处置技术服务供应商，以“智能科技赋能不良资产处置，推动贷后行业合规高效发展”为使命，运用云通讯、大数据、人工智能等智能科技为信贷不良资产处置业务赋能，提供贷后管理通信能力支撑，实现了催收作业的智能化管理，客户群体为银行、消费金融公司、AMC等金融机构和为这些机构提供人力资源外包服务的相关公司，目前已拥有20
·2022-12-27 19:35

Doris Summit 2022 主论坛议程介绍｜即刻报名

DorisSummit2022将于1月6-7日在线上正式举办，本次峰会共分2天进行，首日上午为主论坛：核心技术解析，下午为商业与数据生态分论坛，7日全天为行业用户最佳实践案例。大会汇聚了来自全球顶尖云厂商、一线互联网企业、明星创业公司以及开源领域的众多资深技术专家，旨在探讨和洞悉ApacheDoris最新技术趋势、行业最佳实践、以及数据上下游生态应用。其中在首日的主论坛上，来自Apache基金会、
·2022-12-26 18:34

Doris 1.1.2版本部署

Doris1.1.2版本部署1Doris整体架构介绍2环境分配3前置条件4FE部署5BE部署6检查部署情况1Doris整体架构介绍Doris架构非常简单,只有两类进程。
浅谈_·2022-12-24 09:57

Doris Summit 2022 议程首公布！｜即刻报名

在数字化转型的大趋势下，“数据”成为新的生产要素已达成共识，如何更好进行数据分析成为了数据价值挖掘的关键手段。而当下大多数企业坐拥海量数据，而因资源限制、原架构冗余、数据难以迁移等问题，导致数据的实时性及准确性无法得到保证，数据的价值也大打折扣，数字化转型也遭遇瓶颈。作为当今业界最为流行的实时分析型数据库之一，ApacheDoris自开源伊始的目标就是为了帮助更多人解决数据分析的难题。凭借极致的分
·2022-12-20 12:21

喜讯 | 百度大数据4款产品通过DCA大数据能力评测

本期测评，百度4款大数据产品：时序数据库TSDB数据仓库Palo（现已更名Doris，Apache孵化中）数据科学与机器学习平台Jarvis分布式事务数据库TafDB全部顺利完成测评，获得权威认证。
百度智能云·2022-12-17 11:23

[1.2.0新功能系列：三]Apache doris 1.2.0 Java UDF 函数开发及使用

一部分可以通过引擎自带的内置函数去解决，但内置函数不可能解决所有人的问题，所以一般SQL引擎会提供UDF功能，方便用户通过自己写逻辑来满足特定的需求，Doris也不例外。
hf200012·2022-12-15 00:17

[1.2.0新功能系列:二] Apache Doris 1.2.0 JDBC外表 及 Mutil Catalog

JDBC外表JDBCExternalTableOfDoris提供了Doris通过数据库访问的标准接口(JDBC)来访问外部表，外部表省去了繁琐的数据导入工作，也省去了之前ODBC繁杂的驱动安装部署及版本匹配问题
hf200012·2022-12-15 00:16

Doris数据更新及删除

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星1.数据更新Doris中存储的数据都是以追加（Append）的方式进入系统，这意味着所有已写入的数据是不可变更的
hf200012·2022-12-15 00:46

Apache doris 使用过程中常见问题汇总

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星这是从社区很多人在使用过程中遇到的问题进行的总结，汇总发布出来方便大家查阅1.tabletwriterwritefailed
hf200012·2022-12-15 00:46

通过Nginx TCP反向代理实现Apache Doris负载均衡

概述Nginx能够实现HTTP、HTTPS协议的负载均衡，也能够实现TCP协议的负载均衡。那么，问题来了，可不可以通过Nginx实现ApacheDoris数据库的负载均衡呢？答案是：可以。接下来，就让我们一起探讨下如何使用Nginx实现ApacheDoris的负载均衡。环境准备注意：使用Nginx实现ApacheDoris数据库的负载均衡，前提是要搭建ApacheDoris的环境，ApacheDo
hf200012·2022-12-15 00:46

Apache doris BE配置参数说明

今天刚整理完，英文版整理完成后会提交RP到社区，现在这发布一下ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星BE配置项该文档主要介绍BE的相关配置项。
hf200012·2022-12-15 00:16

doris 各种数据导入及数据备份恢复使用方式

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星dorisminiload1.创建表（这里采用DUPLICATE模型，也可以用其他模型）CREATETABLE
hf200012·2022-12-15 00:16

[1.2.0新功能系列:一] Apache Doris 1.2.0 版本 Light Schema Change

如用户可以通过FlinkCDC，可实现上游数据库到Doris的DML和DDL同步，进一步提升了实时
hf200012·2022-12-15 00:56

Apache Doris 1.2.0 Release 版本正式发布｜版本通告

亲爱的社区小伙伴们，经历数月的等候，我们很高兴地宣布，ApacheDoris于2022年12月7日迎来了1.2.0Release版本的正式发布！有近118位Contributor为ApacheDoris提交了超2400项优化和修复，感谢每一位让ApacheDoris更好的你！自从社区正式确立LTS版本管理机制后，在1.1.x系列版本中不再合入大的功能，仅提供问题修复和稳定性改进，力求满足更多社区用
·2022-12-14 14:03

Doris 入门：集群部署（二）

  使用最新的1.1.4版本Doris进行部署  云服务器环境：三台服务器hybrid01、hybrid02、hybrid03，Centos7.9，2C4G，40G硬盘  资源规划hybrid01：FE
AcWare 学习笔记·2022-12-12 01:55

秒级加速质变，Apache Doris与360数科的“化学反应”

随着信贷科技的不断发展，使大数据分析场景相应地增加了许多，对于金融科技平台而言，这些新场景对数据的安全性、准确性、实时性提出更严格的要求。与此同时，指数级增长的用户数，也向业务端施加了交付效率、稳定性、用户体验等多重压力。日前，毓数大数据平台架构全面升级，360数科完成了ApacheDoris在毓数大数据分析多场景落地应用。值得一提的是，不同于市面上应用最为广泛的实时数仓场景，360数科独创的Do
CSDN云计算·2022-12-09 23:57

Apache Doris 1.2.0 Release 版本正式发布｜版本通告

亲爱的社区小伙伴们，经历数月的等候，我们很高兴地宣布，ApacheDoris于2022年12月7日迎来了1.2.0Release版本的正式发布！有近118位Contributor为ApacheDoris提交了超2400项优化和修复，感谢每一位让ApacheDoris更好的你！自从社区正式确立LTS版本管理机制后，在1.1.x系列版本中不再合入大的功能，仅提供问题修复和稳定性改进，力求满足更多社区用
SelectDB技术团队·2022-12-08 11:53

[选型] 实时数仓之技术选型

2.关于实时数仓的选型如果选择hbase，建议选择kudu如果选择kudu,还可以选择doris如果选择doris，建议选择iceberg以上三种选择，要配合具体的场景；技术选型方案方案一：doris作为实时数仓
fct2001140269·2022-12-08 08:45

多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能揭秘！

自ApacheDoris1.1.0版本发布距今已经有数月之久，在这一期间，我们重新思考并确立了社区新版本发布的流程，正式引入了LTS（Long-TermSupport，长周期支持）版本的概念，在1.1.x系列版本中不再引入大的功能Feature、仅提供问题修复和稳定性改进，力求满足更多社区用户在稳定性方面的高要求。值得高兴的是，这一行动已经有了明显的成效，目前1.1.x系列最新版本的稳定性经受了众
·2022-11-30 07:33

小米 A/B 实验场景基于 Apache Doris 的查询提速优化实践

经过一系列基于Doris的性能优化和测试，A/B实验场景查询性能的提升超过了我们的预期。希望本次分享可以给有需要的朋友提供一些参考。
·2022-11-30 06:13

小白使用visual studio code——创建c#项目

1、打开vscode2、shift+ctrl+`3、创建名称为MyVscodeApp的解决方案：[zeo@doris~]$pwd/home/zeo[zeo@doris~]$lsDesktopDocumentsDownloadsMusicMyAppPicturesPublicTemplatesVideosVirtualBoxVMsvmware
Lingoesforstudy·2022-11-28 15:20

Doris 提供了完善的 Profile 机制

对于慢查询和慢导入，Doris提供了完善的Profile机制，在了解相关技术细节后，我们在线上集群开启了Profile收集，通过调度任务定时收集慢查询、慢导入的Profile信息并落库。
feidodo小程序·2022-11-26 00:27

基于Java的一个可自由拖拽的BI可视化系统（附源码）

介绍这是一个可自由拖拽的BI可视化系统支持主流的关系数据：MySQL，Oracle，PostgreSQL等同时支持ApacheDoris，这个一开始初衷就是为了Doris数据可视化分析做的后端框架使用了若依功能按项目管理数据看板看板具备分享功能可以自由拖拽实现数据看板自由拖拽实现图表开发提供数据报表开发工具提供
Java程序员-张凯·2022-11-22 21:45

Doris系列之建表操作

Doris系列注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2022-11-21 18:53

应用实践 | 特步集团基于 Apache Doris 的零售数据仓库项目实践

背景特步集团有限公司是中国领先的体育用品企业之一，主要从事运动鞋、服装及配饰的设计、开发、制造和销售。为了提高特步零售BI主题数据分析的准确性和时效性，降低对SAPHANA平台的依赖，2020年11月特步集团首次引入了ApacheDoris进行数据仓库搭建试点。在经历实时日报（移动端）和《特步全网零售战绩》大屏两个小项目的成功后，于2021年3月开始逐步启动特步儿童BI、特步电商BI、双十一大屏、
小晨说数据·2022-11-21 18:33

字节、腾讯争先部署，ClickHouse+Doris 赶超 MySQL 810 倍

里流传着这样一句话，“一切业务数据化，一切数据业务化”。作为大数据从业者，你一定明白有数据是一回事，可要想让数据发挥价值、成为生产力是另一回事。手里得有两把刷子，才能成为大数据圈儿的“大拿”！如何实现智能路径检测，查询出符合条件的路径详情及符合路径的用户数？关于有序漏斗转化，如果想要更准确一些该怎么做？面对大量的订单记录，如果想按照地域、时间、来源等维度等进行实时分析，该怎么实现？对于海量评论数据
Java佳佳·2022-11-11 11:00

Apache Doris性能优化之Join Reorder和Doris Join调优原则

目录1.JoinReorder1.1介绍1.2JoinReorder逻辑2.DorisJoin调优原则1.JoinReorder1.1介绍JoinReorder功能可以通过代价模型自动帮助调整SQL中Join的顺序，先让大表和小表进行过滤，这样能过滤掉大表中大部分的数据。以便获得最优的Join效率。可通过会话变量开启，默认是关闭的mysql>showvariableslike'%enable_co
Bulut0907·2022-11-10 11:13

最佳实践｜Apache Doris Join 实现与调优实践

8月14号，由示说网和上海白玉兰开源开放研究院联合举办的开源大数据技术线上Meetup如期举行，ApacheDoris社区受邀参与本次Meetup，来自百度的数据内核高级研发工程师、ApacheDorisContributor李昊鹏为大家带来了题为“ApacheDoris的Join实现与调优实践”的主题分享，主要介绍了ApacheDorisJoin的实现机制以及调优策略实战，以下是分享内容。非常高
ApacheDoris·2022-11-10 11:40

一步一步编译最新版Apache Doris 0.15版本的详细过程

ApacheDoris于2021年11月29日迎来了0.15.0Release版本的正式发布！有99位Contributor为ApacheDoris提交了近700项优化和修复。在0.15.0Release版本中，增加了诸多新功能，对ApacheDoris的查询性能、易用性、稳定性方面等进行了全面优化。本文将详细演示如何一步一步完成编译最新版ApacheDoris0.15版本。一、下载Docker开
vbnetfun·2022-11-10 11:10

应用实践 | Apache Doris 在小米集团的运维实践

在小米集团，质量就是生命线，随着业务持续增长，如何保障线上Doris集群的服务质量，
ApacheDoris·2022-11-10 11:10

「硬刚Doris系列」Apache Doris的向量化和Roaring BitMap

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！一.向量化假如有个sql：select c1 , c2 from t where c1 < 100 and c4 = 10用户通过SQL语句向数据库发起计算请求，SQL中的计算主要包括两类：expression级别的计算和operator级别的计算。该SQL包含了3个operator：tablesca
王知无(import_bigdata)·2022-11-10 11:40

apache doris的一些重点笔记，参数实践调优

参数调优：FE参数：这里设置为：3-5sbdbje_replica_ack_timeout_second这里设置为：20==================================================1，命令SHOWVARIABLES;showroutineload;SHOWBACKENDS;HELPALTERTABLE;Name:'ALTERTABLE'Description
黄瓜炖啤酒鸭·2022-11-10 11:03

干货 | Apache Doris在小米集团的运维实践

本期技术干货，我们邀请到了小米OLAP引擎研发工程师魏祚、小米存储计算引擎SRE工程师孟子楠，和大家从运维的角度分享ApacheDoris在小米集团的应用实践。一、背景为了提高小米增长分析平台的查询性能以及降低平台的运维成本，2019年9月小米集团首次引入了ApacheDoris系统。在过去两年多的时间里，ApacheDoris在小米集团得到了广泛的应用，目前已经服务了增长分析、集团数据看板、天星
小米技术·2022-11-10 11:33

Doris开发手记4：倍速性能提升，向量化导入的性能调优实践

正好有Doris社区的小伙伴吐槽向量化的导入性能表现并不是很理想，就借这个机会
[虚幻私塾】·2022-11-10 11:31

Apache Doris 在橙联的应用实践：数仓架构全面革新，千万数据计算时间从 2 小时变成 3 分钟

业务背景橙联股份是一家服务全球跨境电商的科技公司，致力于通过市场分析、系统研发及资源整合，为客户提供物流、金融、大数据等多方面的服务产品，为全球跨境电商提供高品质、全方位的服务解决方案。随着公司业务的发展和数据的不断增长，早期基于MySQL的传统数仓架构已经无法应对公司数据的快速增长。业务的需求和运营的决策对于数据时效性的要求越来越高，对数仓准实时能力的需求越发强烈。为了适应快速的增长需求，橙联于
SelectDB技术团队·2022-11-10 10:51

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用，并在使用过程中逐渐发掘出ApacheDoris更多强大之处以及优势，最终决定在2022年全面应用ApacheDoris，基于ApacheDoris来构建云积互动企业级实时离线统一数仓。作者｜云
SelectDB技术团队·2022-11-10 10:51

Apache Doris数据模型详解及适用场景

在Aggregate聚合模型下，Doris也可以保存完整的明细数据，例如增加时间列。在Base表之上，我们可以创建任意多个ROLLUP表，获得更粗粒度的聚合数据。在某些多维分
Super .Wein（星痕）·2022-11-10 10:51

重构实时离线一体化数仓，Apache Doris 在思必驰的应用实践

社区贡献：Doris-spark-connector的实时读写和优化。
SelectDB技术团队·2022-11-10 10:50

查询性能显著提升，Apache Doris 向量化版本在小米 A/B 实验场景的调优实践

随着小米互联网业务的快速发展，用户对ApacheDoris的查询性能提出了更高的要求，Doris向量化版本在小米内部上线已经迫在眉睫。
SelectDB技术团队·2022-11-10 10:44

两个列表的最小索引总和

LeetCode链接假设Andy和Doris想在晚餐时选择一家餐厅，并且他们都有一个表示最喜爱餐厅的列表，每个餐厅的名字用字符串表示。你需要帮助他们用最少的索引和找出他们共同喜爱的餐厅。
兜兜转转m·2022-10-31 13:21

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用，并在使用过程中逐渐发掘出ApacheDoris更多强大之处以及优势，最终决定在2022年全面应用ApacheDoris，基于ApacheDoris来构建云积互动企业级实时离线统一数仓。作者｜云
·2022-10-30 23:21

Apache Doris Colocate Join 原理实践教程

目录WhatColocateJoinWhyColocateJoinHowColocateJoin核心思路术语定义1数据导入时保证本地性2ColocateJoinQueryPlan3ColocateJoinQuerySchedule4ColocateJoinAtBucketSeqLevel5ColocateJoinMetadataMaintenance6Howtodecideaquerycancol
·2022-10-27 19:44

Apache Doris Join 优化原理详解

目录背景&目标Doris数据划分PartitionBucketJoin方式总览Broadcast/ShuffleJoinBucketShuffleJoinPlanRuleColocateJoinRuntimeFilter
·2022-10-27 19:43

Doris Join 优化原理文档详解

方式对比RuntimeFilterJoin优化RuntimeFilter类型JoinReorderDorisJoin调优方法调优案例实战案例一案例二案例三DorisJoin调优建议DorisJoin优化原理Doris
·2022-10-27 19:43

Docker搭建Doris集群监控grafana+prometheus

说明：Doris使用Prometheus和Grafana进项监控项的采集和展示。
彪悍程序员·2022-10-24 18:58

Docker安装部署Doris集群

参考Doris的开源站点，有不懂的赶紧查https://github.com/apache/incubator-doris准备好装有Docker的虚拟机，这里我们部署Doris的最低配置的集群方式部署按照官方所说
彪悍程序员·2022-10-24 18:28

Doris系列1-Doris介绍

文章目录一.Doris简介二.Doris整体架构2.1Doris整体架构简介2.2Doris数据分布2.3Doris的使用方式三.Doris关键技术3.1数据可靠性3.2易运维3.3MySQL兼容性3.4
只是甲·2022-10-24 18:20

大数据应用之 --- apache doris 集群安装部署

lsyk01FE(LEADER)lsyk02FE(FOLLOWER)、BE、BROKERlsyk03FE(OBSERVER)、BE、BROKERlsyk04BE、BROKER解压tar-xzvfapache-doris
fa_lsyk·2022-10-24 18:19

Doris实践（一）——Doris编译安装及环境准备

文章目录一、编译：1.Docker准备2.下载Docker镜像3.Doris源码下载4.挂载编译5.编译后压缩二、安装1、部署2、配置FE：3、启动FE4、配置BE5、启动be6、编译broker7、在
扫地增·2022-10-24 18:48

centos 7环境部署百度开源apache doris 1.1

了解到doris作为百度推出的分析型数据库，据文档说明，能够兼容mysql的操作，甚至客户端完全可以使用mysql客户端连接服务器进行操作。具体情况怎样，搭建一个基本环境来测试一下。
程序猿（攻城狮）·2022-10-24 17:14
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他