E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Doris(Incuba
美团大数据查询技术
系统架构Review-Presto2.2.分布式OLAP系统扩展技术2.2.1Kylin与Cube预聚合2.2.2Druid与流式写入隔离,维度列倒排2.2.3Clickhouse与SIMD2.2.4
Doris
叔于田蒸蒸
·
2023-03-31 17:22
大数据
数据库
kylin
olap
基于Apache
doris
怎么构建数据中台(六)-数据服务管理
上次讲数据质量的控制,那么针对据仓的数据及各种数据指标怎么快捷的对外提供数据服务,怎么快速的完成数据服务接口的开发,这次我们重点围绕这个进行展开。怎么实现接口开发零代码实现数据服务从字面上理解就是数据相关的服务,和业务服务的最大不同之处它并不包含具体业务逻辑处理,与之产出的数据服务大多为统计、决策类的数据结果。很多时候大数据平台服务都是提供了数据分析的能力,分析的结果可以导出Excel,或直接查表
张家锋
·
2023-03-31 07:11
Doris
画像标签存储实践
根据画像标签的需求场景,我们常常将画像存储分为两部份,分别是:画像基本信息的存储用户画像人群的筛选需求的存储常见画像标签存储方式:根据类目创建宽表,或者根据更新的频率创建宽表创建竖表-每个用户+每个标签=一条记录竖表+横表=》分开计算,定时聚合ES标签对象存储,rowKey为user_id,HBASE存储用户明细,通过user_id关联倒排表,标签-》多个用户Id,bitmap方案一、根据类目创建
食得落
·
2023-03-30 19:19
数据中台
数据库
elasticsearch
big
data
doris
记录apache
doris
使用过程中出现的问题
1,执行创建语句过程中出现:[Err]1064-errCode=2,detailMessage=Failedtofindenoughhostinallbackends.need:3原因:语句中指定了PROPERTIES("replication_num"="3");结果BE只有2个:查看对应节点的日志:.==>./be.WARNING.log.20200921-141304<==W102618:1
黄瓜炖啤酒鸭
·
2023-03-30 07:04
apache
doris
doris报错
hive导入到doris
doris
错误汇总
doris
写入超时
1.当出现opentablets…timeout的如下错误counter:33145I080317:07:14.67113724794tablets_channel.cpp:60]opentabletschannel:(id=5c4a512f9016841d-2acd0e501ce0b799,index_id=11050),tabletsnum:13,timeout(s):600通过如下命令设置s
paulgeorge9527
·
2023-03-30 07:00
Doris
java
服务器
linux
Apache
Doris
FE配置参数
今天刚整理完,提了RP到社区,现在这发布一下,大家可以参考ApacheDoris代码仓库地址:apache/incubator-
doris
欢迎大家关注加星DorisFE配置参数该文档主要介绍FE的相关配置项
hf200012
·
2023-03-30 07:48
Doris
apache
mysql
前端
世界很好,非常好。
原创:余温八度余温You1周前泣不成声
Doris
-泣不成声当这个世界只剩下自己一个人能知道自己的时候,所有的人都离我越来越远,我不知道是故意而为之,还是在这样的地方专门有的风气!
爱上了孤独
·
2023-03-29 20:29
周检视-2018-W33#
#周检视#
Doris
20180812-0818感谢妙总分享:检视不检讨,关注做得到闪光部分关联梦想和目标,完成的部分,没完成的部分,去调整目标量化记录的数据,形象的描述月度:八大关注,高空系统周检视:写做的比较多的部分
Doris_oo
·
2023-03-29 20:30
[1.2.0新功能系列:三]Apache
doris
1.2.0 Java UDF 函数开发及使用
一部分可以通过引擎自带的内置函数去解决,但内置函数不可能解决所有人的问题,所以一般SQL引擎会提供UDF功能,方便用户通过自己写逻辑来满足特定的需求,
Doris
也不例外。
张家锋
·
2023-03-29 09:31
12.1.1、
Doris
__概述及安装,
doris
得简介,
doris
得特性,OlTP,OLAP得概念比较,OLAP引擎分类,
doris
得架构,
doris
集群部署安装
1、
Doris
简介百度研发的,贡献给apache,apacheDoris是一个现代化的基于MPP(大规模并行处理)技术的分析型数据库产品2、
Doris
特性列式存储,基于MPP(大规模并行处理)架构的分析型数据库
Loves_dccBigData
·
2023-03-29 09:08
Dcc12
Doris
&
Docker-原创
kafka
flume
hadoop
ios
12.1.2、
Doris
__基本使用、
doris
的基本命令、建表概念、语句、建表语法、建表方式(引擎存储规则)、导入数据的方式、支持的数据类型、rollup索引
1、
Doris
使用(类似mysql的操作命令)1)自带root用户进入
Doris
集群:mysql-uroot-hnode1-P9030-p(回车输入密码)创建用户(普通用户):createuser‘test
Loves_dccBigData
·
2023-03-29 08:47
Dcc12
Doris
&
Docker-原创
kafka
架构
最全的Apache
Doris
教程(收藏版)共9万+字【第一篇】由于是typora编写,有部分图片在本地,识别不出来,请细聊我
1.
Doris
简介1.1
Doris
概述ApacheDoris由百度大数据部研发(之前叫百度Palo,2018年贡献到Apache社区后,更名为
Doris
),在百度内部,有超过200个产品线在使用,部署机器超过
左美美  ̄
·
2023-03-29 08:14
Doris
大数据
数据库
Apache
Doris
系列之:深入认识实时分析型数据库Apache
Doris
ApacheDoris系列之:深入认识实时分析型数据库ApacheDoris一、
Doris
介绍二、使用场景三、技术概述一、
Doris
介绍ApacheDoris基于MPP架构的高性能、实时的分析型数据库,
最笨的羊羊
·
2023-03-29 08:42
日常分享专栏
Apache
Doris系列
实时分析型数据库
Apache
Doris
Apache
Doris
介绍
一、关于ApacheDoris和DorisDB、StarRocks的关系
Doris
最早是解决百度凤巢统计报表的专用系统,随着百度业务的飞速发展对系统进行了多次迭代,逐渐承担起百度内部业务的统计报表和多维分析需求
wapecheng
·
2023-03-29 08:19
学习笔记
apache
doris
悄悄学习
Doris
,偷偷惊艳所有人 | Apache
Doris
四万字小总结
DorisDB是由ApacheDoris核心研发团队打造的新一代企业级MPP数据库。它继承了ApacheDoris项目十多年研发成果,累积了线上数千台服务器稳定运行经验,并在此基础上,对传统MPP数据库进行了开创性的革新。DorisDB重新定义了MPP分布式架构,集群可扩展至数百节点,支持PB级数据规模,是当前唯一可以在大数据规模下进行在线弹性扩展的企业级分析型数据库。DorisDB还打造了全新的
zxfBdd
·
2023-03-29 08:17
大数据
大数据
Doris
简史 - 为分析而生的11年
期间,
Doris
从最初的只为解决百度凤巢报表的专用系统,已经成长为目前国内唯一的分析型数据库孵化项目。一路走来,
Doris
的初心从未改变。
ApacheDoris
·
2023-03-29 08:47
大数据
分布式
编程语言
hadoop
数据库
【转】Apache
Doris
介绍
转:ApacheDoris介绍_wapecheng的博客-CSDN博客_apachedoris一、关于ApacheDoris和DorisDB、StarRocks的关系
Doris
最早是解决百度凤巢统计报表的专用系统
千里之行-非一朝一夕
·
2023-03-29 07:27
apache
doris
doris
【
Doris
】Apache
Doris
索引机制解析
1引言ApacheDoris存储引擎采用类似LSM树的结构提供快速的数据写入支持。进行数据导入时,数据会先写入Tablet对应的MemTable中,当MemTable写满之后,会将MemTable里的数据刷写(Flush)到磁盘,生成一个个不超过256MB的不可变的Segment文件。MemTable采用SkipList的数据结构,将数据暂时保存在内存中,SkipList会按照Key对数据行进行排
九层之台起于累土
·
2023-03-29 07:52
【BigData】
【Doris】
java
前端
数据库
Apache
doris
架构及组件介绍
ApacheDoris代码仓库地址:apache/incubator-
doris
欢迎大家关注加星1.概述ApacheDoris是一个现代化的MPP分析型数据库产品。
hf200012
·
2023-03-29 07:14
Doris
apache
架构
数据库
大数据产品研究 - Apache
Doris
简介
说起
Doris
,这里面还有一个有意思的故事,ApacheDoris和DorisDB,不是一个产品,但是他们颇有一些渊源,大家可以从网上搜搜。
阿福Chris
·
2023-03-29 07:08
大数据
apache
数据分析
big
data
DataX(MySQL同步数据到
Doris
)
前言编译DataXdoriswriterpluginDataXmysqlreader写入数据到
Doris
性能测试Bug记录1.编译doriswriterdoriswriter插件https://github.com
大数据左右手
·
2023-03-29 07:27
Doris
mysql
数据库
database
大数据
Apache
Doris
为分析而生:
Doris
架构
开篇:ApacheDoris——为分析而生从诞生之日起,
Doris
的每一步都是为了解决切实的业务痛点,每一次转变都是在面对不同的业务挑战。一路上,
Doris
砥砺前行,凝结了众多前辈的心血。
大数据左右手
·
2023-03-29 07:15
Doris
apache
数据库
mysql
Doris
架构
Apache
Doris
成为 Apache 顶级项目
全球最大的开源软件基金会Apache软件基金会(以下简称Apache)于美国时间2022年6月16日宣布,ApacheDoris成功从Apache孵化器毕业,正式成为Apache顶级项目(Top-LevelProject,TLP)。ApacheDoris是一个基于MPP的现代化、高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高
000X000
·
2023-03-29 03:51
大数据
BIGDATA
数据分析
apache
java
服务器
字节、腾讯争先部署,ClickHouse+
Doris
赶超MySQL810倍
阿里流传着这样一句话,“一切业务数据化,一切数据业务化”。作为大数据从业者,你一定明白有数据是一回事,可要想让数据发挥价值、成为生产力是另一回事。手里得有两把刷子,才能成为大数据圈儿的“大拿”!如何实现智能路径检测,查询出符合条件的路径详情及符合路径的用户数?关于有序漏斗转化,如果想要更准确一些该怎么做?面对大量的订单记录,如果想按照地域、时间、来源等维度等进行实时分析,该怎么实现?对于海量评论数
公众号:肉眼品世界
·
2023-03-29 03:08
数据库
腾讯
大数据
编程语言
人工智能
博文推荐|Apache
Doris
单节点 Docker 集群制作教程
前言ApacheDoris是当下非常流行的MPP架构OLAP数据库,很多同学想自学/测试
Doris
的使用和能力,但是又苦于没有环境或者畏惧冗长的编译+搭建过程,整个过程极大的劝退了很多有些尝试意愿、但又由于各种客观因素无法承担过高学习成本导致尝试失败的同学
ApacheDoris
·
2023-03-29 03:49
数据库
docker
大数据
hadoop
centos
Apache
Doris
从 Apache 孵化器毕业,正式成为 Apache 顶级项目!
以下内容译自ApacheDoris官网(https://
doris
.apache.org/),点击“阅读原文”或复制以上链接前往查看。ApacheDoris是一个基于M
zhisheng_blog
·
2023-03-29 03:17
分布式
数据库
大数据
java
hadoop
Doris
业内实践经验总结
从ClickHouse到ApacheDoris,腾讯音乐内容库数据平台架构演进https://www.toutiao.com/article/7202145980144173606/?log_from=2ceee4a9de9dd_1676901048141
fragrans
·
2023-03-29 02:19
Doris
doris
mpp
Apache
Doris
从 Apache 孵化器毕业,正式成为 Apache 顶级项目!
以下内容译至ApacheDoris官网(https://
doris
.apache.org/),点击“阅读原文”或复制以上链接前往查看。ApacheDoris是一个基于M
hf200012
·
2023-03-29 02:46
Doris
apache
doris
腾讯云大数据“数智话”技术沙龙 第一期—云数据仓库 for Apache
Doris
内容回顾...
本次直播由腾讯云大数据数据仓库产品经理,腾讯云
Doris
技术负责人,腾讯云大数据资深研发工程师围绕腾讯云大数据在2022重磅发布的云托管实时数仓产品——云数据仓库forApacheDoris展开,重点介绍了其优势特性
腾讯云大数据
·
2023-03-29 02:41
数据仓库
腾讯云
大数据
云计算
并发提升 20+ 倍、单节点数万 QPS,Apache
Doris
高并发特性解读
随着用户规模的极速扩张,越来越多用户将ApacheDoris用于构建企业内部的统一分析平台,这一方面需要ApacheDoris去承担更大业务规模的处理和分析——既包含了更大规模的数据量、也包含了更高的并发承载,而另一方面,也意味着需要应对企业更加多样化的数据分析诉求,从过去的统计报表、即席查询、交互式分析等典型OLAP场景,拓展到推荐、风控、标签画像以及IoT等更多业务场景中,而数据服务(Data
SelectDB技术团队
·
2023-03-29 02:37
数据库
大数据
数据仓库
数据分析
高并发
杭银消金基于 Apache
Doris
的统一数据查询网关改造
导读:随着业务量快速增长,数据规模的不断扩大,杭银消金早期的大数据平台在应对实时性更强、复杂度更高的的业务需求时存在瓶颈。为了更好的应对未来的数据规模增长,杭银消金于2022年10月正式引入ApacheDoris1.2对现有的风控数据集市进行了升级改造,利用MultiCatalog功能统一了ES、Hive、GP等数据源出口,实现了联邦查询,为未来统一数据查询网关奠定了基础;同时,基于ApacheD
SelectDB技术团队
·
2023-03-29 02:37
大数据
hive
数据仓库
数据分析
开源
知乎基于 Apache
Doris
的 DMP 平台架构建设实践|万字长文详解
导读:知乎基于业务需求搭建了DMP平台,本文详细的介绍了DMP的工作原理及架构演进过程,同时介绍了ApacheDoris在DMP平台的应用实践,本文对大家了解DMP工作方式很有帮助,欢迎阅读。作者|用户理解&数据赋能研发Leader侯容DMP业务背景DMP平台是大家老生常谈的话题。在早期广告系统出现之后就拥有了类似的DMP平台,比如:腾讯的广点通、阿里巴巴的达摩盘等都是业界做的比较好的DMP平台典
SelectDB技术团队
·
2023-03-29 02:07
大数据
数据库
apache
Apache
Doris
1.2.3 Release 版本正式发布
GitHub下载:https://github.com/apache/
doris
/releases/tag/1.2.3-rc02官网下载页:h
SelectDB技术团队
·
2023-03-29 02:07
大数据
doris
数据仓库
数据湖
catalog
从 ClickHouse 到 Apache
Doris
,腾讯音乐内容库数据平台架构演进实践
导读:腾讯音乐内容库数据平台旨在为应用层提供库存盘点、分群画像、指标分析、标签圈选等内容分析服务,高效为业务赋能。目前,内容库数据平台的数据架构已经从1.0演进到了4.0,经历了分析引擎从ClickHouse到ApacheDoris的替换、经历了数据架构语义层的初步引入到深度应用,有效提高了数据时效性、降低了运维成本、解决了数据管理割裂等问题,收益显著。本文将为大家分享腾讯音乐内容库数据平台的数据
SelectDB技术团队
·
2023-03-29 02:20
最佳实践
clickhouse
apache
架构
娱乐
音频
Day5+8组+83号
Doris
周《学习力》
☞旧知说起“暗恋”这个词,大家都能解释出来一二,可是我若让你解释“暗时间”呢?大概有的人都觉得这是个新鲜词汇,从来没见过吧,而我也是这样的。☞新知我第一次看到暗时间的概念,是来自Angie的《学习力》,她的理解是只要符合以下定义,都是很好的暗时间范围:1.你从前没有察觉到的时间;2.察觉到后可以被有效利用的时间。那么什么类型的时间,可以被归类为暗时间?&生活常态时间:刷牙、吹头发、走路、上厕所等时
木词
·
2023-03-28 11:15
Doris
和Mysql的批同步测试
Doris
和Mysql测试结果同步类型更新表(列级)更新表(行级)追加表覆盖表
Doris
->Mysql支持支持支持支持Mysql->
Doris
支持不支持不支持不支持Mysql->
Doris
不支持更新表(
骚戴
·
2023-03-27 00:17
大数据
mysql
数据库
Day10+8+83号
Doris
周《富兰克林自传》
怎样才算是“我做的都是为你好!“为你好”多么暖心的字眼,可是这也成为了大人“绑架”孩子的一个利器。那些所谓已铺好的康庄大道真的适合你的孩子去走吗?一直认为爱是无所不能的,爱是博大的,可是爱有时也是令人窒息的。为了完成父母未完成的心愿,孩子被迫接受了自己并不喜欢的职业,为了成为大人出去炫耀的资本,孩子顶着莫名的压力奋力前行,为了成为大人口中别人家的孩子,孩子开始了无休止的叛逆。这时候,大人是否该反省
木词
·
2023-03-26 16:36
Apache
Doris
Oracle ODBC外表使用指南
1.软件环境操作系统:ubuntu18.04ApacheDoris:0.15Postgresql数据库:oracle19cUnixODBC:2.3.4OracleODBC:instantclient-odbc-linux.x64-19.13.0.0.0dbru2.Oracle安装部署因为是测试没有Oracle的环境,由于安装比较繁琐耗时,所以通过Docker进行快速安装部署2.1制作镜像安装方法是
张家锋
·
2023-03-26 14:05
你的时间值钱,你才值钱
几个好友里,做编辑的
Doris
总是有写不完的稿子,做设计的老歪天天盯着电脑,销售丁哥就连洗澡的
梅州时间管理学院
·
2023-03-24 13:18
Doris
vs ClickHouse vs GreenPlum
Doris
构建数据仓库:ClickHouse和DorisDB的对比:标准SQL语言支持ClickHouse:不支持标准SQL语言,无法直接对接主流的BI系统。
严国华
·
2023-03-23 06:30
【硬刚大数据】从零到大数据专家之Apache
Doris
篇
欢迎关注博客主页:https://blog.csdn.net/u013411339欢迎点赞、收藏、留言,欢迎留言交流!本文由【王知无】原创,首发于CSDN博客!本文首发CSDN论坛,未经过官方和本人允许,严禁转载!本文是对《【硬刚大数据之学习路线篇】2021年从零到大数据专家的学习指南(全面升级版)》的面试部分补充。硬刚大数据系列文章链接:2021年从零到大数据专家的学习指南(全面升级版)2021
王知无(import_bigdata)
·
2023-03-22 13:08
大数据成神之路
硬刚大数据系统性专栏
Apache
Doris
tablet 副本修复的原理、流程及问题定位
Doris
一个tablet有多个副本,可能因为某些情况导致状态不一致。
Doris
会尝试自动修复这些状态不一致的副本,让集群尽快从错误状态中恢复。每个副本的状态有以下几种BAD:即副本损坏。
张家锋
·
2023-03-21 17:06
Doris
部署
Doris
部署1环境准备1.1系统环境准备jdk,防火墙等关闭1.2
Doris
安装包获取1.2.1自行编译参考:
Doris
编译-ApacheDoris以1.1.3版本在Docker环境下编译为例编译机器上需要预先安装
fankuneee
·
2023-03-19 13:53
Doris
大数据
java
apache
doris
1.0.0安装时报错记录
Apachedoris安装您可以通过以下链接下载对应版本的
Doris
源码进行编译和部署。
贾斯汀玛尔斯
·
2023-03-19 13:21
Doris
doris
手把手教你编译Apache
Doris
-1.1.0版本
环境准备:需要下载
doris
-1.1.0源码,命令如下:wgethttps://dlcdn.apache.org/
doris
/1.1/1.1.0-rc05/apache-
doris
-1.1.0-src.tar.gz
梦见伊兮伊不觉
·
2023-03-19 13:20
大数据
Linux
docker
容器
apache
Doris
学习笔记之介绍、编译安装与部署
编译安装安装docker通过docker编译部署注意事项部署部署FE部署BEFS_Broker介绍概述ApacheDoris由百度大数据部研发(之前叫百度Palo,2018年贡献到Apache社区后,更名为
Doris
coder_szc
·
2023-03-19 13:48
数据库
Doris
利用Flink CDC和Flink SQL构建实时数仓Flink写入
Doris
软件环境Flink1.13.3Scala2.12
doris
0.14一、MySQL开启binlog日志、创建用户1.开启binlogMySQL8.0默认开启了binlog,可以通过代码showvariableslike
lbship
·
2023-03-19 13:43
Flink
flink
sql
Apache
Doris
的一场编译之旅
开发镜像进行编译【推荐】2.1安装Docker2.2获取源码3直接编译3.1前置要求3.2编译3.2.1CMake3.11+3.2.2GCC7.3+3.2.3Bison3.0+3.2.4其它3.2.5开始编译
Doris
3.3
Yore Yuen
·
2023-03-19 13:12
数据库
大数据
Apache
Doris
编译
MPP
Doris
编译问题之flink-connector编译
项目场景:提示:这里简述项目相关背景:
Doris
编译问题之flink-connector编译问题描述根据官网文档:https://
doris
.incubator.apache.org/zh-CN/docs
gg1314723
·
2023-03-19 13:11
Doris
flink
scala
java
doris
--Apache
Doris
1.1.0编译过程记录
1.docker的安装docker安装过程参考:https://docs.docker.com/engine/install/centos/安装前,确保网络畅通,确保登录了root账号,或者具有root权限的账号。查看当前centos系统的内核版本uname-r当前centos内核版本必须要高于3.10,满足要求之后再继续后续步骤。更新yum包sudoyumupdate-y确保yun包都更新到最新
囊萤映雪的萤
·
2023-03-19 13:09
doris
大数据
docker
linux
doris
上一页
17
18
19
20
21
22
23
24
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他