E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Doris物化视图
Apache
Doris
系列: 基础篇-Routine Load
简介RoutineLoad支持用户提交一个常驻的导入任务,通过不断的从指定的数据源读取数据,将数据导入到
Doris
中。
修破立生
·
2023-10-18 21:25
Apache
Doris
apache
kafka
java
Apache
Doris
系列: 基础篇-创建数据表
本文介绍
Doris
怎么创建表及其他的相关操作。连接
Doris
部署完成
Doris
之后,可以通过任意MySQL客户端来连接
Doris
。
修破立生
·
2023-10-18 21:55
Apache
Doris
big
data
大数据
Apache
Doris
系列: 基础篇-Stream Load
文章目录简介StreamLoad的API地址例子简介StreamLoad提供HTTPAPI提交数据导入任务,支持本地数据文件(csv,json)的导入。特点:同步导入保证数据原子性,导入一批数据时,要么全部成功,要么全部失败StreamLoad的API地址http://fe_host:http_port/api/{db}/{table}/_stream_loadfe_hostFE节点的IP地址ht
修破立生
·
2023-10-18 21:55
Apache
Doris
big
data
大数据
apache
Apache
Doris
入门教程24:查询和导入性能分析
查询分析
Doris
提供了一个图形化的命令以帮助用户更方便的分析一个具体的查询或导入。本文介绍如何使用该功能。查询计划树SQL是一个描述性语言,用户通过一个SQL来描述想获取的数据。
sunjian286
·
2023-10-18 21:23
数据库
mysql
数据仓库
数据分析
大数据
Apache
Doris
入门教程19:数据更新及删除
批量删除目前
Doris
支持BrokerLoad,RoutineLoad,StreamLoad等多种导入方式,对于数据的删除目前只能通过delete语句进行删除,使用delete语句的方式删除时,每执行一次
sunjian286
·
2023-10-18 21:23
数据库
mysql
数据仓库
数据分析
大数据
Apache
Doris
(四十一): RESOTRE数据恢复
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.RESTORE数据恢复原理
IT贫道
·
2023-10-18 21:50
大数据OLAP体系技术栈
Doris
Apache
Doris
(四十二): RECOVER数据删除恢复
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2023-10-18 21:50
大数据OLAP体系技术栈
Apache
Doris
doris
Apache
Doris
(四十): BACKUP数据备份
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2023-10-18 21:20
大数据OLAP体系技术栈
doris
Apache
Doris
(二十四):
Doris
数据导入(二)Binlog Load
目录1.基本原理2.Canal原理及配置2.1Canal同步MySQL数据原理2.2开启MySQLbinlog
IT贫道
·
2023-10-18 21:19
大数据OLAP体系技术栈
doris
大数据
实时数仓
数据仓库
olap
分布式数据库
应用实践|Lifewit 数据平台基于Apache
Doris
的建设实践
导读:近几年随着跨境电商行业的快速发展,Lifewit业务达到近十倍的增长,原先的痛点已经严重影响到用户的数据使用体验。技术端需要随着业务的飞速发展不断升级迭代适应业务的增长。Lifewit规划了从旧数据架构进化成目前基于ApacheDoris构建的轻量级业财一体化数据平台,来系统化地解决旧架构存在的痛点,打通业务数据和财务数据,构建综合数据平台提供全业务链自助数据分析能力,支撑完善的数据报表体系
hf200012
·
2023-10-18 21:48
big
data
人工智能
大数据
apache
doris
资源消耗降低 90%,速度提升 50%,解读 Apache
Doris
Compaction 最新优化与实现
背景LSM-Tree(LogStructured-MergeTree)是数据库中最为常见的存储结构之一,其核心思想在于充分发挥磁盘连续读写的性能优势、以短时间的内存与IO的开销换取最大的写入性能,数据以Append-only的方式写入Memtable、达到阈值后冻结Memtable并Flush为磁盘文件、再结合Compaction机制将多个小文件进行多路归并排序形成新的文件,最终实现数据的高效写入
SelectDB技术团队
·
2023-10-18 21:47
apache
数据库
java
数据仓库
开发语言
Apache
Doris
(四十三):
Doris
数据更新与删除 - Update数据更新
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.Update数据更新原理
IT贫道
·
2023-10-18 21:14
大数据OLAP体系技术栈
Apache
Doris
Doris
Apache
Doris
系列之:安装与部署详细步骤
时钟同步四、关闭交换分区五、Linux文件系统六、开发测试环境七、生产环境八、FE和BE的作用九、FE节点的数量十、部署最佳方案十一、Broker部署十二、网络需求十三、集群部署十四、常见问题一、软硬件需求
Doris
最笨的羊羊
·
2023-10-18 11:49
大数据
Apache
Doris系列
安装与部署详细步骤
Apache IoTDB 作为合作伙伴参加
Doris
Summit Asia 2023!
与创新者同行10月21日,DorisSummitAsia2023将在北京丽亭华苑酒店举行,目前已征集50+演讲议题,将从智慧金融与政企、先进智造与电信、企业服务与新经济、互联网与文娱等方向展开全面分享。ApacheIoTDB社区受到邀请,作为ApacheDoris合作伙伴,将于大会现场设置展位,以分享时序数据库创新成果,欢迎找我们打卡领取社区专属礼品!01关于DorisSummitAsia2023
Apache IoTDB
·
2023-10-18 11:43
apache
iotdb
人工智能
驱动数字化转型,
Doris
Summit Asia 2023 智慧金融与政企论坛精彩预告!
峰会官网已上线,最新议程请关注:
doris
-summit.org.cn即刻报名DorisSummit是ApacheDoris社区一年一度的技术盛会,由飞轮科技联合ApacheDoris社区的众多开发者、
SelectDB技术团队
·
2023-10-18 11:10
数据库
大数据
数据分析
Doris
Summit Asia 2023 完整议程公开,首届线下峰会邀你报名!
距离DorisSummit2022闭幕已近一年,DorisSummitAsia2023已经起航。这一年里,ApacheDoris完成了从1.0到2.0具有里程碑意义的版本跨越。通过持续技术创新,实现了令人瞩目的性能飞跃。不仅如此,ApacheDoris不断拓展应用场景边界,以适配更广泛的分析场景,并为用户提供灵活的解决方案。凭借这一年的努力,ApacheDoris也获得了更多社区用户及企业的喜爱。
SelectDB技术团队
·
2023-10-18 11:40
大数据
数据库
数据分析
apache
金融
推动产业升级及创新,
Doris
Summit Asia 2023 先进智造与电信论坛提前揭秘
峰会官网已上线,最新议程请关注:
doris
-summit.org.cn即刻报名DorisSummit是ApacheDoris社区一年一度的技术盛会,由飞轮科技联合ApacheDoris社区的众多开发者、
SelectDB技术团队
·
2023-10-18 11:33
数据库
大数据
数据仓库
数据分析
【大数据 -
Doris
实践】数据表的基本使用(一):基本概念、创建表
数据表的基本使用(一):基本概念、创建表1.创建用户和数据库2.
Doris
中数据表的基本概念2.1Row&Column2.2Partition&Tablet3.建表实操3.1建表语法3.2字段类型3.3
G皮T
·
2023-10-17 22:41
大数据
大数据
doris
数据库
数据仓库
分区
数据模型
OLAP
【大数据 -
Doris
实践】数据表的基本使用(二):数据划分
数据表的基本使用(二):数据划分1.列定义2.分区与分桶2.1Partition2.1.1Range分区2.1.2List分区2.2Bucket2.3使用复合分区的场景3.PROPERTIES3.1replication_num3.2storage_medium3.3storage_cooldown_time4.ENGINE1.列定义列的基本类型,可以通过在mysql-client中执行HELPC
G皮T
·
2023-10-17 22:39
#
Doris
大数据
Doris
OLAP
数据库
数据仓库
数据模型
MPP
从 ClickHouse 到 Apache
Doris
,腾讯音乐内容库数据平台架构演进实践
导读:腾讯音乐内容库数据平台旨在为应用层提供库存盘点、分群画像、指标分析、标签圈选等内容分析服务,高效为业务赋能。目前,内容库数据平台的数据架构已经从1.0演进到了4.0,经历了分析引擎从ClickHouse到ApacheDoris的替换、经历了数据架构语义层的初步引入到深度应用,有效提高了数据时效性、降低了运维成本、解决了数据管理割裂等问题,收益显著。本文将为大家分享腾讯音乐内容库数据平台的数据
hf200012
·
2023-10-17 17:26
Doris
clickhouse
apache
架构
【大数据 -
Doris
实践】数据表的基本使用(一):基本概念、创建表
数据表的基本使用(一):基本概念、创建表1.创建用户和数据库2.
Doris
中数据表的基本概念2.1Row&Column2.2Partition&Tablet3.建表实操3.1建表语法3.2字段类型3.3
G皮T
·
2023-10-17 17:21
大数据
大数据
doris
数据库
数据仓库
分区
数据模型
OLAP
oracle 19c 创建
物化视图
并测试logminer进行日志挖掘
--创建
物化视图
altersessionsetcontainer=pdb;grantcreatematerializedviewtoscott;creatematerializedview
物化视图
名--
Running Sun丶
·
2023-10-17 14:49
sql
数据库
oracle
dba
oracle运维
D37 2组阿德
doris
+《被讨厌的勇气》读书笔记
今天阅读了第二夜:一切烦恼都来自人际关系。其中关于自卑的内容是我最感兴趣的部分。我一直都很自卑:长得很矮,只有150cm。长相很一般,身材不好,穿衣服不好看。学历不高,在乡下小学教书,工资很少。说话不中听,有时会惹别人不开心。生活在小县城,什么都比不上城市里。所以我总是觉得自己比不上别人,什么都比别人差,所以别人的生活丰富多彩,而我的却平淡如水。但作者却说:困扰我们的自卑感不是“客观性的事实”而是
阿德doris
·
2023-10-17 07:35
Doris
入门了解
微信公众号:大数据高性能计算大数据存储与分析入门学习文档:深入了解
Doris
大数据技术已成为现代数据处理的核心组成部分,为企业提供了更多洞察和决策支持。
花开终为谢
·
2023-10-16 01:15
大数据
doris
大数据
Apache
doris
Datax DorisWriter扩展使用方法
DataX是阿里云DataWorks数据集成的开源版本,在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX实现了包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS等各种异构数据源之间高效的数据同步功能ApacheDoris是一个现代化的MP
张家锋
·
2023-10-15 14:25
Apache
Doris
首届线下峰会即将开启,最新议程公开!|即刻预约
点击此处即刻报名DorisSummitAsia2023回顾人类的发展史,地球起源于46亿年前的原始星云、地球生命最初出现于35亿年前的原始海洋、人类物种诞生于数百万年前,而人类生产力的真正提升源于十八世纪六十年代的工业革命,自此以后,我们所熟知的一切,蒸汽机、电话、汽车、计算机、互联网、智能手机才被逐步创造出来。百年间,人类社会的变革超越了过去数百万年的总和,真正的“行万世于一时”。探索人类社会如
SelectDB技术团队
·
2023-10-14 20:51
apache
突破边界与持续技术创新,
Doris
Summit Asia 2023 主论坛亮点解读
峰会官网已上线,最新议程请关注:
doris
-summit.org.cnDorisSummit是ApacheDoris社区一年一度的技术盛会,由SelectDB联合ApacheDoris社区的众多开发者、
SelectDB技术团队
·
2023-10-14 20:21
数据库
大数据
数据仓库
数据分析
Apache
Doris
在小鹅通的应用实践
峰会官网已上线,最新议程请关注:
doris
-summit.org.cn点击报名先到先得本文导读:随着网络直播规模的不断扩大,在线知识服务在直播行业中迎来了广阔的发展机遇。
SelectDB技术团队
·
2023-10-14 20:21
apache
数据库
大数据
数据仓库
数据分析
Apache
Doris
2.0.2 版本正式发布!
峰会官网已上线,最新议程请关注:
doris
-summit.org.cn点击报名亲爱的社区小伙伴们,ApacheDoris2.0.2版本已于2023年10月6日正式发布,该版本对多个功能进行了更新优化,旨在更好地满足用户的需求
SelectDB技术团队
·
2023-10-14 20:19
apache
数据库
大数据
数据仓库
数据分析
「硬刚
Doris
系列」官方常见问题小汇总
阅读读本文前必读:「硬刚
Doris
系列」ApacheDoris基本使用和数据模型「硬刚
Doris
系列」ApacheDoris架构原理及核心特性解读「硬刚
Doris
系列」
Doris
高级用法「硬刚
Doris
王知无(import_bigdata)
·
2023-10-14 04:50
大数据
分布式
数据库
python
linux
一文介绍
Doris
文章目录一、架构介绍1.名词解释2.FE(Frontend)3.BE(Backend)4.元数据结构二、存储介绍1.DataPage2.Footer信息3.indexpages三、索引介绍1.OrdinalIndex(一级索引)2.ShortKeyIndex索引3.ZoneMapIndex索引4.BloomFilter索引5.BitmapIndex索引6.索引的查询流程四、读写过程1.写入2.读取
阳呀么阳阳阳
·
2023-10-14 04:19
阳阳阳在学大数据
大数据
Doris
apache
实时数仓
Doris
宕机问题排查
搭建的
doris
集群有段时间总是宕机,起初不懂如何检查问题所在,后来请社区的开发人员帮忙排查,现记录一次排查步骤一、进入be的log目录下找到be.out日志文件,vimbe.out,按大写字母G到最底下
程序员在线炒粉
·
2023-10-14 04:16
Doris
大数据
运维
big
data
Apache
Doris
系列:大数据平台安装与部署详细步骤
ApacheDoris系列:大数据平台安装与部署详细步骤ApacheDoris(前身为Palo)是一个适用于大数据分析的开源列式存储数据库。本文将介绍如何安装和部署ApacheDoris,以便您能够在大数据环境中使用它来进行高效的数据分析和查询。步骤1:环境准备在开始之前,请确保您的系统满足以下要求:操作系统:Linux(推荐使用CentOS或Ubuntu)Java版本:8或更高内存:建议至少16
我的小星星
·
2023-10-14 04:15
大数据
apache
大数据
解决Key columns should be a ordered prefix of the schema. KeyColumns[1] (starts from zero) is xxx, but
文章目录1.复现错误2.分析错误3.解决错误1.复现错误今天在编写
doris
语句:CREATETABLEIFNOTEXISTStest3.test(`id`intCOMMENT'ID',`bb`stringCOMMENT
互联网全栈开发实战
·
2023-10-13 22:30
大数据
数据库
doris
后端
数据仓库
数据库开发
解决(conn=298) errCode = 2, detailMessage = String Type should not be used in key column[aa].的多无
1.复现错误今天,在写创建
doris
表的SQL语句:CREATETABLEIFNOTEXISTSt
互联网全栈开发实战
·
2023-10-13 22:30
大数据
java
数据库
服务器
doris
后端
数据库开发
大数据
解决
Doris
中的errCode = 2, detailMessage = String Type should not be used in key column[id].
1.复现错误今天在执行
Doris
的SQL语句时,却报出如下错误:CREATETABLEIFNOTE
互联网全栈开发实战
·
2023-10-13 22:59
大数据
Doris
mysql
后端
大数据
数据库
数据库开发
【备忘】maven跳过ssl验证
由于公司网络策略设置原因,配置apache的nexus下载flink-
doris
-collector依赖报错:[ERROR]Failedtoexecutegoalonprojectdemo:Couldnotresolvedependenciesforprojectcom.tianzy.demo
Java小田
·
2023-10-13 05:45
备忘
azkaban
本地调试
keepalived
Apache
Doris
ODBC外表之Postgresql使用指南
今天是2022年阳历新年第一天,祝大家元旦快乐,这也是2022年第一篇文章,后续会给大家带来更多关于
Doris
的文章,同时也希望
Doris
2022年起飞,顺利从Apache孵化器毕业成顶级项目,给大家带来更快
张家锋
·
2023-10-13 04:58
插画师
Doris
Liou 的脑洞作品欣赏
分享一组来自插画师DorisLiou的脑洞作品~乍一看DorisLiou的作品,就被奇异怪诞的画风和内容吸引~画面整体色调大胆明亮,内容有趣耐人寻味。透过望远镜看到的秘密森林,蓝色的小猴子围着一个植物转圈,似乎在做什么神秘的仪式!让人想起了疫情时期在家办公的模样,视频会议时上半身正正经经,下半身是大裤衩配拖鞋。在肉片上的小人们还在认真做自己的事情,丝毫不知道危险的到来……看完这组图好想进入插画师的
布丁辰儿
·
2023-10-13 02:55
Apache
Doris
(三十九):
Doris
数据导出 - MySQL dump导出
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。博主个人B栈地址:豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录
IT贫道
·
2023-10-12 20:22
大数据OLAP体系技术栈
doris
利用Flink(1.17)滚动窗口实时统计Apache
Doris
审计日志
具体方案:1.分析
Doris
审计日志:从日志可以看到,数据是以"|“分割开的KV数据(这块要特殊说
码猿小站
·
2023-10-12 19:03
flink
Doris
java
apache
flink
大数据
big
data
Flink CDC 系列 - 实现 MySQL 数据实时写入 Apache
Doris
▼关注「ApacheFlink」视频号,遇见更多大咖▼摘要:本文通过实例来演示怎么通过FlinkCDC结合
Doris
的FlinkConnector实现从Mysql数据库中监听数据并实时入库到
Doris
数仓对应的表中
Apache Flink
·
2023-10-12 10:28
大数据
数据库
mysql
java
hadoop
Doris
使用及优化(1.2.6 - 2.0.2 release)
文章内容是在使用
Doris
的过程中逐渐积累,但也只是针对使用的经验,请大家参照的时候要综合考虑自己方使用的情况而定。如果有不正确的、其他好的使用及优化建议,请留言批评指正。
JasonGofen
·
2023-10-12 10:27
DORIS
apache
database
数据仓库
大数据
博文推荐|Flink CDC 结合
Doris
Flink Connector 实现MySQL数据实时入Apache
Doris
本文通过实例来演示怎么通过FlinkCDC结合
Doris
的FlinkConnector实现从MySQL数据库中监听数据并实时入库到
Doris
数仓对应的表中。
ApacheDoris
·
2023-10-12 10:54
数据库
大数据
hadoop
mysql
java
使用 Flink CDC 实现 MySQL 数据实时入 Apache
Doris
需要组件:mysql5.7.37
Doris
-0.15.1flink-1.13.6scala_2.12flink-connector-mysql-cdc-2.0.2flink-
doris
-connector
红烧佩奇真好吃
·
2023-10-12 10:18
大数据
【
Doris
】Flink CDC 结合
Doris
Flink Connector 实现MySQL数据实时入Apache
Doris
本文通过实例来演示怎么通过FlinkCDC结合
Doris
的FlinkConnector实现从MySQL数据库中监听数据并实时入库到
Doris
数仓对应的表中。
九层之台起于累土
·
2023-10-12 10:48
【Doris】
【BigData】
flink
mysql
apache
数据仓库
大数据
【
Doris
实战】Apache-
doris
-2.0.2部署帮助手册
Apache-
doris
-2.0.2部署帮助手册校验时间:2023年10月11日文章目录Apache-
doris
-2.0.2部署帮助手册安装前准备安装包安装要求Linux操作系统版本需求软件需求句柄需求关闭
顧棟
·
2023-10-12 10:09
软件安装配置
apache
通过flink 插入数据Stream_load 方式
1.场景:通过模拟数据发送kafa—>flink接收到kakfa数据–>然后通过flink进行streamLoad插入数据到
doris
中;2.建表语句CREATETABLE`wudl_
doris
01`(
wudl5566
·
2023-10-12 08:44
Flink
flink
big
data
大数据
doris
记录
doris
文档—>>>
Doris
官网https://www.wenjiangs.com/doc/fgifo6j1https://www.bookstack.cn/read/
doris
-1.1-en/GettingStarted.mddorisonk8shttps
胖胖胖胖胖虎
·
2023-10-11 19:11
doris
大数据组件
大数据
Doris
数据同步:stream load Java工具类实现
导入原理自己百度吧,工具类需要引入一个依赖org.apache.httpcomponentshttpclient${httpcomponents.version}工具类:1.导入csv文件,文件格式如下:1,2,,3,41,2,3,4,5publicclassDorisStreamLoader{/***用户名*/privatefinalStringuser;/***密码*/privatefinal
life is ftc
·
2023-10-11 16:23
java
数据库
开发语言
doris
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他