E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
starRocks
【技术选型】Doris vs
starRocks
比对结论仅从当前能看到的数据中,相比于doris,
starRocks
在性能方面具备优势,且更新频率高(降低维护成本)。
偏振万花筒
·
2024-01-12 08:41
大数据
大数据
分布式
starrocks
权限管理-2.3.2版本
1.新用户创建以及授权1.创建用户(未分配角色)--使用明文密码创建用户,允许其从'172.25.20.1'登陆。如果172.25.20.1被%替换就是所有ip都可以访问CREATEUSERbigdata@'172.25.20.1'IDENTIFIEDWITHmysql_native_passwordBY'Zhengda@1';不能创建数据库和表2.创建用户(分配角色)CREATEUSER'dmp
远方有海,小样不乖
·
2024-01-12 08:50
大数据
Starrocks
监控方案
GrafanaLabs部署prometheus配置文件global:scrape_interval:15sevaluation_interval:15sscrape_configs:-job_name:'
StarRocks
_Cluster'metrics_path
远方有海,小样不乖
·
2024-01-12 08:46
数据库
运维
【大数据OLAP引擎】
StarRocks
为什么快?
StarRocks
的优势
StarRocks
最初主要的优势是性能,当时在单表查询方面与性能标杆ClickHouse不相上下,而join优化特性使其在多表关联查询场景下的性能表现要远远优于ClickHouse
话数Science
·
2024-01-11 04:33
StarRocks
大数据
大数据
架构
【大数据OLAP引擎】StartRocks存算分离
存算一体到存算分离存算一体作为MPP数据库的典型代表,
StarRocks
3.0版本之前使用存算一体(shared-nothing)架构,BE同时负责数据存储和计算,在查询时可以直接访问BE本地数据,进行本地计算
话数Science
·
2024-01-11 04:02
大数据
StarRocks
大数据
架构
转转OLAP自助分析实践
文章目录1.导读2.背景介绍2.1为什么要做自助分析2.2核心解决的问题2.3建设初期的卡点3.技术实现3.1技术架构3.2基于QuickBI+
StarRocks
的自助分析功能实现3.3为什么选择
StarRocks
转转技术团队
·
2024-01-11 03:58
大数据
【技术选型】clickhouse vs
starRocks
如果集群化,
starRocks
可以替换clickhouse,但支持的函数会相对少一些(clickhouse有不少自定义函数)信息比对功能clickhousestarRocksjoin大表关联容易OOM对
偏振万花筒
·
2024-01-10 10:12
clickhouse
starRocks
大数据
大数据
StarRocks
(五) :数据类型
StarRocks
支持数据类型:数值类型、字符串类型、日期类型、半结构化类型、其他类型。您在建表时可以指定以下类型的列,向表中导入该类型的数据并查询数据。
运维仙人
·
2024-01-09 17:29
大数据
大数据
StarRocks
StarRocks
Awards 2023 年度贡献人物
这一年,
StarRocks
继续全方位大步向前迈进,在300+贡献者的辛勤建设下,社区先后发布了50+版本,并完成了从全场景OLAP到云原生湖仓的进化。
StarRocks_labs
·
2024-01-09 13:06
数据仓库
大数据
clickhouse
StarRocks
集群搭建
StarRocks
集群搭建一、
StarRocks
简介
StarRocks
是新一代极速全场景MPP(MassivelyParallelProcessing)数据库。
awsless
·
2024-01-08 14:41
数据库
大数据
数据分析
datax数据导入
starrocks
表报列数量不匹配错误,问题解决思路
背景在做客户数据导入任务的时候,需要将客户oracle的数据通过datax导入到
starrocks
的表中,但是datax的配置文件中SQL查找客户数据的列数和要导入的
starrocks
表的列数都是相同且对应的
lx__angel
·
2024-01-06 15:10
Linux
datax
数据同步
列数不匹配
starrocks
linux
大数据
StarRocks
(四) :常用命令
这次主要介绍生产工作中使用
Starrocks
时的常用命令4.1连接
StarRocks
4.1.1Linux命令行连接[root@hadoop1011fe]#yuminstallmysql-y[root@hadoop1011fe
运维仙人
·
2024-01-05 13:02
大数据
大数据
StarRocks
直播预告|
StarRocks
3.2 全面解读:易用性和性能的双重提升
StarRocks
3.2版本即将发布,这是
StarRocks
的又一次重大升级,除了进一步完善存算分离架构、数据湖分析和物化视图等重要特性,我们还聚焦于运维操作细节,大大提升了
StarRocks
的易用性,
StarRocks_labs
·
2024-01-04 20:38
后端
微信基于
StarRocks
的湖仓一体实践
通过
StarRocks
的湖仓一体方案,以及和社区密切配合开发的实时增量物化视图,微信解决了“实时、极速”背后的“统一”诉求。在直播业务场景中,通过湖上建仓的方
StarRocks_labs
·
2024-01-04 20:38
后端
B 站基于
StarRocks
构建大数据元仓
经过调研和性能测试,大数据元仓最终以
StarRocks
为技术底座,从实际的应用效果来看,大部分查询都能在几百毫秒内返回结果。
StarRocks_labs
·
2024-01-04 20:08
后端
StarRocks
在小红书自助分析场景的应用与实践
作者:小红书OLAP研发负责人王成近两年
StarRocks
一直是小红书OLAP引擎体系里非常重要的部分,过去一年,小红书的
StarRocks
使用规模呈现出翻倍的增长速度,目前整体规模已经达到30个集群,
StarRocks_labs
·
2024-01-04 20:07
后端
大数据
StarRocks
(三)
StarRocks
数据表设计
在
StarRocks
中,
运维仙人
·
2024-01-04 07:30
大数据
大数据
starrocks
大数据
StarRocks
(二)
StarRocks
集群部署
一、生产机器资源评估1.梳理数据量,包括每天增量数据接入和全量数据接入2.数据存储时间长度(1个月/3个月/半年/1年/三年等)3.报表的SQL查询数量,SQL查询占用资源的统计,需要提前做好压测4.压测可以采用官网提供的压测工具先进行测试,根据测试数据进行资源调整,然后再要业务数据进行压测一遍最终以压测中预期结果最好的机器配置进行申请,如果公司很rich的话,直接用80c/256G的机器配置。二
运维仙人
·
2024-01-04 07:55
大数据
大数据
StarRocks
大数据
StarRocks
(一)
StarRocks
概述
1
StarRocks
介绍
StarRocks
是新一代极速全场景MPP(MassivelyParallelProcessing)数据库,它充分吸收关系型OLAP数据库和分布式存储系统在大数据时代的优秀研究成果
运维仙人
·
2024-01-03 06:24
大数据
大数据
python定时查询
starrocks
将结果保存在excel
背景在工作过程中要定期的更新excel表的信息,每个星期都要去查询strarocks的数据导出结果到excel,俗话说:“不会偷懒的运维不是好运维”,于是写了python小程序解决这个重复的工作,设置定时任务,直接去服务器下载导出的excel表格即可。代码代码的逻辑简单介绍:将要执行的SQL以名称进行区分保存并放到目录:SQLfileDir,设置结果存放路径:./…/outputdir/。pyth
运维仙人
·
2024-01-01 14:24
Python
大数据
python
starrocks
doris
存算分离降本增效,
StarRocks
助力聚水潭 SaaS 业务服务化升级
作者:聚水潭数据研发负责人溪竹聚水潭是中国领先的SaaS软件服务商,核心产品是电商ERP,协同350余家电商平台,为商家提供综合的信息化、数字化解决方案。公司是偏线下商家侧的toB服务商,员工人数超过3500,线下网点超过100个,每天要承载大概2亿包裹量的ERP发货流程,产生的数据量超过10TP。公司数据智能产品的定位是将数据融入到服务流程中,在ERP这个大的体系里,帮助商家进行数据提效。从整体
StarRocks_labs
·
2023-12-30 15:38
后端
StarRocks
数据模型之主键模型(当前版本v3.1)
StarRocks
表设计数据模型,有四种:分别是明细模型(DumplicateKeytable),聚合模型(Aggregatetable),更新模型(UniqueKeytable),主键模型(PrimaryKeytable
临界爵迹
·
2023-12-29 09:34
数据库
数据库
StarRocks
:快速查询的秘密解析
StarRocks
,作为一种高效的分布式实时分析数据库,以其快速的查询性能在业界广受赞誉。本文将重点讨论
StarRocks
能够实现快速查询的原因,并分条论述其优势。
临界爵迹
·
2023-12-29 09:03
大数据
数据库
Flink导入
StarRocks
1、pom依赖881.13.62.12org.apache.flinkflink-java${flink.version}org.apache.flinkflink-streaming-java_${scala.binary.version}${flink.version}org.apache.flinkflink-runtime-web_${scala.binary.version}${flin
docsz
·
2023-12-28 16:29
starrocks
分包zip压缩,解压报错:invalid zip file with overlapped components (possible zip bomb)
最近生产环境传输了
starrocks
的安装包,分包压缩之后上传服务器文件,然后合成一个大包,在进行解压的时候出现解压失败的问题。根据报错提示增加环境变量,将问题解决。
运维仙人
·
2023-12-28 10:54
大数据
linux
starrocks
集群fe/be节点进程守护脚本
自建
starrocks
集群,有时候服务会挂掉,无法自动拉起服务,于是采用supervisor进行进程守护。可能是版本的原因,supervisor程序总是异常,无法对fe//be进行守护。
运维仙人
·
2023-12-28 10:17
运维
linux
StarRocks
-3.1.6升级
1、升级路径1.1、小版本升级您可以跨小版本升级您的
StarRocks
集群,例如,从v2.2.6直接升级到v2.2.11。
docsz
·
2023-12-27 03:04
starrocks
CloudCanal x Debezium 打造实时数据流动新范式
CloudCanal近期实现了从Kafka消费Debezium格式数据,将其同步到
StarRocks
、Doris、Elasticsearch、MongoDB、ClickHouse等12种数据库和数仓,补全其数据到达能力
ClouGence
·
2023-12-22 16:48
CloudCanal
数据库
大数据
数据仓库
etl
Flink系列之:使用Flink Mysql CDC基于Flink DataStream同步mysql数据到
StarRocks
数据库
Flink系列之:使用FlinkMysqlCDC基于FlinkDataStream同步mysql数据到
StarRocks
数据库一、相关技术博客二、pom.xml三、mysql表结构四、
StarRocks
最笨的羊羊
·
2023-12-22 13:03
大数据
Flink
Flink系列
Flink
Mysql
CDC
DataStream
StarRocks数据库
【
StarRocks
-1.简介】
一、简介:
starRocks
起源于开源软件Doris,其相对Doris的社区环境,starRcoks有商业团队维护、快速版本迭代和dockerHub高支持,让我在生产环境中更加偏向于
starRocks
,
万琛
·
2023-12-16 13:52
StarRocks专栏分享
starRocks
StarRocks
上新,“One Data、All Analytics”还有多远?
近年来,无论国外的Snowflake、Databricks,还是国内
StarRocks
、PingCAP,大批数据分析型公司涌现,都旨在满足越来越多的数据分析需求,帮助各种企业充分释
大数据在线
·
2023-12-04 18:14
数据库
数据仓库
数据分析
大数据
存算分离
StarRocks
StarRocks
存算分离最佳实践,让降本增效更简单
StarRocks
存算分离自版本3.0.0开放使用,已经历过多个大版本迭代,在众多客户生产环境中得到验证。但在用户使用过程中也反馈了一些问题,大多源自对新能力不够熟悉导致无法达到最佳效果。
StarRocks_labs
·
2023-12-04 15:55
后端
Flink系列:使用Debezium将MySQL数据库表数据采集到Kafka Topic,并将Kafka Topic数据同步到
StarRocks
数据库
Flink系列:使用Debezium将MySQL数据库表数据采集到KafkaTopic,并将KafkaTopic数据同步到
StarRocks
数据库在本篇文章中,我们将介绍如何使用ApacheFlink、
代码指四方
·
2023-12-02 18:36
数据库
flink
mysql
大数据
用 CloudCanal 快速验证阿里云 EMR for
StarRocks
和 Doris
背景
StarRocks
和Doris是近两年来相当流行的、国产的、开源的实时数仓,不仅数据检索、分析能力出众,而且数据准备实时性好、准确度高、使用丝滑,可如同在线数据库般使用。
ClouGence
·
2023-12-02 08:47
CloudCanal
CloudDM
阿里云
云计算
UData+
StarRocks
在京东物流的实践 | 京东物流技术团队
1背景数据服务与数据分析场景是数据团队在数据应用上两个大的方向,行业内大家有可能会遇到下面的问题:1.1数据服务烟囱式开发模式:每来一个需求开发一个数据服务,数据服务无法复用,难以平台化,技术上无法积累服务维护难度大:当开发了大量数据服务后,后期维护是大问题,尤其是618、双11大促期间,在没有统一的监控、限流、灾备方案的情况下一个人维护上百个数据服务是一件很痛苦的事,也造成了很大的安全隐患业务需
京东云技术团队
·
2023-11-29 13:46
数据库
硬核干货
StarRocks
数据库
数据分析
数据服务
后端
StarRocks
从入门到精通系列六:使用EXPORT、Spark、Flink从
StarRocks
中导出数据
StarRocks
从入门到精通系列六:使用EXPORT、Spark、Flink从
StarRocks
中导出数据一、使用EXPORT导出数据1.背景信息2.导出流程3.基本原理4.相关配置5.基本操作6.最佳实践二
最笨的羊羊
·
2023-11-28 11:38
大数据
日常分享专栏
大数据
StarRocks
EXPORT
Spark
Flink
StarRocks
目录
StarRocks
基本概念系统架构功能排序键物化视图数据导入使用库表创建数据类型注意事项新增分区修改字段类型问题问题1:问题2:问题3:问题4:问题5:ClickHouse与
StarRocks
的对比
坤岭
·
2023-11-28 11:07
#
数据存储工具
大数据
StarRocks
-Profile分析及优化指南
使用mysqlclient连接
starrocks
集群,mysql-hip-P9030-uroot-pxxx然后输入##该参数开启的是session变量,若想开启全局变量可以setglobalis_repo
落花闲庭坐
·
2023-11-28 11:36
database
数据库
StarRocks
的学习笔记
StarRocks
的学习笔记文章目录
StarRocks
的学习笔记1.介绍1.1
StarRocks
特性1.2使用场景1.3OLAP多维分析1.4实时数据仓库1.5高并发查询1.6统一分析2.系统架构2.1
StarRocks
白居不易.
·
2023-11-28 11:36
StarRocks
第2.8章:
StarRocks
表设计--物化视图
在实际的业务中,我们通常需要对数据进行对原始明细数据任意维度的分析以及固定维度聚合分析。两种场景并存的情况下,聚合模型表由于缺失部分明细数据,就无法满足用户对明细数据的分析需求。如果仅建立一个明细模型,虽然可以满足任意维度的分析需求,但对明细数据进行聚合分析时,实时分析性能不佳。若同时建立一个聚合模型和一个明细模型,虽然可以满足性能和任意维度分析,但两表之间本身无关联,需要业务方自行选择分析表,不
流木d
·
2023-11-28 11:35
数据库
big
data
database
分布式
mysql
第4.4章:
StarRocks
备份还原--Backup&Restore
Backup是
StarRocks
目前提供的唯一一种可将数据与元数据一并导出的导出方式。
流木d
·
2023-11-28 11:35
StarRocks
数据库
大数据
分布式
hadoop
StarRocks
企业级数据库
第1章
StarRocks
简介1.1
StarRocks
介绍
StarRocks
是新一代极速全场景MPP数据库StraRocks充分吸收关系型OLAP数据库和分布式存储系统在大数据时代的优秀研究成果,在业界实践的基础上
AllenGd
·
2023-11-28 11:30
StarRocks
数据库
Starrocks
异步物化视图的使用以及注意事项
最近在使用
starrocks
来进行实时数据项目的开发,尝试使用了一下
starrocks
的异步物化视图。
雾岛与鲸
·
2023-11-28 11:28
#
starrocks
java
大数据
StarRocks
算子落盘:让大查询又快又稳
内存是对数据库非常重要的数据存储介质,它承载了所有查询计算的请求,在提升性能、实时分析等场景都有着重要的作用。正是由于内存如此重要,经常会遇到内存不够的情况,从而导致查询被强制终止,甚至对线上其他查询性能产生负面影响。例如:在轻量级ETL或查询加速场景(如INSERTINTOASSELECT任务,或构建大宽表的物化视图进行建模),由于涉及查询通常是多张大表关联或者是高基数聚合等复杂计算,从而在实际
StarRocks_labs
·
2023-11-27 20:08
后端
极速进化,融合“新“生 |
StarRocks
Summit 2023 技术交流峰会圆满落幕
2023年11月17日,由
StarRocks
社区发起、镜舟科技主办的
StarRocks
年度大型技术交流峰会StarRocksSummit2023在上海成功举行。
StarRocks_labs
·
2023-11-27 20:38
后端
StarRocks
Evolution:One Data,All Analytics
在11月17日举行的StarRocksSummit2023上,StarRocksTSCMember、镜舟科技CTO张友东详细介绍了
StarRocks
社区的发展情况,并全面解析了
StarRocks
的核心技术与未来规划
StarRocks_labs
·
2023-11-27 20:07
程序人生
window环境搭建StarRocksFE节点
StarRocks
部署–源码编译前言注意:本文借用了一些其他文章的一些截图,同时自己做了具体的编译步骤,添加了一些新的内容目标:编译
StarRocks
2.5.13版本FE节点代码,在本地window环境运行
疯子1313
·
2023-11-27 09:28
starrocks
StarRocks
与ClickHouse
现在ROLAP计算存储一体的数据仓库主要有三种,即
StarRocks
(DorisDB),ClickHouse和ApacheDoris。应用最广的数据查询系统主要有Druid,Kylin和HBase。
Yuan_CSDF
·
2023-11-26 19:11
数据库
OLAP
大数据
技术分享 | ClickHouse &
StarRocks
使用经验分享
一.大纲本篇分享下个人在实时数仓方向的一些使用经验,主要包含了ClickHouse和
StarRocks
这两款目前比较流行的实时数仓,文章仅代表个人拙见,有问题欢迎指出,Thanks♪(・ω・)ノ关于实时数仓
爱可生开源社区
·
2023-11-26 19:08
技术分享
实时数仓
ClickHouse
StarRock
数仓成本下降近一半,
StarRocks
存算分离助力云览科技业务出海
作为数据驱动的高科技公司,从数据中挖掘价值一直是公司核心任务,公司以前选用了众多组件来提升内部大数据分析效率,如Trino作为即席查询的工具、用ClickHouse和
StarRocks
来加速报表业务查询
StarRocks_labs
·
2023-11-24 12:31
后端
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他