Starrocks

使用datax进行clickhouse数据到starrocks同步

准备适用于clickhouse的reader（rdbmsreader）1、把clickhousewriter/libs下的所有jar包复制到rdbmsreader/libs下,同名jar包直接替换2、删掉rdbmsreader/libs/guava-r05.jar这个包3、在rdbmsreader/plugin.json文件的"driver"加"ru.yandex.clickhouse.Click
dialecty·2023-10-11 14:16

【数智化案例展】StarRocks × 众安保险：全新实时分析能力开启数字化经营新局面...

StarRocks案例本项目由StarRocks投递并参与“数据猿行业盘点季大型主题策划活动——《2022中国企业数智化转型升级创新服务企业》榜单/奖项”评选。
数据猿·2023-10-09 18:50

基于 Kettle + StarRocks + FineReport 的大数据处理分析方案

Kettle+StarRocks+FineReport的大数据处理分析方案其中Kettle负责数据的ETL处理，StarRocks负责海量数据的存储及检索，FineReport负责数据的可视化展示。
小毕超·2023-10-08 15:29

Seatunnel系列之：使用Seatunnel从hive数据库同步数据到mysql、sqlserver、elasticsearch、starrocks、postgresql等数据库

Seatunnel系列之：使用Seatunnel从hive数据库同步数据到mysql、sqlserver、elasticsearch、starrocks、postgresql等数据库一、需求背景二、Seatunnel
最笨的羊羊·2023-10-08 12:35

基于Impala的高性能数仓实践之执行引擎模块

除了ApacheImpala开源项目，业界知名的ApacheDoris和StarRocks、SelectDB项目也跟Impala有千丝万缕的联系。
浪尖聊大数据-浪尖·2023-10-07 11:10

starrocks启动和停止和重启脚本

StarRocks启动和停止和重启脚本编辑脚本：vimstart_stop_starrocks.sh备注:IP修改为自己的IP即可#!
锋火连天·2023-10-05 23:57

第3.8章：StarRocks数据导入--Spark Load

SparkLoad是通过外部的Spark资源实现对导入数据的预处理，进而提高StarRocks大数据量的导入性能，同时也可以节省StarRocks集群的计算资源。
流木随风·2023-10-01 12:42

StarRocks从入门到精通系列五：导入数据

StarRocks从入门到精通系列五：导入数据一、导入总览二、从ApacheKafka®持续导入三、使用ApacheSpark™批量导入四、从ApacheFlink持续导入一、导入总览下图详细展示了在各种数据源场景下
最笨的羊羊·2023-10-01 12:42

Starrocks数据导入方式

1、数据导入概览https://doris.apache.org/zh-CN/docs/dev/install/standard-deployment下图为各类数据导入Starrocks方式可以通过语句
zxf126126·2023-10-01 12:42

第3.5章：StarRocks数据导入--DataX StarRocksWriter

一、DataX介绍DataX3.0是阿里云DataWorks数据集成的开源版本，可以方便的对各种异构数据源进行高效的数据同步。其github地址为：https://github.com/alibaba/DataXhttps://github.com/alibaba/DataXDataX将复杂的网状的同步链路变成了星型数据链路，DataX自身作为中间传输载体负责连接各种数据源，友好的解决了异构数据源
流木随风·2023-10-01 12:41

StarRocks 导入数据坑-1

一般从业务表mysql同步到StarRocks经常会出现非必要的字段为空，存入到StarRocks的时候，如果不转化就可能会报错，报错场景如下：解决方案：把源表里的NULL的数据转化为\\N,再保存到StarRocks
OLAP_StarRocks·2023-10-01 12:40

Starrocks StreamLoad导入csv数据报错too many filtered rows

问题描述使用starrocks的streamload导入csv数据是报错toomanyfilteredrows原因分析1.导入的数据与表结构列映射不对分析验证打开错误日志链接，内容如下：日志指出我的字段有
qq_42607505·2023-10-01 12:40

starrocks导入CSV

curl--location-trusted-uroot-H"label:114141"-H"columns:filename,test_id,die_x,die_y,plane_id,result_image,rowN,colN,tier,wl,da,block,gre,size_x,size_y,center_x,center_y,feature1,feature2,feature3,feat
liurenfenglrf·2023-10-01 12:39

StarRocks（三）数据导入与查询

1、StreamLoad（同步）StarRocks支持从本地直接导入数据，支持CSV格式。
Yuan_CSDF·2023-10-01 12:09

StarRocks调优 - Broker Load导入

BrokerLoad是StarRocks离线导入方式，用于将存储在HDFS、S3、OSS等外部存储的数据导入到StarRocks，支持CSV、ORCFile、Parquet等文件格式，适用于几十GB到上百
Asware·2023-10-01 12:39

StarRocks——增量数据导入

1.准备增量导入脚本incrSyncTask.sh按日期增量导入#!/bin/bash./etc/profile#开始日期格式20210101begin_date=$1#结束日期end_date=$2#读库的IPr_ip="读库的ip"#读库的端口r_port="读库的port"#服务名称r_dbname="服务名称"#读库的账号r_username="账号"#读库的密码r_password="密
^o^Smile^_^·2023-10-01 12:38

StarRocks数据导入

1、相关环境Flink作为当前流行的流式计算框架，在对接StarRocks时，若直接使用JDBC的方式"流式"写入数据，对StarRocks是不友好的，StarRocks作为一款MVCC的数据库，其导入的核心思想还是
docsz·2023-10-01 12:08

简单说说列式存储数据库

随着业务越来越看重数据的重要性，相信大家也做了很多多维分析的需求，在调研技术选型时候，会发现很多olap，如druid、clickhouse、starRocks都是列式存储数据库，今天我们来通过对比行存储简单说下列存储举个栗子来说下列存储和行存储要过年回家了
小草莓子桑·2023-09-30 18:10

第4.0章：一键部署StarRocks单机版（拓展篇）

在一台有网络的装有Docker的服务器上，解压安装包：StarRocks-2.#.#-Oneclick.tar.gz，进入目录执行：.
流木随风·2023-09-28 09:35

docker 安装本地starrocks测试环境

StarRocksDocsQuickstart:DeployStarRockswithDocker@deploy_in_docker@StarRocksDocs镜像版本https://hub.docker.com/r/starrocks
Thomas2143·2023-09-28 09:30

StarRocks—新一代极速全场景MPP数据库

StarRocks—新一代极速全场景MPP数据库一、StarRocks介绍1.1StarRocks是什么1.2StarRocks特性1.2.1架构精简1.2.2全面向量化引擎1.2.3智能查询优化1.2.4
明月清风，良宵美酒·2023-09-22 21:19

StarRocks 社区：从初生到两周年的进化之路

2021年9月8日，StarRocks开源社区诞生。从第一天开始，我们怀揣着“打造世界一流的数据分析产品”的梦想，踏上了星辰大海的征途。
StarRocks_labs·2023-09-21 09:28

StarRocks 社区：从初生到两周年的进化之路

2021年9月8日，StarRocks开源社区诞生。从第一天开始，我们怀揣着“打造世界一流的数据分析产品”的梦想，踏上了星辰大海的征途。
·2023-09-20 17:53

Paimon+StarRocks 湖仓一体数据分析方案

本文整理自阿里云高级开发工程师曾庆栋（曦乐）在StreamingLakehouseMeetup分享的内容，深入探讨了传统数据仓库分析、Paimon+StarRocks湖仓一体数据分析、StarRocks
StarRocks_labs·2023-09-19 04:35

【直播预约中】 腾讯大数据 x StarRocks｜构建新一代实时湖仓

随着信息时代的兴起，数据已成为推动业务决策和创新的核心要素；结构化、半结构化等多种类型的数据呈现爆炸式增长，如何高效处理和分析海量数据已经成为关键挑战，结合传统数仓与数据湖优势的湖仓一体（Lakehouse）架构崭露头角，成为大数据领域势不可挡的趋势；基于湖仓一体架构，企业可以基于一份数据，满足BI报表、交互式数据探查、实时分析、用户画像等所有场景的分析需求。腾讯作为国内领先的互联网企业，面对内部
StarRocks_labs·2023-09-19 04:34

【直播预约中】 腾讯大数据 x StarRocks｜构建新一代实时湖仓

随着信息时代的兴起，数据已成为推动业务决策和创新的核心要素；结构化、半结构化等多种类型的数据呈现爆炸式增长，如何高效处理和分析海量数据已经成为关键挑战，结合传统数仓与数据湖优势的湖仓一体（Lakehouse）架构崭露头角，成为大数据领域势不可挡的趋势；基于湖仓一体架构，企业可以基于一份数据，满足BI报表、交互式数据探查、实时分析、用户画像等所有场景的分析需求。腾讯作为国内领先的互联网企业，面对内部
·2023-09-18 21:54

快速构建 SAP ERP 内置数据库 HANA 到 StarRocks 的数据迁移同步任务

简述SAPHANA是由SAP开发的一款内存列式数据库,具有预测分析、空间数据处理、文本分析、文本搜索、流分析、图形数据处理等高级分析功能。HANA内存列式数据库特性，即启动后可以把所有数据载入内存，相比传统基于硬盘的数据库，性能提升10~10,000倍。HANA一般内置在SAPERP系统中提供服务，在制造业应用广泛。现如今企业尝试建立统一数据分析平台，SAPHANA保存了ERP相关数据，如何实时同
·2023-09-18 16:40

starrocks新建clickhouse(jdbc)外部表 查询报错 JDBC result type is [java.math.BigInteger]

MergeTreePARTITIONBYtoDate(fromUnixTimestamp64Milli(toInt64(f2)))ORDERBY(f1)SETTINGSindex_granularity=8192;--starrocks
Thomas2143·2023-09-18 02:41

StarRocks数据库FE——Catalog层

仓外挂湖是指以MPP数据库为基础，使用可插拔架构，通过开放接口对接外部存储实现统一存储，在存储底层共享一份数据，计算、存储完全分离，实现从强管理到兼容开放存储和多引擎。实现方向为增加存储能力，提升查询引擎效率。总的来看，“仓外挂湖”路径本质是在仓的基础上增加湖的多类型存储等能力，需解决以下五大技术难点：统一元数据管理。打通不同数据系统，具备数据共享和跨库分析的能力，并支持互联互通、计算下推、协同计
肥叔菌·2023-09-16 14:34

Dinky上路之旅

1、部署flink集群1.1、flink-conf.yamlcat>flink-conf.yamlworkersmasterscom.starrocksflink-connector-starrocks1.2.7
docsz·2023-09-13 17:23

Paimon+StarRocks 湖仓一体数据分析方案

本文整理自阿里云高级开发工程师曾庆栋（曦乐）在StreamingLakehouseMeetup分享的内容，深入探讨了传统数据仓库分析、Paimon+StarRocks湖仓一体数据分析、StarRocks
·2023-09-08 19:10

备份StarRocks数据到对象存储minio中/外表查minio中的数据

1.部署minio环境dockerpullminio/minio宿主机与容器挂在映射宿主机位置容器位置/data/minio/config/data/data/minio/data/root/.minio拉起环境：dockerrun-p9000:9000-p9090:9090--nameminio\-d--restart=always\-e"MINIO_ACCESS_KEY=admin"\-e"M
gongxiucheng·2023-09-08 18:54

StarRocks 在金融科技行业的存算分离应用实践

目前，StarRocks存算分离上线的场景包含电商ERP订单分析系统、金融业务数据分析和制造业设备数据分析。由此可见，StarRocks存算分离已达到生产可用的高标准。
StarRocks_labs·2023-09-02 06:35

Paimon+StarRocks 湖仓一体数据分析方案

内容主要分为四个部分：传统数据仓库分析实现方案简介Paimon+StarRocks构建湖仓一体数据分析实现方案StarRocks与Paimon结合的使用方式与实现原理StarRocks社区湖仓分析未来规划点击查看原文视频
Apache Flink·2023-09-02 06:04

驶向高效运营，StarRocks 助力蔚来汽车数据分析再升级

为了提升内部大数据分析的效率，蔚来陆续尝试了多种组件，如ApacheDruid、TiDB和ApacheDoris，最终选择StarRocks，作为极速统一的数据分析层，落地场景包含：用户画像平台、
StarRocks_labs·2023-09-02 06:33

驶向高效运营，StarRocks 助力蔚来汽车数据分析再升级

为了提升内部大数据分析的效率，蔚来陆续尝试了多种组件，如ApacheDruid、TiDB和ApacheDoris，最终选择了StarRocks，落地场景包含：用户画像平台、数据运营平台、BI自助取
·2023-09-01 17:20

Paimon+StarRocks 湖仓一体数据分析方案

内容主要分为四个部分：传统数据仓库分析实现方案简介Paimon+StarRocks构建湖仓一体数据分析实现方案StarRocks与Paimon结合的使用方式与实现原理StarRocks社区湖仓分析未来规划点击查看原文视频
·2023-09-01 15:37

通过starrocks jdbc外表查询sqlserver

1.sqlserver环境准备，使用docker环境，可以参考使用flinksqlservercdc同步数据到StarRocks_gongxiucheng的博客-CSDN博客部署获得sqlserver环境
gongxiucheng·2023-09-01 13:59

StarRocks docker 环境编译,测试最新留存retention和漏斗window_funnel函数

名词解释1.什么是留存分析？留存分析是一种用来分析用户参与情况/活跃程度的分析模型，考查进行初始行为后的用户中，有多少人会进行后续行为。这是衡量产品对用户价值高低的重要指标。2.什么是漏斗分析漏斗分析主要是用于分析一个多步骤过程中每一步的转化和流失情况。近期在做留存，漏斗等用户行为分析调研时，留存retention函数随着官网2.2rc版本发布已经可以下载使用，然后漏斗函数window_funne
gongxiucheng·2023-09-01 13:58

使用最新版flink tidb cdc 同步数据到StarRocks

新发布的FlinkCDC2.2版本新增了OceanBaseCE，PolarDB-X，SqlServer，TiDB四种数据源接入。其中新增OceanBaseCDC，SqlServerCDC，TiDBCDC三个连接器，而PolarDB-X的支持则是通过对MySQLCDC连接器进行兼容适配实现。发布原文链接：https://blog.csdn.net/weixin_44904816/article/de
gongxiucheng·2023-09-01 13:28

使用flink sqlserver cdc 同步数据到StarRocks

功能越发强大，支持的数据源也越多，本篇介绍使用flinkcdc实现：sqlserver-》（usingflinkcdc）-〉flink-》（usingflinkstarrocksconnector）-〉starrocks
gongxiucheng·2023-09-01 13:55

国产开源优秀新一代MPP数据库StarRocks入门之旅-数仓新利器（中）

表设计列式存储StarRocks的表和关系型数据相同,由行和列构成.每行数据对应用户一条记录,每列数据有相同数据类型.所有数据行的列数相同,可以动态增删列.StarRocks中,一张表的列可以分为维度列
IT小神·2023-08-29 23:52

starrocks湖到仓

LOADLABELbpit_bi.fwwiptransaction_20220720(DATAINFILE("hdfs://name01.baidu.com/user/hive/warehouse/bpit_bi.db/cux_tab_01/time_mon=202112/*.*")INTOTABLEfwwiptransactionFORMATAS"parquet"(sysid,lasttxnid
liurenfenglrf·2023-08-29 22:51

StarRocks入门到熟悉

1、部署1.1、注意事项需要根据业务需求设计严谨的集群架构，一般来说，需要注意以下几项：1.1.1、FE数量及高可用FE的Follower要求为奇数个，且并不建议部署太多，通常我们推荐部署1个或3个Follower。在三个Follower时，即可实现高可用（HA）。此时，若Leader节点进程挂掉或与集群脱离通信，其他2个Follower节点会通过bdbje协议快速重新选主出一个Leader，保证
docsz·2023-08-29 22:50

StarRocks 在金融科技行业的存算分离应用实践

目前，StarRocks存算分离上线的场景包含电商ERP订单分析系统、金融业务数据分析和制造业设备数据分析。由此可见，StarRocks存算分离已达到生产可用的高标准。
·2023-08-29 20:50

使用StreamLold写入 Starrocks报错：Caused by org

问题描述使用StreamLoad写入Starrocks报错，报这个错误:Causedby:org.apache.http.ProtocolException:Content-Lengthheaderalreadypresent
锋火连天·2023-08-28 22:35

【大数据】初步认识StarRocks

StarRocks是什么StarRocks是新一代极速全场景MPP数据库。
慕沐.·2023-08-28 00:32

10 倍性价比，万物新生基于 StarRocks 无缝直替 Trino

小编导读：万物新生成立于2011年，定位为“互联网+环保”类型的循环经济企业，是中国最大的二手电子产品交易与服务平台。万物新生集团旗下4大业务线包含：爱回收、拍机堂、拍拍、海外业务AHSDevice。万物新生集团秉承“让闲置不用，都物尽其用”的使命，致力于打造ESG(即“环境、社会和治理”)样本企业，将社会责任融入到商业实践中。在经历了MySQL、Greenplum、Trino等多种架构之后，为了
StarRocks_labs·2023-08-25 19:46

当高并发来袭：StarRocks Query Cache 一招搞定！

您是否曾经遇到这样的情况？每天早上或业务活动高峰期，大量用户涌入报表平台或数据应用，希望查看特定业务领域的最新指标或趋势。这些用户可能会基于庞大的数据集进行大量类似的聚合查询，造成集群的CPU负载持续攀升，从而导致查询性能不断下滑。针对这种高并发且呈现一定规律的查询，是否存在一种方法可以让集群在处理时智能地“精简计算量”呢？1、StarRocksQueryCache（查询缓存）为了解决这一问题，S
StarRocks_labs·2023-08-25 19:16

StarRocks & Friends 广州站精彩回顾

上周六，StarRocks&Friends活动在羊城广州成功举行，社区的小伙伴齐聚一堂，共同探讨了StarRocks在业界的应用实践和湖仓一体等热门话题。
StarRocks_labs·2023-08-25 19:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他