E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hologres
原来还可以使用 DataX 进行数据同步
DataX实现了包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
lytao123
·
2024-02-07 06:16
➤
数据库
big
data
hive
java
DataX
Clickhouse
datax 学习记录
DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
咳咳00
·
2024-02-02 17:58
学习
大数据
datax
datax避坑记录
DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
佛祖保佑永不宕机
·
2024-02-02 17:28
数据库
数据库
开源数据同步工具DataX
DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
快乐江小鱼
·
2024-01-28 12:34
java
开源
java
流式湖仓增强,
Hologres
+ Flink 构建企业级实时数仓
2023年12月,由阿里云主办的实时计算闭门会在北京举行,阿里云实时数仓
Hologres
研发负责人姜伟华现场分享
Hologres
+Flink构建的企业级实时数仓,实现全链路的数据实时计算、实时写入、实时更新
Apache Flink
·
2024-01-26 06:15
flink
大数据
基于
Hologres
+Flink 的曹操出行实时数仓建设
云布道师曹操出行创立于2015年5月21日,是吉利控股集团布局“新能源汽车共享生态”的战略性投资业务,以“科技重塑绿色共享出行”为使命,将全球领先的互联网、车联网、自动驾驶技术以及新能源科技,创新应用于共享出行领域,以“用心服务国民出行”为品牌主张,致力于打造服务口碑最好的出行品牌。曹操出行业务背景介绍作为一家互联网出行平台,主要提供了网约车、顺风车、专车等一些出行服务。打车为其主要的一个业务场景
云布道师
·
2024-01-25 20:23
阿里云
Apache doris Datax DorisWriter扩展使用方法
DataX实现了包括MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
张家锋
·
2024-01-22 15:27
Hologres
V2.1版本发布,新增计算组实例构建高可用实时数仓
Highlight产品介绍
Hologres
是阿里云自研一站式实时数仓,统一数据平台架构,将OLAP查询、即席分析、在线服务、向量计算多个数据应用构建在统一存储之上,实现一份数据,多种计算场景。
阿里云大数据AI技术
·
2024-01-20 21:07
网络
java
数据库
基于
Hologres
+Flink 的曹操出行实时数仓建设
本文整理自曹操出行实时计算负责人林震基于
Hologres
+Flink的曹操出行实时数仓建设的分享,内容主要分为以下六部分:曹操出行业务背景介绍曹操出行业务痛点分析
Hologres
+Flink构建企业级实时数仓曹操出行实时数仓实践曹操出行业务成果分析未来展望一
Apache Flink
·
2024-01-19 08:54
flink
大数据
Hologres
+ Flink 流式湖仓建设
Hologres
+Flink流式湖仓建设1Flink+
Hologres
特性1.2实时维表Lookup1.3高性能实时写入与更新1.4多流合并1.5
Hologres
作为Flink的数据源1.6元数据自动发现与更新
Direction_Wind
·
2024-01-18 21:56
hologres
技术调研
flink
大数据
Hologres
性能优化指南2:分布键Distribution Key,
Distributionkey介绍在
Hologres
中,DistributionKey属性指定了表数据的分布策略,系统会保证DistributionKey相同的记录被分配到同一个Shard上。
林语棠
·
2024-01-18 18:21
性能优化
互联网摸鱼日报(2022-09-13)
Salesforce构建可扩展API的旅程4.Uber是怎么改进A/B测试实践的5.图数据库和知识图谱在微财风控系统中的探索和应用6.京东零售平台:前端组件资源共享与中心化管理实践7.数据库内核杂谈(二十四)-
Hologres
史蒂芬周_jianshu
·
2024-01-18 13:06
小红书推荐大数据在阿里云上的实践
第三部分主要是讲一些OLAP的实时分析的场景,以及和阿里云MC-
Hologres
的合作。
aliyunhologres
·
2024-01-18 05:55
经典用户案例
flink
kafka
hdfs
大数据
数据库
基于
Hologres
+Flink的曹操出行实时数仓建设作者:林震|曹操出行实时计算负责人
作者:林震|曹操出行实时计算负责人曹操出行业务背景介绍曹操出行创立于2015年5月21日,是吉利控股集团布局“新能源汽车共享生态”的战略性投资业务,以“科技重塑绿色共享出行”为使命,将全球领先的互联网、车联网、自动驾驶技术以及新能源科技,创新应用于共享出行领域,以“用心服务国民出行”为品牌主张,致力于打造服务口碑最好的出行品牌。作为一家互联网出行平台,主要提供了网约车、顺风车、专车等一些出行服务。
阿里云大数据AI技术
·
2024-01-11 09:40
flink
大数据
流式湖仓增强,
Hologres
+ Flink 构建企业级实时数仓
流式湖仓增强,
Hologres
+Flink构建企业级实时数仓一、
Hologres
+Flink,阿里云上众多客户实时数仓的首选随着大数据从规模化走向实时化,实时数据的需求覆盖互联网、交通、传媒、金融、政府等各个领域
Elivis Hu
·
2024-01-08 22:52
数仓
flink
大数据
5分钟使用
Hologres
实时湖仓加速分析挑战赛来袭
活动简介5分钟快速使用
Hologres
实时湖仓能力,加速分析数据湖OSS上Hudi、Delta、Paimon、ORC等格式数据,赢取精美礼品活动入口:
Hologres
实时湖仓分析挑战赛-阿里云开发者社区或点击文末
阿里云大数据AI技术
·
2024-01-08 19:50
数据库
oracle
linux
流式湖仓增强,
Hologres
+ Flink构建企业级实时数仓
2023年12月,由阿里云主办的实时计算闭门会在北京举行,阿里云实时数仓
Hologres
研发负责人姜伟华现场分享
Hologres
+Flink构建的企业级实时数仓,实现全链路的数据实时计算、实时写入、实时更新
阿里云大数据AI技术
·
2024-01-04 16:07
flink
大数据
大数据实时(4)-YDJ的FLink&
Hologres
的实时数仓实践
目录:1、场景与痛点2、技术选型3、应用最佳实践1)客户系统实践2)大屏实践3)实时数仓实践4、思考1、场景与痛点一家快速成长的公司,在短期内发展起来时,技术方面都会留下一些问题,比如从大单体到微服务的转型,从选型到落地,有时为了快速满足业务的需求,会采用一些临时方案满足客户要求,造成一些临时方案遗留症。比如:架构方面:多种数据源、多语言、多布式、异构系统、业务侵入严重,多种架构带来的复杂性;数据
天天沐沐
·
2023-12-18 03:39
Hologres
性能优化指南1:行存,列存,行列共存
在
Hologres
中支持行存、列存和行列共存三种存储格式,不同的存储格式适用于不同的场景。在建表时通过设置orientation属性指定表的存储格式:BEGIN;CREATETABLE(...)
林语棠
·
2023-11-26 02:50
性能优化
大数据
数据仓库
Datax的使用说明及入门操作案例演示
DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
嫣夜来
·
2023-11-23 14:39
知识积累
分布式
数据库
数据库
大数据
hive
Hologres
如何支持亿级用户UV计算
本文将介绍阿里云
Hologres
如何基于RoaringBitmap进行
阿里云技术
·
2023-11-22 13:07
大数据
数据库
DataWorks实践笔记-从入门到精通
DataWorks是阿里出品的一站式大数据开发与治理平台,基于MaxCompute/EMR/MC-
Hologres
等大数据计算引擎,网络上的教程很多,但是一般都比较冗长。
qq_43548990
·
2023-11-22 13:58
云计算
PostgreSQL (
Hologres
) 日期生成
PostgreSQL生成指定日期下一个月的日期(在
Hologres
中,不支持递归查询)SELECTto_char(T,'YYYYMMDD')::int4ASdate_int,date(T)ASdate_str
myqijin
·
2023-11-22 13:09
postgresql
数据库
Flink+
Hologres
亿级用户实时UV精确去重最佳实践
UV、PV计算,因为业务需求不同,通常会分为两种场景:离线计算场景:以T+1为主,计算历史数据实时计算场景:实时计算日常新增的数据,对用户标签去重针对离线计算场景,
Hologres
基于RoaringBitmap
阿里云技术
·
2023-11-21 22:32
flink
小迈科技 X
Hologres
:高可用的百亿级广告实时数仓建设
通过本文,我们将会介绍小迈科技如何通过
Hologres
搭建高可用的实时数仓。一、业务介绍小迈科技成立于2015年1月,是一家致力以数字化领先为优势,实现业务高质量自增长的移动互联网科技公司。
阿里云技术
·
2023-11-21 22:32
大数据
云计算
阿里云
实时数仓入门训练营:
Hologres
性能调优实践
简介:《实时数仓入门训练营》由阿里云研究员王峰、阿里云资深技术专家金晓军、阿里云高级产品专家刘一鸣等实时计算Flink版和
Hologres
的多名技术/产品一线专家齐上阵,合力搭建此次训练营的课程体系,精心打磨课程内容
阿里云云栖号
·
2023-11-17 14:11
云栖号技术分享
Hologres
存储
Hologres
揭秘:深度解析高效率分布式查询引擎
简介:从阿里集团诞生到云上商业化,随着业务的发展和技术的演进,
Hologres
也在持续不断优化核心技术竞争力,为了让大家更加了解
Hologres
,我们计划持续推出Hologers底层技术原理揭秘系列,从高性能存储引擎到高效率查询引擎
阿里云云栖号
·
2023-11-17 14:11
云栖号技术分享
实时数仓
Hologres
云原生
Hologres
揭秘:高性能原生加速MaxCompute核心原理
简介:
Hologres
技术揭秘系列持续更新中,本期我们将带来
Hologres
高性能原生加速查询MaxCompute的技术原理解析。
阿里云云栖号
·
2023-11-17 14:11
云栖号技术分享
Hologres
MaxCompute
首次揭秘云原生
Hologres
存储引擎
概要:刚刚结束的2020天猫双11中,MaxCompute交互式分析(
Hologres
)+实时计算Flink搭建的云原生实时数仓首次在核心数据场景落地,为大数据平台创下一项新纪录。
阿里云技术
·
2023-11-17 14:09
数据库
大数据
Hologres
揭秘:深度解析高效率分布式查询引擎
Hologres
(中文名交互式分析)是阿里云自研的一站式实时数仓,这个云原生系统融合了实时服务和分析大数据的场景,全面兼容PostgreSQL协议并与大数据生态无缝打通,能用同一套数据架构同时支持实时写入实时查询以及实时离线联邦分析
阿里云技术
·
2023-11-17 14:09
大数据
云服务
阿里云
Hologres
性能调优
查看执行计划explain仅仅生成执行计划、sql没有执行explainanalyzesql会执行,并收集实际运行中的一些信息性能优化手段表结构、表数据变动后执行analyzetable执行计划中没有让小表hashjoin,说明表的统计信息有误,大表、小表都执行analyze设置distribution_key,distribution_key决定数据存储在哪个shardMotionnode不合适
欧皇西西
·
2023-11-17 14:09
大数据
阿里云
odps
正确设计
Hologres
实时数仓,性能提升10倍+
本文将会讲述阿里巴巴零售通数据平台如何优化
Hologres
实时数仓,达到性能提升10倍+的效果,完美支撑双11营销活动、实时数据大屏等核心场景。
aliyunhologres
·
2023-11-17 14:29
经典用户案例
flink
大数据
数据仓库
阿里云
Hologres
揭秘:深度解析高效率分布式查询引擎
简介:从阿里集团诞生到云上商业化,随着业务的发展和技术的演进,
Hologres
也在持续不断优化核心技术竞争力,为了让大家更加了解
Hologres
,我们计划持续推出Hologers底层技术原理揭秘系列,从高性能存储引擎到高效率查询引擎
阿里开发者
·
2023-11-17 14:28
存储
SQL
缓存
分布式计算
Cloud
Native
NoSQL
大数据
关系型数据库
PostgreSQL
索引
hologres
基础知识一文全
hologres
基础知识一文全1功能特性1.1多场景查询分析1.2原生实时数仓1.3企业级运维能力1.4生态与可扩展性2
hologres
架构2.1传统分布式系统2.2
hologres
基础架构2.2.1计算层
Direction_Wind
·
2023-11-17 14:57
hologres
大数据
hologres
索引与查询优化
hologres
优化部分1
hologres
建表优化1.1建表中的配置优化1.1字典索引dictionary_encoding_columns1.2位图索引bitmap_columns1.2.2Bitmap
Direction_Wind
·
2023-11-17 13:24
hologres
数据库
大数据
数据仓库
【云栖2023】姜伟华:
Hologres
Serverless之路——揭秘弹性计算组
本文根据2023云栖大会演讲实录整理而成,演讲信息如下:演讲人:姜伟华|阿里云计算平台事业部资深技术专家、阿里云实时数仓
Hologres
研发负责人演讲主题:HologresServerless之路——揭秘弹性计算组实时化成为了大数据平台的核心演进趋势
阿里云大数据AI技术
·
2023-11-16 12:29
serverless
云原生
flink sql 如何upsert 到一张
hologres
表中
FlinkTable的三种Sink模式作为计算引擎Flink应用的计算结果总要以某种方式输出,比如调试阶段的打印到控制台或者生产阶段的写到数据库。而对于本来就需要在Flink内存保存中间及最终计算结果的应用来说,比如进行聚合统计的应用,输出结果便是将内存中的结果同步到外部。就FlinkTable/SQLAPI而言,这里的同步会有三种模式,分别是Append、Upsert和Retract。实际上这些
宇文智
·
2023-11-08 13:04
sql
flink
大数据
DataX数据同步工具
DataX实现了包括MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、
Hologres
躺着听Jay
·
2023-11-07 17:23
大数据
数据仓库
Hologres
助力飞猪双11实时数据大屏秒级响应
摘要:刚刚结束的2020天猫双11中,MaxCompute交互式分析(下称
Hologres
)+实时计算Flink搭建的云原生实时数仓首次在核心数据场景落地,为大数据平台创下一项新纪录。
阿里云技术
·
2023-11-06 11:04
flink
大数据
实时数仓-
hologres
使用总结
我们回顾下,
Hologres
是一款实时HSAP产品,隶属阿里自研大数据品牌MaxCompute,兼容PostgreSQL生态、支持MaxCompute数据直接查询,支持实时写入实时查询,实时离线联邦分析
高阳很捷迅
·
2023-11-02 18:57
数据分析
IT管理
Hologres
实时数仓
实时数仓
Hologres
新一代弹性计算组实例技术揭秘
Hologres
在保障业务方面持续优化核心技术竞争力,过去一年中,
Hologres
创新提出并实现了新一代弹性计算组实例,旨在通过更强的隔离和弹性能力,进一步提高业务系统的稳定性。
阿里云云栖号
·
2023-10-26 12:44
云栖号技术分享
大数据
云计算
人工智能
阿里云
阿里云实时数仓
Hologres
年度发布,解读数仓新趋势
简介:阿里云实时数仓
Hologres
年度发布,解读数仓新趋势。
阿里云云栖号
·
2023-10-26 12:43
云栖号技术分享
阿里云
big
data
数据仓库
技术解读:实时数仓
Hologres
如何支持超大规模部署与运维
简介:在本次评测中,
Hologres
是目前通过中国信通院大数据产品分布式分析型数据库大规模性能评测的规模最大的MPP数据仓库产品。
阿里云云栖号
·
2023-10-26 12:43
云栖号技术分享
运维
数据库
big
data
技术分享:从双11看实时数仓
Hologres
高可用设计与实践
在这场大考中,一站式实时数仓
Hologres
以每秒11.2亿条的高速写入,和每秒1.1亿次的查询峰值(包含点查和OLAP查询),交出了满意的答卷,稳定高效地支撑了阿里巴巴双11核心应用场景。
阿里云云栖号
·
2023-10-26 12:43
云栖号技术分享
big
data
数据仓库
分布式
CCO x
Hologres
:实时数仓高可用架构再次升级,双11大规模落地
作者|梅酱来源|阿里技术公众号一2021年双11总结2021年阿里巴巴双11期间,由CCO+
Hologres
构建的高可用实时数仓经过2年的迭代,支撑了阿里集团内部从智能到人工,从应用到数据产品,从B/C
阿里云云栖号
·
2023-10-26 12:43
云栖号技术分享
架构
big
data
人工智能
实时数仓
Hologres
如何支持超大规模部署与运维
阿里云实时数仓
Hologres
(原阿里云交互式分析)在报表任务、交互式查询、压力测试、稳定性等方面通过了中国信通院分布式分析型数据库性能评测(大规模),并以8192个节点刷新了通过该评测现有参评的规模记录
阿里云技术
·
2023-10-26 12:41
运维
big
data
数据仓库
新一代
Hologres
实时数仓大揭秘
作者:金晓军(仙隐),阿里云资深技术专家,大数据领域从业10年,现从事交互式分析引擎
Hologres
设计与研发工作。一、传统数仓痛点1)传统数据仓库痛
阿里云技术
·
2023-10-26 12:11
【
Hologres
】基于
Hologres
实时离线一体化数仓建设实践
0、案例业务背景在互联网大潮中,新东方在IT技术上也不断重构,持续投入大数据建设,研发大数据的相关技术和应用,从而快速而精准地响应业务需求,并用数据为集团各级领导提供决策依据。新东方的大数据应用主要包括两部分:企业应用端的业务场景(B端):包括交易,教学,人员等数据,数据规模为TB级。数据会被按照不同的条件和学校层级等,形成营收、教学、客服、财富人事等实时报表,为CRM系统的成千上万名业务顾问提供
Impl_Sunny
·
2023-10-26 12:39
#
案例精选
Hologres
教育行业
实时数仓
实时数仓
Hologres
1.概述
Hologres
是阿里巴巴自主研发的一站式实时数仓引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与即席分析(AdHoc
大数据开发工程师-宋权
·
2023-10-26 12:09
Hologres
big
data
数据库
数据仓库
实时数仓
Hologres
【快速了解】
什么是实时数仓HologresHologres是阿里巴巴自主研发的一站式实时数仓引擎(Real-TimeDataWarehouse),支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议,支持大部分PostgreSQL函数),支持PB级数据多维分析(OLAP)与即席分析(AdHoc),支持高并发低延迟的在线数据服务(Serving),与MaxCompute、Fli
一阵暖风
·
2023-10-26 12:38
数据仓库
数据库
数据挖掘
上一页
1
2
3
4
5
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他