E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ApacheHudi
Apache Hudi重磅特性解读之存量表高效迁移机制
1.摘要随着
ApacheHudi
变得越来越流行,一个挑战就是用户如何将存量的历史表迁移到
ApacheHudi
,
ApacheHudi
维护了记录级别的元数据以便提供upserts和增量拉取的核心能力。
leesf
·
2020-07-13 09:00
Uber 如何使用 Apache Hudi 支撑 PB 级数据湖
2016年,Uber开发了增量处理框架
ApacheHudi
,以低延迟和高效率为关键业务数据管道赋能。一年后,我们开源了该解决方案,以使得其他有需要的组织也可以利用Hudi的优势。
过往记忆
·
2020-07-10 05:34
Apache Hudi 详解
ApacheHudi
代表HadoopUpsertsanDIncrementals,管理大型分析数据集在HDFS上的存储。Hudi的主要目的是高效减少摄取过程中的数据延迟。
大数据技术之路---花火
·
2020-07-07 23:52
hudi
实战|使用Spark结构化流写入Hudi
https://zhuanlan.zhihu.com/p/133316667欢迎关注微信公众号:
ApacheHudi
1.项目背景传统数仓的组织架构是针对离线数据的OLAP(联机事务分析)需求设计的,常用的导入数据方式为采用
吃鱼的羊
·
2020-07-02 02:46
SPARK
Hadoop
直播 | Apache Kylin × Apache Hudi Meetup
千呼万唤始出来,Meetup直播终于来啦~本次线上Meetup由ApacheKylin与
ApacheHudi
社区联合举办,将于3月14日晚进行直播,邀请到来自丁香园、腾讯、柯林布瑞以及Kyligence
Kyligence
·
2020-06-28 21:42
Apache
Kylin
活动
恭喜,Apache Hudi 即将成为顶级项目!
美国当地时间2020年05月11日,
ApacheHudi
项目的共同创始人、PMCVinothChandar给社区发了一封标题为[DISCUSS]GraduateApacheHudi(Incubating
过往记忆
·
2020-06-27 12:56
Apache Hudi:云数据湖解决方案
1.引入开源
ApacheHudi
项目为Uber等大型组织提供流处理能力,每天可处理数据湖上的数十亿条记录。随着世界各地的组织采用该技术,Apache开源数据湖项目已经日渐成熟。
leesf
·
2020-06-21 12:00
特性速览| Apache Hudi 0.5.3版本正式发布
1.下载连接源代码下载:
ApacheHudi
0.5.3SourceRelease(asc,sha512)0.5.3版本相关jar包地址:https://repository.apache.org/#nexus-search
leesf
·
2020-06-19 09:00
特性速览| Apache Hudi 0.5.3版本正式发布
1.下载连接源代码下载:
ApacheHudi
0.5.3SourceRelease(asc,sha512)0.5.3版本相关jar包地址:https://repository.apache.org/#nexus-search
leesf
·
2020-06-19 09:00
Uber基于Apache Hudi构建PB级数据湖实践
2016年,Uber开发了增量处理框架
ApacheHudi
,以低延迟和高效率为关键业务数据管道赋能。一年后,我们开源了该解决方案,以使得其他有需要的组织也可以利用Hudi的优势。
leesf
·
2020-06-11 09:00
Uber基于Apache Hudi构建PB级数据湖实践
2016年,Uber开发了增量处理框架
ApacheHudi
,以低延迟和高效率为关键业务数据管道赋能。一年后,我们开源了该解决方案,以使得其他有需要的组织也可以利用Hudi的优势。
leesf
·
2020-06-11 09:00
官宣!ASF官方正式宣布Apache Hudi成为顶级项目
马萨诸塞州韦克菲尔德(Wakefield,MA)-2020年6月-Apache软件基金会(ASF)、350多个开源项目和全职开发人员、管理人员和孵化器宣布:
ApacheHudi
正式成为Apache顶级项目
leesf
·
2020-06-05 13:00
官宣!ASF官方正式宣布Apache Hudi成为顶级项目
马萨诸塞州韦克菲尔德(Wakefield,MA)-2020年6月-Apache软件基金会(ASF)、350多个开源项目和全职开发人员、管理人员和孵化器宣布:
ApacheHudi
正式成为Apache顶级项目
leesf
·
2020-06-05 13:00
实战| 配置DataDog监控Apache Hudi应用指标
在即将发布的
ApacheHudi
0.6.0版本中,除已有的报告者类型(Graphite和JMX)之外,我们将引入通过DatadogHTTPAPI报告Hudi指标的功能。3.配置
leesf
·
2020-06-03 20:00
实战| 配置DataDog监控Apache Hudi应用指标
在即将发布的
ApacheHudi
0.6.0版本中,除已有的报告者类型(Graphite和JMX)之外,我们将引入通过DatadogHTTPAPI报告Hudi指标的功能。3.配置
leesf
·
2020-06-03 20:00
Apache Hudi又双叕被国内顶级云服务提供商集成了!
是的,最近国内云服务提供商腾讯云在其EMR-V2.2.0版本中优先集成了Hudi0.5.1版本作为其云上的数据湖解决方案对外提供服务
ApacheHudi
在HDFS的数据集上提供了插入更新和增量拉取的流原语
leesf
·
2020-05-09 13:00
Apache Hudi又双叕被国内顶级云服务提供商集成了!
是的,最近国内云服务提供商腾讯云在其EMR-V2.2.0版本中优先集成了Hudi0.5.1版本作为其云上的数据湖解决方案对外提供服务
ApacheHudi
在HDFS的数据集上提供了插入更新和增量拉取的流原语
leesf
·
2020-05-09 13:00
Apache Hudi 设计与架构最强解读
欢迎关注微信公众号:
ApacheHudi
本文将介绍
ApacheHudi
的基本概念、设计以及总体基础架构。
leesf
·
2020-04-16 05:00
Apache Hudi 设计与架构最强解读
欢迎关注微信公众号:
ApacheHudi
本文将介绍
ApacheHudi
的基本概念、设计以及总体基础架构。
leesf
·
2020-04-16 05:00
Apache Hudi 0.5.1版本重磅发布
历经大约3个月时间,
ApacheHudi
社区终于发布了0.5.1版本,这是
ApacheHudi
发布的第二个Apache版本,该版本中一些关键点如下版本升级将Spark版本从2.1.0升级到2.4.4将Avro
ApacheHudi
·
2020-02-01 00:00
ApacheHudi
常见问题汇总
欢迎关注公众号:
ApacheHudi
1.
ApacheHudi
对个人和组织何时有用如果你希望将数据快速提取到HDFS或云存储中,Hudi可以提供帮助。
ApacheHudi
·
2020-01-04 19:00
Hudi基本概念
ApacheHudi
(发音为“Hoodie”)在DFS的数据集上提供以下流原语插入更新(如何改变数据集?)增量拉取(如何获取变更的数据?)
ApacheHudi
·
2019-12-10 09:00
官宣!Amazon EMR正式支持Apache Hudi
ApacheHudi
是一个开源的数据管理框架,其通过提供记录级别的insert,update,upsert和delete能力来简化增量数据处理和数据管道开发。
ApacheHudi
·
2019-11-22 11:00
上一页
1
2
3
4
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他