E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
pulsar
FFA 2021 专场解读 - 开源解决方案 / 流批一体
其中,开源解决方案专场,来自Pravega、
Pulsar
、TiDB、Zeppelin、Atlas等社区的技术专家围绕Flink的生态融合,探讨当下大数据的发展趋势与未来动向,并展现相关技术在一线生产
Apache Flink
·
2022-10-07 13:04
数据库
大数据
编程语言
hadoop
人工智能
百万级Topic,Apache
Pulsar
在腾讯云的稳定性优化实践
作者|冉小龙Apache
Pulsar
作为云原生时代消息流系统,采用存储计算分离架构,支持大集群、多租户、百万级Topic、跨地域数据复制、持久化存储、分层存储、高可扩展性等企业级和金融级功能。
·
2022-09-28 18:03
apache
Pulsar
的Key_Shared消费模式与Kafka的消费者再均衡
Kafka消费者再均衡在Kafka中,一个分区只能有一个消费者,处于一个消费组的消费者,处理消息的时候是排他的,也就是说:一条消息,只能由消费组里面的一个消费者消费到。消费者再均衡的时候,处于同一消费组中的所有消费者将是不可用的,等再均衡动作完成后,才会按照重新分配的策略进行消费。我们肯定需要避免消费者再均衡的情况发生。但是在实际生产中,想避免发生再均衡是相当困难的,很多时候它会频繁发生的。引起再
淡淡的小番茄
·
2022-09-24 17:01
技术干货|基于Apache Hudi 的CDC数据入湖「内附干货PPT下载渠道」
简介:阿里云技术专家李少锋(风泽)在ApacheHudi与Apache
Pulsar
联合Meetup杭州站上的演讲整理稿件,本议题将介绍典型CDC入湖场景,以及如何使用
Pulsar
/Hudi来构建数据湖,
阿里云云栖号
·
2022-09-21 18:14
云栖号技术分享
apache
kafka
数据库
技术干货|基于Apache Hudi 的CDC数据入湖
简介:阿里云技术专家李少锋(风泽)在ApacheHudi与Apache
Pulsar
联合Meetup杭州站上的演讲整理稿件,本议题将介绍典型CDC入湖场景,以及如何使用
Pulsar
/Hudi来构建数据湖,
阿里云开发者
·
2022-09-21 18:12
SQL
存储
消息中间件
分布式计算
Kafka
云原生爱好者周刊:Prometheus 架构演进之路 | 2022-07-26
Pulsar
Pulsar
是基于eBPF的高度模块化的物联网运行期安全代理框架。这名字和Apache
Pulsar
撞衫
·
2022-09-15 12:40
云计算
Apache
Pulsar
系列 —— 深入理解Bookie GC 回收机制
背景ApacheBookkeeper是基于日志的一个持久化系统,所有的数据会以日志的形式存储到Ledger磁盘的EntryLog文件中,之后通过后台异步回收的形式来将EntryLog文件回收掉。但是在我们实际的使用场景中,发现很久之前的EntryLog文件无法被删除掉,对EntryLog文件存在的时间进行监控,具体如下:我们可以看到,假设从Broker侧设置的Retention策略最大为5天,即很
·
2022-09-08 16:14
apache
消息中间件:为什么我们选择 RocketMQ
作者:李伟说起消息队列,ActiveMQ、RabbitMQ、RocketMQ、Kafka、
Pulsar
等纷纷涌入我们的脑海中,在如此众多的开源消息队列产品中,作为一名合格的架构师如何给出高性价比的方案呢
高可用架构
·
2022-09-05 07:41
队列
中间件
分布式
java
kafka
Pulsar
云原生分布式消息和流平台v2.8.0
Pulsar
云原生分布式消息和流平台**本人博客网站**IT小神www.itxiaoshen.com
Pulsar
官方网站Apache
Pulsar
是一个云原生的分布式消息和流媒体平台,最初创建于雅虎!
IT小神
·
2022-09-05 07:01
运维
云原生
云原生
中间件
serverless
【
Pulsar
精选】从架构角度对比
Pulsar
和 Kafka
1总体架构1.1
Pulsar
总体架构
Pulsar
采用分层架构,主要组件组成:Broker、ApacheBookKeeper和ApacheZooKeeper。
熊本极客
·
2022-08-30 20:29
带你玩转消息队列和相关选型!
导语|本文主要介绍Kafka、RabbitMQ、
Pulsar
、RocketMQ相关的基本原理和选型对比,希望对此方向感兴趣的读者提供一定经验和帮助。
·
2022-08-24 22:45
消息队列程序员
千亿级、大规模:腾讯超大 Apache
Pulsar
集群性能调优实践
关于作者鲍明宇腾讯高级软件工程师,目前就职于腾讯TEG数据平台部,负责Apache
Pulsar
、ApacheInlong、DB数据采集等项目的开发工作。
·
2022-08-05 16:19
apache
技术干货|如何将
Pulsar
数据快速且无缝接入 Apache Doris
KoP架构介绍:KoP是Kafkaon
Pulsar
的简写,顾名思义就是如何在
Pulsar
上实现对Kafka数据的读写。
·
2022-08-03 15:45
译文 | 科普:
Pulsar
和 Kafka 架构对比
关于Apache
Pulsar
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
Java烟雨
·
2022-07-25 11:10
kafka
分布式
架构
java
Pulsar
和 Kafka 架构对比
本文作者是DavidKjerrumgaard,目前任职于Splunk,Apache
Pulsar
和ApacheNiFi项目贡献者。译者为Sijia@StreamNative。
zhisheng_blog
·
2022-07-25 11:58
分布式
中间件
kafka
数据库
hadoop
翟佳:高可用、强一致、低延迟——BookKeeper的存储实现
分享嘉宾:翟佳StreamNative联合创始人编辑整理:张晓伟美团点评出品平台:DataFunTalk**导读:**多数读者们了解BookKeeper是通过
Pulsar
,实际上BookKeeper在数据库和存储场景都有着非常广泛的应用
DataFunTalk
·
2022-07-22 14:00
云原生消息队列
Pulsar
浅析
简介:云原生消息队列
Pulsar
浅析一、前言
Pulsar
是一个多租户,高性能的服务间消息解决方案。最初由Yahoo开发,现在由ApacheSoftwareFoundation负责。
·
2022-07-11 17:53
后端
活动报名|聚焦案例实践,Apache
Pulsar
在线 Meetup 火热来袭
7月16日(周六),由Apache
Pulsar
创始成员组建的StreamNative团队将联合腾讯云中间件共同组织新一期的Apache
Pulsar
Meetup。
·
2022-07-11 12:18
开源
云原生时代消息中间件
Pulsar
(介绍、集群安装部署、管理页面安装部署)
Pulsar
基本介绍Apache
Pulsar
是一个云原生企业级的发布订阅(pub-sub)消息系统,最初由Yahoo开发,并于2016年底开源,现在是Apache软件基金会顶级开源项目。
四维大脑
·
2022-07-11 07:08
消息队列
中间件
杠上Spark、Flink?Kafka为何转型流数据平台
AI前线导读:消息中间件系统(比如RabbitMQ、Kafka、
Pulsar
等)是现代实时数据或者流数据基础架构的关键环节。它通常作为一个数据管道,链接了各种业务前台和数据后台(比如数仓等)。
weixin_34081595
·
2022-07-04 08:10
serverless
大数据
运维
杠上 Spark、Flink?Kafka 为何转型流数据平台
整个消息系统的演化进程,大致可以分为三个阶段:1.0时代:JMS以及各种MQ2.0时代:Kafka的实时管道时代3.0时代:流数据平台时代(Kafka和
Pulsar
)1.0-MQ时代消息系统作为一个基础机构的组件
chigubiao4837
·
2022-07-04 08:36
大数据
serverless
运维
SpringBoot整合
Pulsar
的实现示例
目录一、添加pom.xml依赖二、
Pulsar
参数类三、
Pulsar
配置类四、不同消费数据类型的监听器五、
Pulsar
的核心服务类六、
Pulsar
整合SpringCloud一、添加pom.xml依赖
·
2022-07-01 17:33
数据生态第三弹 | RocketMQ OpenMLDB Connector,实时数据到特征工程的高速传输
因此,OpenMLDB积极打通数据生态上游,继面向实时消息队列
Pulsar
、分布式流处理平台Kafka的两款connector发布后,OpenMLDB和RocketMQ合作推出RocketMQOpenMLDBConnector
·
2022-06-28 23:31
在 KubeSphere 上部署 Apache
Pulsar
Apache
Pulsar
介绍Apache
Pulsar
作为Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
KubeSphere 云原生
·
2022-06-23 18:35
k8s
容器平台
kubesphere
云计算
在 KubeSphere 上部署 Apache
Pulsar
Apache
Pulsar
介绍Apache
Pulsar
作为Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
·
2022-06-21 14:06
云计算
领导:谁再用redis过期监听实现关闭订单,立马滚蛋!
1.首先推荐使用rocketmq、
pulsar
等拥有定时投递功能的消息队列。
-Finley-
·
2022-06-21 08:00
活动回顾| Apache Doris 的过去、现在与未来
2021年6月26号,ApacheDoris社区和Apache
Pulsar
社区在北京联合举办了一场的线下Meetup。我作为第一个分享嘉宾,为大家介绍了下Doris的历史、现状和一些未来规划。
ApacheDoris
·
2022-06-17 10:02
数据库
大数据
分布式
编程语言
hadoop
虚拟机搭建安装
Pulsar
环境教程(开发测试使用)
甲方要求要用
pulsar
。二、搭建环境这里集群就不搭建了。只是开发测试使用。需要集群搭建教程的可以不用往下看了。
七维大脑
·
2022-06-08 20:37
pulsar
中间件
docker
linux
Apache
Pulsar
详解
一、
Pulsar
介绍Apache
Pulsar
作为Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、跨区域复制
小波同学
·
2022-06-04 01:17
Apache
Pulsar
——Transaction事务
前言在事务消息未出现前,
Pulsar
中支持的最高等级的消息传递保证,是通过Broker的消息去重机制,来保证Producer在单个分区上的消息只精确保存一次。
小波同学
·
2022-06-02 19:51
聊聊云原生数据库的一致性
基于Kafka/
Pulsar
在做日志存储,感觉更像是在做中间件,而不是在做数据库!”我在和很多朋友讨论的过程中,发现大家对于Consistency、Consensus、Replication这些基本概
·
2022-05-20 13:35
数据库一致性分布式系统
云上打通
Pulsar
与 Kafka
近日,Apache
Pulsar
商业化公司StreamNative宣布发布新产品StreamNativeCloudforKafkaⓇ。
·
2022-05-18 13:47
云原生开源apache
pulsar
以Segment为中心的架构
Pulsar
的分层架构Apache
Pulsar
和其他消息系统最根本的不同是采用分层架构。
tracy_668
·
2022-05-15 16:22
国产开源优秀新一代MPP数据库StarRocks入门之旅-数仓新利器(上)
没错,国产之强大,越来越多像新时代云原生的Apache
Pulsar
一样把性能优化极致的正在快速崛起,本篇从StarRocks由来开始,了解其特性和使用场景、架构和原理、组成部分,然后部署了一个FE和3个
itxiaoshen
·
2022-05-12 22:00
Kafka 和
Pulsar
的 Log Compaction 实现
原文地址:http://fxbing.github.io/2022/...本文主要对Kafka和
Pulsar
的LogCompaction原理进行介绍,并以我的理解进行简单的对比说明。
·
2022-05-01 21:09
OpenMLDB Meetup No.2 会议纪要
OpenMLDB社区于2022年4月16日举行了第二期meetup,会议相关视频及资料如下:●StreamNative联合创始人翟佳——面向OpenMLDB的上游数据生态,深度解析云原生消息流平台Apache
Pulsar
·
2022-04-29 17:53
pulsar
十分钟入门
什么是消息队列点对点:每个消息只有一个消费者,只有一个消费者可以消费此消息,消费完就可以删除。发布\订阅:发送到消息topic中的消息可以被所有订阅者消费,所有订阅者都消费完成后才可以被删除该消息,要先订阅再发送消息才能消费到。MQ发展史一代:采用无序或者共享的方式来消费消息(队列)2003activeMQ2006rabbitMQ二代:消息的消费严格排序和独占消息消费(流)(对一个topic分区始
小马过河R
·
2022-04-22 15:27
OpenMLDB
Pulsar
Connector原理和实操
为此,OpenMLDB和Apache
Pulsar
合作推出OpenMLDB
Pulsar
Connector,实现稳定的流式集成,为高效打通实时数据到特征工程提供一条值得期待的清晰路径。
·
2022-04-21 11:23
OpenMLDB
Pulsar
Connector:高效打通实时数据到特征工程
为此,OpenMLDB和Apache
Pulsar
合作推出OpenMLDB
Pulsar
Connector,实现稳定的流式集成,为高效打通实时数据到特征工程提供一条值得期待的清晰路径。
·
2022-04-20 23:58
深入解析 Apache BookKeeper 系列:第二篇 — 写操作原理
本系列文章基于Apache
Pulsar
中配置的BookKeeper4.14版本。写操作中有很多线程调用Journal和LedgerStorage的API。
·
2022-04-16 09:41
共探开源生态|Apache
Pulsar
社区助力 Apache APISIX Summit Asia 2022
GitHub地址:http://github.com/apache/
pulsar
/场景关键词:异步解耦削峰填
·
2022-04-14 11:42
周日直播|OpenMLDB
Pulsar
Connector,高效打通实时数据到特征工程
全新Apache
Pulsar
周边生态OpenMLDB
Pulsar
Connector来袭!
·
2022-04-14 10:54
脉冲能量|Committer 专访——李理:Apache
Pulsar
项目“体验师”
GitHub地址:http://github.com/apache/
pulsar
/场景关键词:异步解耦削峰填
·
2022-04-09 15:07
直播回顾| Apache
Pulsar
2.10.0 新特性概览
关于StreamNativeStreamNative是一家开源基础软件公司,由Apache软件基金会顶级项目Apache
Pulsar
创始团队组建而成,围绕
Pulsar
打造下一代云原生批流融合数据平台。
·
2022-04-07 00:40
活动预告 | OpenMLDB Meetup No.2
活动预告|OpenMLDBMeetupNo.2OpenMLDBx
Pulsar
|OpenMLDB
Pulsar
Connector,数据到特征的高速传输2022年4月16日(周六)上午10:00-12:00,
·
2022-04-01 22:44
博文推荐|深入解析 BookKeeper 多副本协议(一)
译者简介王嘉凌@中国移动云能力中心,移动云
Pulsar
产品负责人,Apache
Pulsar
Contributor,活跃于Apache
Pulsar
等开源项目和社区
·
2022-04-01 11:52
博文推荐|Apache
Pulsar
轻装上阵:迈向轻 ZooKeeper 时代
本文翻译自《
Pulsar
IsolationPartIII:Separate
Pulsar
ClustersSharingaSingleBookKeeperCluster》,原文链接:https://streamnative.io
·
2022-03-31 12:11
Apache
Pulsar
结合Hudi构建Lakehouse方案分析
目录1.动机2.分析3.当前方案4.新的Lakehouse存储方案4.1新的存储布局4.2支持高效Upserts4.3将Hudi表当做
Pulsar
Topic4.4可扩展的元数据管理5.引用1.动机Lakehouse
·
2022-03-31 10:55
求职有
Pulsar
| 中国联通、StreamNative 多个热招岗位
关于Apache
Pulsar
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
·
2022-03-30 10:59
会议报名|今晚(3.30)8 点,3 月
Pulsar
中文开发者与用户组会
关于
Pulsar
中文开发者与用户组会议
Pulsar
中文开发者与用户组会议是由StreamNative发起的交流会议,在每月最后一个周三晚上举办。
·
2022-03-30 10:51
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他