E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Pulsar
Kafka和
Pulsar
深入解析
Kafka多租户:单租户系统数据迁移:依赖MirrorMaker,需要额外维护。市场上也有ConfluentReplicator等供应商工具。分层存储:由供应商提供商业使用。组件依赖:KafkaRaft(KRaft)从Kafka2.8开始处于早期访问模式,允许Kafka在没有ZooKeeper的情况下工作。这对Kafka来说是一个显著的优势,因为它简化了Kafka的体系结构并降低了学习成本。云原生
jasen91
·
2024-09-14 01:39
大数据开发
kafka
分布式
【Rust光年纪】深度解读:Rust语言中各类消息队列客户端库详细对比
本文将介绍一些用于Rust语言的消息队列客户端库,包括AMQP、ApacheKafka、NSQ、Apache
Pulsar
和RocketMQ,探讨它们的核心功能、使用场景、安装配置以及API概览。
friklogff
·
2024-08-29 03:27
Rust光年纪
rust
开发语言
后端
pulsar
集群部署
Linux安装openjdk11下载openjdk11openjdk11下载压缩包上传到指定路径并解压tar-xvfopenjdk-11.0.0.2_linux-x64.tar.gz&&mvjdk-11.0.0.2/jdk11配置指定用户的环境变量vi~/.bash_profile#末尾增加如下内容(根据自己jdk目录修改)exportJAVA_HOME=/yourpath/jdk-11expor
Dragon-qwe
·
2024-08-21 20:25
spring
boot
linux
Pulsar
与Rocketmq、Kafka、Inlong-TubeMQ,谁才是消息中间件的王者?
导语|
Pulsar
作为下一代消息中间件的典型代表,在设计和实现上面都具备很好的前瞻性,综合考量了业界现存的一些比较常用的、优秀的消息中间的架构设计、适用场景、运营中的问题等,如目前用的比较多的Kafka
腾讯云开发者
·
2024-02-20 19:31
运维
大数据
分布式
数据库
kafka
消息中间件:Puslar、Kafka、RabbigMQ、ActiveMQ
以下是提到的几种消息中间件的概述:
Pulsar
:
Pulsar
是一个由Apache软件基金会管理的开源分布式发布-订阅消息系统。
MarkHD
·
2024-02-20 17:08
kafka
activemq
分布式
如何给开源项目发起提案
背景前段时间在使用
Pulsar
的adminAPI时,发现其中的一个接口响应非常慢:admin.topics().getPartitionedStats(topic);使用curl拿到的响应结果非常大,同时也非常耗时
·
2024-02-19 23:35
开源pulsar
Pulsar
Architecture Overview(架构概述)
Configurationstore配置存储5、Persistentstorage持久化存储(1)ApacheBookKeeper存储实体(2)Ledgers分类账(3)Journalstorage日志存储6、
Pulsar
proxy
swadian2008
·
2024-02-19 10:55
Apache
pulsar
Pulsar
的组成部分
Pulsar
的架构概述
Pulsar
Pulsar
Standalone服务搭建
Pulsar
Standalone服务搭建说明简介Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。
aileen5150
·
2024-02-19 10:04
docker
Apache
Pulsar
--简单介绍
摘要今天分享下——Apache
Pulsar
–简单介绍的一些基本知识,欢迎关注!官方文档查看官网文档地址Apache
Pulsar
是什么?
陈永佳
·
2024-02-19 10:32
Apache
Pulsar
Apache
Pulsar
Pulsar
-架构与设计
Pulsar
架构与设计一、背景和起源二、框架概述1.设计特点2.框架适用场景三、架构图1.Broker2.持久化存储(Persistentstorage)3.
Pulsar
元数据(Metadatastore
临江蓑笠翁
·
2024-02-19 10:56
消息队列
架构
Znode数据丢失导致
pulsar
元数据不一致问题复盘
问题背景某环境执行zk升级后,
pulsar
的生产者报告部分topic发送消息超时,创建生产者超时,查看
pulsar
后台日志发现无明显异常,遂猜测可能为元数据损坏问题。重启生产者也未恢复正常。
ShootHzj
·
2024-02-09 23:44
Apache
Pulsar
在腾讯 Angel PowerFL 联邦学习平台上的实践
腾讯AngelPowerFL联邦学习平台联邦学习作为新一代人工智能基础技术,通过解决数据隐私与数据孤岛问题,重塑金融、医疗、城市安防等领域。腾讯AngelPowerFL联邦学习平台构建在Angel机器学习平台上,利用Angel-PS支持万亿级模型训练的能力,将很多在Worker上的计算提升到PS(参数服务器)端;AngelPowerFL为联邦学习算法提供了计算、加密、存储、状态同步等基本操作接口,
StreamNative
·
2024-02-07 11:24
Apache
Pulsar
——tenants租户、namespace命名空间、topic
一、多租户Apache
Pulsar
最初诞生于雅虎,当时就是为了解决雅虎内部各个部门之间数据的协调,所以多租户特性显得至关重用,
Pulsar
从诞生之日起就考虑到多租户这一特性,并在后续的实现过程中,将其不断的完善
小波同学
·
2024-02-04 05:41
KubeBlocks v0.8.0 发布!Component API 让数据库引擎组装更简单!
举个例子,我们可以将etcd和zookeeper这两种数据库做成了标准组件,开发者在定义Kafka或者
Pulsar
等复杂引擎时可以直接引用;再举个例子,我们还可以将Proxy做成了标准组件,开发者在定义各种发行版的
小猿姐
·
2024-02-03 10:51
数据库
kubernetes
云计算
Apache
Pulsar
为滴滴大数据运维带来了哪些收益?
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体。
滴滴技术
·
2024-01-27 17:58
apache
大数据
运维
Apache
Pulsar
——协议适配器
背景为了能平滑、不改写代码、无侵入地迁移应用使用
pulsar
,KoP以插件形式支持Kafka协议。
小波同学
·
2024-01-26 22:17
Apache
Pulsar
社区周报|09-05 ~ 09-11
关于Apache
Pulsar
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
StreamNative
·
2024-01-26 11:06
Linux中如何实现定时任务
一般实现的方法有几种:使用RocketMQ、RabbitMQ、
Pulsar
等消息队列的延时投递功能使用Redisson提供的DelayedQueue有一些方案虽然广为流传
千锋
·
2024-01-21 20:47
(转载)Python 并发框架
Pulsar
-Python
原文来自:https://www.oschina.net/p/
pulsar
-python前言
Pulsar
-Python是Python的并发框架,它可以在不同的线程或者进程中通过执行一个或者多个活动来写异步服务器
慌翯
·
2024-01-21 06:16
比拼Kafka,大数据分析新秀
Pulsar
到底好在哪
在用户选择一个消息系统时,消息模型是用户首先考虑的事情。消息模型应涵盖以下3个方面:消息消费——如何发送和消费消息;消息确认(ack)——如何确认消息;消息保存——消息保留多长时间,触发消息删除的原因以及怎样删除;消息消费模型在实时流式架构中,消息传递可以分为两类:队列(Queue)和流(Stream)。队列(Queue)模型队列模型主要是采用无序或者共享的方式来消费消息。通过队列模型,用户可以创
java菜
·
2024-01-20 04:19
请注意,你的
Pulsar
集群可能有删除数据的风险
在上一篇
Pulsar
3.0新功能介绍中提到,在升级到3.0的过程中碰到一个致命的问题,就是升级之后topic被删除了。
crossoverJie
·
2024-01-15 04:34
技术阅读周刊第十三期:一些提高生产力工具的终端命令
一文带你看懂
Pulsar
的消息保留和过期策略-腾讯云开发者社区-腾讯云URL:https://cloud.tencent.com/developer/article/2245703本文分析了
Pulsar
crossoverJie
·
2024-01-15 04:04
java
开发语言
pulsar
的架构与特性记录
一、什么是云原生云原生的概念是2013年MattStine提出的,到目前为止,云原生的概念发生了多次变更,目前最新对云原生定义为:Devps+持续交付+微服务+容器而符合云原生架构的应用程序是:采用开源堆栈(K8S+Docker)进行容器化,基于微服务架构提高灵活性和可维护性,借助敏捷方法、DevOps支持持续迭代和运维自动化,利用云平台设施实现弹性伸缩、动态调度、优化资源利用率。二、Apache
那小子、真烦
·
2024-01-11 09:09
云原生
pulsar
原来是这样操作topic的
本篇主要讲述
pulsar
topic部分,主要从设计以及源码的视角进行讲述。
林崇辉
·
2024-01-09 06:37
java
消息队列
pulsar
流平台
Apache
Pulsar
[3] 概念进阶
订阅模型
Pulsar
提供了灵活的消息模型,支持三种订阅类型:Exclusivesubscription:排他,只能有一个Consumer,接收一个Topic所有的消息Sharedsubscription
QuinnSun
·
2024-01-08 15:28
源码编译部署篇(二)源码编译milvus成功后如何启动standalone并调试成功!
Milvus启动和调试0前言1Milvus启动【问题描述】出现Aborted问题【问题分析】【解决方法】安装
Pulsar
服务执行单机启动命令解决监听端口号2Milvus调试编写launch.json验证单例调试成功
就想做一条闲鱼
·
2024-01-08 06:43
向量数据库
milvus
Apache
Pulsar
[4] 伪集群环境搭建
1准备工作操作系统:macOs运行环境:java82集群组成zk集群(3个节点)bk集群(3个节点)
pulsar
集群(3个节点)3搭建过程3.1zk集群搭建zk版本:3.4.121下载并解压zk2将解压好的
QuinnSun
·
2024-01-06 13:08
3分钟看懂如何给开源项目发起提案
背景前段时间在使用
Pulsar
的adminAPI时,发现其中的一个接口响应非常慢:admin.topics().getPartitionedStats(topic);使用curl拿到的响应结果非常大,同时也非常耗时
白日梦批发商
·
2024-01-03 21:18
开源
Flink版本更新汇总(1.14-1.18)
Checkpoint;2.批执行模式支持DataStream和Table/SQL混合应用;3.新增HybridSource功能;4.新增缓冲区去膨胀功能;5.新增细粒度资源管理功能;6.新增DataStream的
Pulsar
猫猫爱吃小鱼粮
·
2023-12-30 09:55
flink
人工智能
大数据
FAST银道面脉冲星巡天项目介绍
,第5版)FAST19波束脉冲星漂移扫描巡天模拟(基于Parkes观测数据)FAST科学数据简介FAST第八批科学数据开放通告FAST望远镜银道面脉冲星巡天项目TheFASTGalacticPlane
Pulsar
Snapshotsur
qiufeng1ye
·
2023-12-30 00:00
延迟队列商业版RocketMQ和
Pulsar
的对比
目录一、商业版RocketMQ和
Pulsar
的基本对比二、核心差异三、使用倾向三、RocketMQ使用注意问题一、商业版RocketMQ和
Pulsar
的基本对比系统实现原理使用限制成本业务支持及使用监控报警容灾高可用自动扩缩容
瞎胡侃
·
2023-12-27 15:57
其他
开发语言
RocketMQ
Pulsar
延迟队列
如何在
Pulsar
中使用 Debezium Connector
Pulsar
IO框架运行Debeziumconnector能捕获数据变化,并能将不同数据库的数据变化保存至
Pulsar
。本文介绍了如何在
Pulsar
中使用Debeziumconnec
StreamNative
·
2023-12-26 14:25
Pulsar
详解 - 索引目录
Pulsar
详解1—简介&基本概念(示例:Go语言)
Pulsar
详解2—架构和组件&安装和配置(示例:Go语言)
Pulsar
详解3—工作原理&客户端API(示例:Go语言)
Pulsar
详解4—
Pulsar
风不归Alkaid
·
2023-12-26 02:29
Pulsar
后端
golang
开发语言
Pulsar
详解2—架构和组件 & 安装和配置(示例:Go语言)
Pulsar
详解-索引目录一、
Pulsar
架构和组件1、分层架构
Pulsar
的整体架构采用了分层设计,这种分层架构为可伸缩性、可靠性和灵活性提供了很大的优势。
风不归Alkaid
·
2023-12-26 02:27
Pulsar
架构
golang
开发语言
如何给开源项目发起提案
背景前段时间在使用
Pulsar
的adminAPI时,发现其中的一个接口响应非常慢:admin.topics().getPartitionedStats(topic);使用curl拿到的响应结果非常大,同时也非常耗时
crossoverJie
·
2023-12-25 19:15
如何编写一个
Pulsar
Broker Interceptor 插件
背景之前写过一篇文章VictoriaLogs:一款超低占用的ElasticSearch替代方案讲到了我们使用Victorialogs来存储
Pulsar
消息队列的消息trace信息。
crossoverJie
·
2023-12-25 19:45
Pulsar
详解5—
Pulsar
的管理和监控
Pulsar
详解-索引目录一、命令行工具1、
pulsar
-admin的使用命令行工具
pulsar
-admin提供了丰富的功能来管理
Pulsar
集群和监控其运行状态。
风不归Alkaid
·
2023-12-22 10:48
Pulsar
网络
分布式
中间件
Pulsar
详解6—
Pulsar
的性能调优(示例:Go语言)
Pulsar
详解-索引目录一、Broker优化1、Broker优化1.1内存管理通过优化内存管理,可以提高
Pulsar
Broker的性能和稳定性。
风不归Alkaid
·
2023-12-22 10:48
Pulsar
golang
开发语言
后端
中间件
springboot中使用kafka
消息队列有很多选择:RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、
Pulsar
...如何选择看个人,我借用网友一张图来简
Bill老罗
·
2023-12-21 10:56
springboot
spring
boot
kafka
后端
关于MQ,你了解多少?(干货分享之二)
导语本文梳理笔者MQ知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括RabbitMQ、RocketMQ、Kafka、
Pulsar
,最后再横向对比这几款主流的消息中间件
腾讯云中间件
·
2023-12-21 08:09
ruby
开发语言
后端
Apache
Pulsar
技术系列 -
Pulsar
Client 实现解析
导语Apache
Pulsar
是一个多租户、高性能的服务间消息传输解决方案,支持多租户、低延时、读写分离、跨地域复制(GEOreplication)、快速扩容、灵活容错等特性。
腾讯云中间件
·
2023-12-21 08:39
腾讯云
apache
rocketmq
kafka
关于MQ,你了解多少?(干货分享之一)
导语本文梳理笔者MQ知识,从消息中间件的基础知识讲起,在有了基础知识后,对市面上各主流的消息中间件进行详细的解析,包括RabbitMQ、RocketMQ、Kafka、
Pulsar
,最后再横向对比这几款主流的消息中间件
腾讯云中间件
·
2023-12-21 08:39
kafka
腾讯云
rocketmq
云原生消息流系统 Apache
Pulsar
在腾讯云的大规模生产实践
导语由InfoQ主办的Qcon全球软件开发者大会北京站上周已精彩落幕,腾讯云中间件团队的冉小龙参与了《云原生机构设计与音视频技术应用》专题,带来了以《云原生消息流系统Apache
Pulsar
在腾讯云的大规模生产实践
腾讯云中间件
·
2023-12-21 08:06
云原生
apache
腾讯云
Pulsar
社区周报:08-22 ~ 09-04
关于Apache
Pulsar
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
StreamNative
·
2023-12-21 06:31
Spring boot 3.2 新特性介绍
1.增加了对Apache
Pulsar
的支持使用方式参考官网Messaging2.增加了对虚拟线程的支持需要jdk21版本在spring-boot项目中通过设置spring.threads.virtual.enabled
东来东往ol
·
2023-12-19 18:10
spring
boot
后端
java
Apache
Pulsar
之 Python Function
image导读:在Apache
Pulsar
之JavaFunction实践篇我们介绍了如何在本地快速编写并部署自己的JavaFunction,这篇文章将向大家介绍如何在本地快速部署并运行PythonFunction
StreamNative
·
2023-12-19 17:45
认识Apache Bookkeeper
Bookkeeper有一个非常成功的应用案例:apache
pulsar
,是近年雅虎开源的一个MQ,
pulsar
相对于kafka来说,在存储上有优势,kafka的单个partition的存储容
无醉_1866
·
2023-12-18 19:27
Pulsar
Functions Worker 的选举机制
摘要在
Pulsar
中,Function、Source和Sink都是运行在FunctionWorker上的,关于Function的内容可以参考一篇文章了解
Pulsar
Functions,关于Source和
StreamNative
·
2023-12-16 01:56
爱芯元智AX650N部署yolov8s 自定义模型
爱芯元智AX650N部署yolov8s自定义模型本博客将向你展示零基础一步步的部署好自己的yolov8s模型(博主展示的是自己训练的手写数字识别模型),本博客教你从训练模型到转化成利于
Pulsar
2工具量化部署到开发板上训练自己的
冰糖小新新
·
2023-12-01 13:10
记录
嵌入式硬件
为什么不能用Redis过期监听实现关闭订单?
一般实现的方法有几种:1.使用rocketmq、rabbitmq、
pulsar
等消
海棠Flower未眠
·
2023-11-26 18:08
#
Redis
redis
java-rabbitmq
rabbitmq
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他