pulsar

[Apache Pulsar] 企业级分布式消息系统-Pulsar入门基础

ApachePulsarPulsar是一个支持多租户的、高性能的服务与服务之间消息通讯的解决方案，最初由雅虎开发，现在由Apache软件基金会管理。
alex4837·2023-03-31 10:32

小白初识Apache Pulsar | 技术

继Hadoop和云原生之后，这次我们来聊聊，分布式消息系统——ApachePulsar。
BGRichi·2023-03-31 10:24

颠覆Kafka的统治，新一代云原生消息系统Pulsar，一文带你了解

文章目录**（一）Pulsar架构****Broker扩展****Bookie扩展****（二）Topic****分区Topic（Topic-Partition）****非持久Topic****重试Topic
程序源日志·2023-03-31 10:24

《Apache Pulsar从入门到实战》系列教程第9讲之pulsar架构原理

一、深入理解pulsar分层存储单个pulsar集群由以下三部分组成：多个broker负责处理和负载均衡producer发出的消息，并将这些消息分派给consumer；broker和pulsar配置存储交互来处理相应的任务
小米吃辣椒2022·2023-03-31 10:51

再见了 HDFS！这个资源调度框架已成气候！

不，还有RocketMQ和Pulsar可以选。是人人都会接触的协调系统Zookeeper吗？也未必，Redis如日中天！
Java思维导图·2023-03-30 13:22

RocketMQ-浅析架构

时下业界内比较流行的消息队列还是比较多的，当然应用广泛的且各方面性能都很优势的，大概有Kafka、本文将要介绍的RocketMQ以及最近比较火的Pulsar等。
Ftsom·2023-03-30 01:12

浅谈消息队列

MQ是什么屏蔽底层复杂的通讯协议，定义了一套应用层的、更加简单的通讯协议MQ通过将消息的发送和接收分离来实现应用程序的异步和解偶市面上的MQ对比有Broker重Topic流：kafka，JMS，pulsar
hellozepp·2023-03-29 12:52

Apache Pulsar 多层抽象layer2-broker、Cursor追踪

broker简介：pulsarbroker是无状态的，Bookeeper集群本身并不执行复制，每个Bookies只是一个跟随者被领导者同志做什么，领导人是PulsarBroker。
QuinnSun·2023-03-28 20:26

【Pulsar 精选】Apache Pulsar 架构简介

1.什么是ApachePulsar？
熊本极客·2023-03-28 05:53

Apache Pulsar 之 Python Function

在ApachePulsar之JavaFunction实践篇我们介绍了如何在本地快速编写并部署自己的JavaFunction，这篇文章将向大家介绍如何在本地快速部署并运行PythonFunction。
wolf4j·2023-03-27 19:56

docker部署+pulsar部署

linux下部署dockeryumlistinstalled|grepdockeryum-yinstalldockersystemctlstartdockersystemctlstatusdockerdocker配置阿里云镜像修改daemon配置文件/etc/docker/daemon.json来使用加速器vim/etc/docker/daemon.json{"registry-mirrors":
santiago_sea·2023-03-27 01:37

Apache Pulsar 多层抽象概念

设计理念保证不丢失消息(使用正确的配置且不是整个数据中心故障)强顺序性保证可预测的读写延迟ApachePulsar选择一致性而不是可用性就像BookKeeper和Zookeeper一样。
QuinnSun·2023-03-23 12:46

Apache Flink——Pulsar Flink Connector 打造全新批流融合

前言批流一体是数据计算的未来趋势，PulsarFlinkConnector为基于ApachePulsar在ApacheFlink上以批流一体的方式处理数据提供了理想的解决方案。
小波同学·2023-03-21 11:18

译文｜Apache Pulsar 如何保证消息不丢不重？

原作者为IvanKelly。经作者许可，我们对博客进行翻译并发布。人们在探讨流处理引擎（streamprocessingengine,SPE）时，经常会提到effectively-once（或exactly-once）保证。一般情况下，较大的数据管道包含多个组件，而管道中的任何组件都有可能发生故障，SPE通常只是其中一个小组件。如果用户希望数据管道提供effectively-once保证，则管道中
StreamNative·2023-03-20 17:55

Apache Pulsar 之企业级特性-多租户介绍

ApachePulsar最初诞生于雅虎，当时就是为了解决雅虎内部各个部门之间数据的协调，所以多租户特性显得至关重用，Pulsar从诞生之日起就考虑到多租户这一特性，并在后续的实现过程中，将其不断的完善。
wolf4j·2023-03-19 13:49

07_Pulsar高级组件基本使用(Connector,Functions,事务)、Function(轻量级计算流程)概念与使用、Connector 连接器概念与使用，其它Connector

2.ApachePulsar高级2.1.Pulsar高级组件基本使用(Connector,Functions,事务)2.1.1.Function(轻量级计算流程)概念与使用2.1.1.1.PulsarFunction
涂作权的博客·2023-03-17 22:43

06.Apache Pulsar的JAVA API相关使用操作,基于Pulsar实现Topic的构建操作,使用JAVA如何管理租户/namespace/Topic,基于Pulsar实现数据生产/消费

1.6.ApachePulsar的JAVAAPI相关使用操作1.6.1.基于Pulsar实现Topic的构建操作_准备工作1.6.2.基于Pulsar实现Topic的构建操作1-使用JAVA如何管理租户
涂作权的博客·2023-03-17 22:42

05_Pulsar的主要组件介绍与命令使用、名称空间、Pulsar的topic相关操作、Pulsar Topic（主题）相关操作_高级操作、

1.5.ApachePulsar的主要组件介绍与命令使用1.5.1.多租户模式1.5.1.1.什么是多租户1.5.1.2.Pulsar多租户的相关特征_安全性（认证和授权）1.5.1.3.Pulsar多租户的相关特性
涂作权的博客·2023-03-17 22:11

DataPipeline & Apache Rocket Meetup 简单回顾

4月13日下午，我司CEO郭斯杰受邀在DataPipeline&ApacheRocketMeetup中分享了EfficientSchemasinEventStreamingusingApachePulsar
StreamNative·2023-03-15 19:23

如何使用 Pulsar Dashboard 监控

作者：高天赐编辑：IrenePulsar自带Dashboard，可对broker、bookie、ZooKeeper集群和topic等进行监控和统计。
StreamNative·2023-03-13 13:50

Apache Pulsar 消息传递模型(3)-消息保留

Pulsar在接收消息确认时仅更新cursor,只有在所有订阅已经使用它之后才有可能删除消息。
QuinnSun·2023-03-13 05:03

SpringBoot整合Apache Pulsar教程示例

依赖编写消息生产者编写消息消费者测试总结正文推荐一个基于SpringBoot开发的全平台数据(数据库管理工具)功能比较完善，建议下载使用:github.com/EdurtIO/datacap目前已经支持30多种数据源ApachePulsar
·2023-03-11 00:35

脉冲星 8 月脉动 | Pulsar 大放异彩，里程碑一个接一个！

本月看点速览产品动态新增PIP新增功能Bug修复社区动态海内外社区动态技术干货关于ApachePulsarApachePulsar是Apache软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息
StreamNative·2023-03-10 12:20

1.3 Go关于 go.mod相关的知识点 实用的奥

require语句指定的依赖项模块replace语句可以替换依赖项模块exclude语句可以忽略依赖项模块2.具体使用moduledmsgo1.15require(github.com/apache/pulsar-client-gov0.7.0github.com
Goplayer王布斯·2023-03-10 06:44

java中Pulsar InterruptedException 异常

目录背景前置排查Pulsar源码排查定位问题总结背景今天收到业务团队反馈线上有个应用往Pulsar中发送消息失败了，经过日志查看得知是发送消息时候抛出了java.lang.InterruptedException
·2023-02-27 18:38

腾讯云基于 Apache Pulsar 跨地域复制功能实现租户跨集群迁移

导语本文整理自PulsarSummitAsia2022技术峰会上腾讯云中间件高级研发工程师韩明泽的分享《基于跨地域复制实现租户跨集群迁移》。
·2023-02-24 18:00

一个诡异的 Pulsar InterruptedException 异常

背景今天收到业务团队反馈线上有个应用往Pulsar中发送消息失败了，经过日志查看得知是发送消息时候抛出了java.lang.InterruptedException异常。
·2023-02-24 08:13

Apache Pulsar——Bookkeeper架构

前言ApacheBookKeeper是企业级存储系统，旨在保证高持久性、一致性与低延迟。自2011年起，BookKeeper开始在ApacheZooKeeper下作为子项目孵化，并于2015年1月作为顶级项目成功问世。企业级的实时存储平台需要具备的特点：以极低的延迟（小于5毫秒）读写entry流能够持久、一致、容错地存储数据在写数据时，能够进行流式传输或追尾传输有效地存储、访问历史数据与实时数据B
小波同学·2023-02-13 09:24

对 Pulsar 集群的压测与优化

前言这段时间在做MQ（Pulsar）相关的治理工作，其中一个部分内容关于消息队列的升级，比如：一键创建一个测试集群。运行一批测试用例，覆盖我们线上使用到的功能，并输出测试报告。模拟压测，输出测试结果。
·2023-02-07 09:40

Pulsar负载均衡原理及优化

前言前段时间我们在升级Pulsar版本的时候发现升级后最后一个节点始终没有流量。虽然对业务使用没有任何影响，但负载不均会导致资源的浪费。
·2023-02-07 08:36

再见RocketMQ！全新一代消息中间件，带可视化管理，文档贼友好！

最近很火的消息中间件Pulsar，本想学习下，发现网上很多都是介绍性能和对比Kafka的文章，实践的文章很少！
程序员知识圈·2023-02-04 22:19

Apache Pulsar 多层抽象layer3-Broker缓存

每个Topic都有一个所属的Broker，所以读写都是通过该Broker进行的。这样提供了很多的好处。Broker可以将日志的尾部缓存在内存中，这意味着Broker可以不需要BookKeeper的情况下为读取尾部数据的操作提供服务。这样避免了网络的开销以及Bookie上可能的磁盘读取。Broker也知道LastAddConfirmed条目的ID。这样可以跟踪那条消息是最后一个安全持久化的消息。当B
QuinnSun·2023-02-03 20:25

Pulsar通信安全 - 端到端消息加解密

参考链接https://pulsar.apache.org/docs/zh-CN/security-encryption/Pulsar端到端消息加解密生产端加密，消费端解密Asymmetricandsymmetricencryption
LaxChan·2023-02-02 09:05

雅虎日本如何用 Pulsar 构建日均千亿的消息平台

雅虎日本是一家雅虎和软银合资的日本互联网公司，是日本最受欢迎的门户网站之一。雅虎日本的互联网服务在日本市场占主导地位。下图从三个维度显示了雅虎日本的经营规模。第一个是服务数量，雅虎日本提供上百种互联网服务；第二个是服务器数量，雅虎日本使用超过150,000台服务器（大多为裸机服务器）全天候支持这上百种互联网服务的正常运作；第三个是每月总页面浏览量，2017年的数据显示，雅虎日本每月浏览量超过700
过往记忆大数据1·2023-02-02 01:18

消息中间件基础知识

zhimaxingzhe.github.io前言本文梳理笔者的MQ知识，从消息中间件的基础知识讲起，在有了基础知识后，对市面上各主流的消息中间件进行详细的解析，包括RabbitMQ、RocketMQ、Kafka、Pulsar
·2023-02-01 09:32

技术干货｜ 阿里云基于Hudi构建Lakehouse实践探索

简介：阿里云高级技术专家王烨(萌豆)在ApacheHudi与ApachePulsar联合Meetup杭州站上的演讲整理稿件，本议题介绍了阿里云如何使用Hudi和OSS对象存储构建Lakehouse，为大家分享了什么是
阿里开发者·2023-01-30 07:59

如何学习开源项目，我又总结了套路

因为我最近在研究ApachePulsar这款消息队列，所以就以这个项目为例，不过本文介绍的都是通用的技巧，完全可以用在其他
labuladong·2023-01-29 16:17

Apache Pulsar 源码走读（四）TopicLookup请求处理（二）

authoritative).advertisedListenerName(advertisedListenerName).loadTopicsInBundle(true)//这里这个条件是true.build();pulsarService.g
WJL3333·2023-01-28 06:35

Pulsar consumer seek() 源码梳理

seek目前Pulsar中consumer的seek接口主要支持了两种：messageIDpublishTime除这两种之外，还支持了特殊的两种移动cousor的方式：Earliest（将游标移动到最前面
wolf4j·2023-01-27 18:17

PulsarClient 解析(一）

PulsarClientPulsarClientclient=PulsarClient.builder().serviceUrl("pulsar://localhost:6650").build();让我们看一下这个类的主要方法
WJL3333·2023-01-26 03:44

Pulsar 在腾讯云的稳定性实践

**导语2022腾讯全球数字生态大会已圆满落幕，大会以“数实创新、产业共进”为主题，聚焦数实融合，探索以全真互联的数字技术助力实体经济高质量发展。大会设有29个产品技术主题专场、18个行业主题专场和6个生态主题专场，各业务负责人与客户、合作伙伴共同总结经验、凝结共识，推动数实融合新发展。本次大会设立了微服务与中间件专场，本专场从产品研发、运维等最佳落地实践出发，详细阐述云原生时代，企业在开发微服务
·2023-01-16 09:10

对 Pulsar 集群的压测与优化

前言这段时间在做MQ（Pulsar）相关的治理工作，其中一个部分内容关于消息队列的升级，比如：一键创建一个测试集群。运行一批测试用例，覆盖我们线上使用到的功能，并输出测试报告。模拟压测，输出测试结果。
·2023-01-16 09:08

Apache Pulsar PMC 成员翟佳：开源和 Apache 社区是个带有魔法的宝库

编者荐语：今日推荐ApachePulsarPMC成员翟佳接受SegmentFault思否关于ApacheConAsia2021的相关采访，欢迎大家阅读！
翟佳@StreamNative·2023-01-11 13:07

浅谈存储系统：LSM 树设计原理

我在上篇文章ApachePulsar的架构设计中介绍了Pulsar存算分离的架构，其中broker只负责计算，由BookKeeper负责底层的存储，我还画了这样一张图说明BookKeeper读写分离的设计
·2023-01-04 10:35

面试官：请你重构 Kafka...

经常有读者后台跟我说，希望我能够写一些系统设计相关的文章，最近我就在研究常用消息队列kafka和pulsar的架构设计，所以总结了这篇文章，希望在你做技术选型或阅读源码的时候起到一定的帮助。
·2023-01-04 10:34

pulsar mop mqtt二次开发贡献开源项目代码

pulsarmopmqtt二次开发贡献开源项目代码LinuxMacBook单机部署Pulsar并开启认证功能pulsar集群搭建_亲测成功pulsar开启mqtt和认证pulsar自定义认证插件开发pulsar
·2022-12-28 18:47

Apache Pulsar 在微信大流量实时推荐场景下实践

导语本文整理自8月ApachePulsarMeetup上，刘燊题为《ApachePulsar在微信的大流量实时推荐场景实践》的分享。
·2022-12-28 18:46

Linux MacBook单机部署Pulsar并开启认证功能

Pulsar简单介绍Pulsar是一个用于服务器到服务器的消息系统，具有多租户、高性能等优势。Pulsar最初由Yahoo开发，目前由Apache软件基金会管理。
·2022-12-28 18:45

Pulsar 在腾讯云的稳定性实践

**导语2022腾讯全球数字生态大会已圆满落幕，大会以“数实创新、产业共进”为主题，聚焦数实融合，探索以全真互联的数字技术助力实体经济高质量发展。大会设有29个产品技术主题专场、18个行业主题专场和6个生态主题专场，各业务负责人与客户、合作伙伴共同总结经验、凝结共识，推动数实融合新发展。本次大会设立了微服务与中间件专场，本专场从产品研发、运维等最佳落地实践出发，详细阐述云原生时代，企业在开发微服务
·2022-12-28 18:14

领导：谁再用 Redis 实现过期订单关闭，立马滚蛋

一般实现的方法有几种：1、使用rocketmq、rabbitmq、pulsar等消息队列
hmk1900·2022-12-26 19:56
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他