E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Pulsar
2020 OSCAR 云计算开源产业大会,Apache
Pulsar
通过可信开源项目评估
Apache
Pulsar
通过可信开源项目评估为规范开源项目健康发展,同时为用户企业选择开源软件提供有力参考,从2019年开始,中国信息通信研究院针对企业开源治理能力发布了一系列的规范和标准,并启动了OSCAR
StreamNative
·
2023-08-25 23:17
VictoriaLogs:一款超低占用的 ElasticSearch 替代方案
背景前段时间我们想实现
Pulsar
消息的追踪流程,追踪实现的效果图如下:实现其实比较简单,其中最重要的就是如何存储消息。
·
2023-08-25 08:54
对比测试:Apache
Pulsar
与 Kafka 在金融场景下的性能分析
背景Apache
Pulsar
是下一代分布式消息流平台,采用计算存储分层架构,具备多租户、高一致、高性能、百万topic、数据平滑迁移等诸多优势。
StreamNative
·
2023-08-25 07:47
Pulsar
简介及
Pulsar
部署、原理和使用介绍
Pulsar
简介及
Pulsar
部署、原理和使用介绍
Pulsar
简介诞生背景Apache
Pulsar
是一个企业级的分布式消息系统,最初由Yahoo开发,在2016年开源,并于2018年9月毕业成为Apache
王亭_666
·
2023-08-24 19:14
大数据
运维
pulsar
zookeeper
bookkeeper
消息队列
kafka
Python最常用的7个框架讲解!
本文为大家介绍7种常见且实用的Python框架,主要包括:Django、flask、scrapy、Diesel、Cubes、
Pulsar
和Tornado,具体介绍请看下文。
老男孩IT教育
·
2023-08-22 14:22
python
从
Pulsar
Client 的原理到它的监控面板
image.png背景前段时间业务团队偶尔会碰到一些
Pulsar
使用的问题,比如消息阻塞不消费了、生产者消息发送缓慢等各种问题。
crossoverJie
·
2023-08-20 14:55
新手如何快速参与开源项目
近期由于工作的原因,我需要经常和Apache
Pulsar
社区沟通,同时也会将日常碰到的问题反馈给社区,包括一些bug,一些我能修的也是顺带就提了一些PR。
crossoverJie
·
2023-08-20 14:55
开源
新手如何快速参与开源项目
近期由于工作的原因,我需要经常和Apache
Pulsar
社区沟通,同时也会将日常碰到的问题反馈给社区,包括一些bug,一些我能修的也是顺带就提了一些PR。
·
2023-08-18 10:08
程序员
FlinkSql解析复杂的JSON结构
FlinkSql解析复杂的JSON结构一、处理思路二、使用原生的FlinkSQL具体实现1.分析JSON的结构2.在SQL中定义解析对象3.解析并获取需要的属性字段之前的一篇文章介绍了FlinkSQL解析
Pulsar
酱紫很帅
·
2023-08-18 06:16
Flink
json
flink
领导:谁再用 Redis 实现过期订单关闭,立马滚蛋
一般实现的方法有几种:1、使用rocketmq、rabbitmq、
pulsar
等消息队列
程序猿邱先森
·
2023-08-16 23:47
#
电商
#
redis
拔高
大数据
上海·得物技术沙龙-中间件专场火热报名中!
本次中间件专场沙龙由得物技术出品,聚焦于行业最新的技术趋势和实践,将在上海(线上同步直播)为你带来四个令人期待的演讲话题:《得物蓝绿发布演进和落地》《基于istio的ServiceMesh落地实践》《Apache
Pulsar
·
2023-08-16 14:04
中间件技术分享技术
新手如何快速参与开源项目
近期由于工作的原因,我需要经常和Apache
Pulsar
社区沟通,同时也会将日常碰到的问题反馈给社区,包括一些bug,一些我能修的也是顺带就提了一些PR。
·
2023-08-15 18:58
开源pulsar
社区活动 | Apache
Pulsar
SIG(特别兴趣小组开放)!欢迎大家加入
关于Apache
Pulsar
Apache
Pulsar
是Apache软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储
·
2023-08-15 18:03
社区活动| Apache
Pulsar
中文开发者与用户组志愿者招募
Apache
Pulsar
社区的发展离不开社区小伙伴们的长时间辛苦付出和奉献,在此向所有社区小伙伴表示由衷的感谢!
·
2023-08-15 18:03
Apache
Pulsar
调研
Apache
Pulsar
1.Kafka概述1.1现存问题1.3优点1.4缺点2.
Pulsar
架构2.4.1三种写路由策略2.4.2四种读下发策略2.4.3Pull&Push可选请求模式2.4.4ConsumeACK
zhisheng_blog
·
2023-08-13 15:54
分布式
数据库
redis
kafka
java
不惧流量持续上涨,BIGO 借助 Flink 与
Pulsar
打造实时消息系统
最初,BIGO的消息流平台主要采用开源Kafka作为数据支撑。随着数据规模日益增长,产品不断迭代,BIGO消息流平台承载的数据规模出现了成倍增长,下游的在线模型训练、在线推荐、实时数据分析、实时数仓等业务对消息流平台的实时性和稳定性提出了更高的要求。开源的Kafka集群难以支撑海量数据处理场景,我们需要投入更多的人力去维护多个Kafka集群,这样成本会越来越高,主要体现在以下几个方面:1、数据存储
zhisheng_blog
·
2023-08-13 15:53
运维
大数据
分布式
hadoop
数据库
使用Flink 与
Pulsar
打造实时消息系统
最初,BIGO的消息流平台主要采用开源Kafka作为数据支撑。随着数据规模日益增长,产品不断迭代,BIGO消息流平台承载的数据规模出现了成倍增长,下游的在线模型训练、在线推荐、实时数据分析、实时数仓等业务对消息流平台的实时性和稳定性提出了更高的要求。开源的Kafka集群难以支撑海量数据处理场景,我们需要投入更多的人力去维护多个Kafka集群,这样成本会越来越高,主要体现在以下几个方面:1、数据存储
ITFLY8
·
2023-08-13 15:22
运维
大数据
分布式
hadoop
数据库
借助 Flink 与
Pulsar
,BIGO 打造实时消息处理系统
摘要:本文整理自BIGOStaffEngineer陈航在FlinkForwardAsia2020分享的议题《借助Flink与
Pulsar
,BIGO打造实时消息处理系统》。
小晨说数据
·
2023-08-13 15:51
运维
算法
大数据
分布式
编程语言
消息队列之六脉神剑:RabbitMQ、Kafka、ActiveMQ 、Redis、 ZeroMQ、Apache
Pulsar
对比和如何使用
目录1.RabbitMQ2.Kafka3.ActiveMQ4.Redis5.ZeroMQ6.Apache
Pulsar
消息队列(MessageQueue)是一种异步通信机制,它将消息发送者和接收者解耦,从而提高了应用程序的性能
Web3&Basketball
·
2023-08-10 18:33
消息队列
rabbitmq
kafka
activemq
消息队列
360度无死角 |
Pulsar
与Kafka对比全解析
点击上方蓝色字体,选择“设为星标”回复”资源“获取更多资源2020年,
Pulsar
受到持续关注,
Pulsar
的应用场景也越来越广泛。
王知无(import_bigdata)
·
2023-08-09 14:27
队列
大数据
分布式
编程语言
hadoop
一文简单理解
pulsar
和优于kafka的两个痛点
前段时间浪尖推荐过一套奈学的
pulsar
课程,很多粉丝问浪尖
pulsar
到底值不值得学习,会不会替代kafka。
浪尖聊大数据-浪尖
·
2023-08-09 14:57
队列
分布式
kafka
java
大数据
从 Kafka 到
Pulsar
:数据流演进之路
1、消息队列概述1.1消息队列的应用场景1.1.1MQ消息通道优点:异步解耦、高可用、削峰填谷、消息订阅1.1.2EventBridge事件总线事件源:将云服务、自定义应用、SaaS应用等应用程序产生的事件消息发布到事件集事件集:存储接收到的事件消息,并根据事件规则将事件消息路由到事件目标事件目标:消费事件消息1.1.3DataPlatform流数据平台提供批/流数据处理能力各类组件提供各类Con
Popcorn丶30
·
2023-08-09 14:56
kafka
分布式
Pulsar
和Kafka,谁才是消息流平台的王者
Pulsar
是一款分布式发布/订阅消息平台,近两年非常火,被称为下一代的消息流平台,大有取代Kafka的势头。今天我们就来比较一下
Pulsar
跟Kafka。
卡卡的Java架构笔记
·
2023-08-09 14:26
java
程序人生
kafka
14_基于Flink将
pulsar
数据写入到HBase
3.7.基于Flink将数据写入到HBase3.7.1.编写Flink完成数据写入到Hbase操作,完成数据备份,便于后续进行即席查询和离线分析3.7.1.1.HBase基本介绍hbase是基于Google发布bigTable论文产生一款软件,是一款noSQL型数据,不支持SQL.不支持join的操作,没有表关系,不支持事务(多行事务),hbase是基于HDFS的采用java语言编写查询hbase
涂作权的博客
·
2023-08-09 10:30
#
Apache
Pulsar
pulsar
11_
Pulsar
Adaptors适配器、kafka适配器、Spark适配器
2.3.
Pulsar
Adaptors适配器2.3.1.kafka适配器2.3.2.Spark适配器2.3.
Pulsar
Adaptors适配器2.3.1.kafka适配器
Pulsar
为使用ApacheKafkaJava
涂作权的博客
·
2023-08-09 09:52
#
Apache
Pulsar
pulsar
15_基于Flink将
pulsar
数据写入到ClickHouse
3.8.基于Flink将数据写入到ClickHouse编写Flink完成数据写入到ClickHouse操作,后续基于CK完成指标统计操作3.8.1.ClickHouse基本介绍ClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,主要用于在线分析处理查询(OLAP),能够使用SQL查询实时生成分析数据报告。结论:ClickHouse像很多OLA
涂作权的博客
·
2023-08-09 08:46
#
Apache
Pulsar
pulsar
pulsar
-client-1-2
Pulsar
Client构造函数
前言上文说到,
Pulsar
Client通过链式调用构建,而在build()中调用了new
Pulsar
ClientImpl(conf),而Producer本文通过解析构造函数,了解其主要结构。
Melody2050
·
2023-08-06 13:47
后端
python
开发语言
《向量数据库指南》——使用Milvus Cloud操作员安装Milvus Cloud独立版
该堆栈包含所有Milvuscloud组件和相关依赖项,如etcd、
Pulsar
和MinIO。本主题介绍如何使用MilvuscloudOperator安装Milvuscloud独立版。先决条
LCHub低代码社区
·
2023-07-31 08:38
《向量数据库指南》
milvus
AI-native
Milvus
Cloud
向量数据库
ModaGPT
ModaHub
Flink 和
Pulsar
的批流融合
作者:SijieGuo编辑:IreneApacheFlink和Apache
Pulsar
的开源数据技术框架可以以不同的方式融合,来提供大规模弹性数据处理。
StreamNative
·
2023-07-31 02:04
云原生消息队列RocketMQ:为什么我们选择 RocketMQ
作者:李伟说起消息队列,ActiveMQ、RabbitMQ、RocketMQ、Kafka、
Pulsar
等纷纷涌入我们的脑海中,在如此众多的开源消息队列产品中,作为一名合格的架构师如何给出高性价比的方案呢
阿里云云原生
·
2023-07-30 10:59
java-rocketmq
云原生
rocketmq
Pulsar
Apache
Pulsar
是一个一体化的消息和流平台。消息可以单独使用和确认,也可以作为延迟小于10毫秒的流使用。它的分层体系结构允许跨数百个节点快速扩展,而无需数据重组。
星光落入你灰蒙蒙的眼
·
2023-07-28 06:40
MQ
知识图谱
人工智能
云原生
pulsar
运维
mq
Apache
Pulsar
多层抽象layer2-逻辑存储体系
Pulsar
中的逻辑存储体系使用的是ApacheBookKeeper。本文仅在
Pulsar
的背景下介绍BookKeeper。
QuinnSun
·
2023-07-25 20:02
MQ - 闲聊MQ一二事儿 (Kafka、RocketMQ 、
Pulsar
)
文章目录MQ的发展史阶段一:追求解耦阶段二:追求吞吐量与一致性阶段三:追求平台化MQ的通用架构主题topic、生产者producer、消费者consumer分区partitionMQ存储KafkaGoodDesign--->磁盘顺序写盘PoorImpact--->topic数量不能过大RocketMQzookeepervsnamesrv局部顺序写(kafka)与完全顺序写(rocketmq)Roc
小小工匠
·
2023-07-25 20:24
【MQ-Apache
Kafka】
kafka
rocketmq
分布式
Pulsar
介绍
前言本文将介绍
pulsar
的核心功能,不会对设计细节以及与其他MQ进行对比概述Apache
Pulsar
是一个多租户、高性能的发布-订阅消息中间件,
Pulsar
最初由雅虎开发。
coding400
·
2023-07-25 14:50
腾讯超大 Apache
Pulsar
集群的客户端性能调优实践
腾讯Data项目选用Apache
Pulsar
作为消息系统,其服务端采用CVM服务器(CloudVirtualMachine,CVM)部署,并将生产者和消费者部署在Kubernet
搬砖养女人
·
2023-07-24 22:02
开发语言
程序人生
java
Flink+
Pulsar
、Kafka问题分析及方案 -- 幂等性
背景消息队列如Kafka、
Pulsar
利用事务特性所提供的exactlyonce语义,只能在特定使用场景consume-transform-produce下保证,即一个事务同时包含了生产和消费,利用事务的原子性
play maker
·
2023-07-24 17:38
java
pulsar
flink
kafka
flink
java
Pulsar
消息概览
Pulsar
消息概览目录ConsuemrReceivemodes同步接受消息异步接受消息AcknowledgementNegativeacknowledgement消费者否定应答,当消费者消费消息失败,
93张先生
·
2023-07-23 14:29
Pulsar
联合 TiDB 推出大数据场景数据应用分析解决方案
Pulsar
与TiDB联合解决方案提供实时、高吞吐、稳定的数据输出,满足用户在大数据场景中对各类数据的应用与分析需求,广泛适用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等场景。
StreamNative
·
2023-07-22 23:19
glmark2代码分析8(其他scene)
:和collections一样,就是shader不同,得验证下grid:绘制基本的网格,调用的是mesh的类,比较简单jellyfish:setup加载模型和纹理:jellyfish.jobjloop
pulsar
refractshadi
eric_dma
·
2023-07-18 04:27
算法
wireshark 书写lua插件
20210908144418891Wireshark插件路径MACimage-20210908142121894重新加载Wireshark中的lua插件MACimage-20210908141433962从一个新协议的样板开始
pulsar
_protocol
ShootHzj
·
2023-07-18 02:26
解密分布式事务框架-Fescar
它不像其他的分布式中间件有大量的成熟的解决方案,比如分布式消息队列中间件:ApacheKafka,ApacheRocketMQ,Apache
Pulsar
这三个均是Apache顶级项目;又比如分布式任务调度
Java高级架构师之路
·
2023-07-18 01:58
Apache
Pulsar
多层抽象layer3-Bookie存储
BookKeeper中存储的实现是可拔插的,
Pulsar
默认使用名称为DbLedgerStorage的存储实现。
QuinnSun
·
2023-07-17 11:23
Pulsar
快速开始(集群搭建+Java demo)
Apache
Pulsar
集群部署手册1集群组成搭建
Pulsar
集群至少需要3个组件:ZooKeeper集群、BookKeeper集群和broker集群(Broker是
Pulsar
的自身实例)。
赶考书生_c27f
·
2023-07-17 09:08
Pulsar
消费者的使用--@
Pulsar
Consumer`注解使用
Pulsar
消费者的使用–注解使用前提:在项目中引入
Pulsar
Starter相关依赖。
须臾亦无穷
·
2023-07-16 21:04
java
spring
开发语言
Pulsar
Clients(客户端)
目录1、Clientsetupphase客户端连接阶段2、Readerinterface读取接口客户端API优化和封装了
Pulsar
的客户端和broker之间的通信协议,并公开了一个简单直观的API供应用程序使用
swadian2008
·
2023-07-16 21:04
Apache
pulsar
pulsar客户端
pulsar读取器
Pulsar
消息传递机制
官方文档:Messaging|Apache
Pulsar
转载请链接到本文章
Pulsar
采用发布-订阅的设计模式(简称pub-sub),该设计模式中,producer发布消息到topic,Consumer订阅
小刘想学架构
·
2023-07-16 21:03
消息中间件
#
Pulsar
消息队列
流处理
Pulsar
Java client
可以使用
Pulsar
的Java客户端来创建生产者,消费者和消息读取器,以及进行任务管理。当前Java客户端版本为2.8.0。在Java客户端所创建的生产者,消费者和读取器中所提供的方法都是线程安全的。
小刘想学架构
·
2023-07-16 21:33
消息中间件
#
Pulsar
消息队列
java
深入
Pulsar
Consumer的使用方式&源码分析
1、使用前准备引入依赖:org.apache.
pulsar
pulsar
-client2.6.12、
Pulsar
Client在尝试使用Producer和Consumer前,我们先讲一下
Pulsar
客户端,
Howinfun
·
2023-07-16 21:02
Pulsar
Pulsar
Consumer使用方式
Pulsar
的消费模式
Pulsar
提供了三种消费模式:独立消费者模式、共享订阅模式和发布订阅模式。1:独立消费者模式:每个消费者实例都会独立地消费消息,并且每个消息只会被一个消费者消费。
修猫写代码
·
2023-07-16 21:02
消息队列
java
开发语言
大数据
Pulsar
消息发送、消费架构概述
1、订阅与发布
Pulsar
基于发布-订阅模式,消息发送者向主题发送消息,而消费消费者订阅主题,消息从
Pulsar
Broker中获取消息,处理成功后需要向
Pulsar
发送ACK,表示
中间件兴趣圈
·
2023-07-16 21:31
Pulsar实战与进阶
架构
分布式
pulsar
云原生
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他