分布式消息队列

Kafka 概述 核心组件及特性

Kafka是一个分布式消息队列：生产者、消费者的功能。它提供了类似于JMS的特性，但是在设
C_FuL·2017-11-02 15:56

分布式消息队列

阅读更多分布式消息队列一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。
马刺王朝·2017-11-01 15:00

分布式消息队列

阅读更多分布式消息队列一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。
马刺王朝·2017-11-01 15:00

你所熟悉的Kafka

在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算Kafka是一个分布式消息队列:生产者,消费者的功能;它提供了类似于JMS的特性,但是在设计实现上完全不同我只是小小的知识点
长胖的wo一定特美·2017-10-27 19:22

2018届秋季校招Java面试题总结（一）

由于Zookeeper的开元特性，后来我们的开发者在分布式锁的基础上，摸索了出了其他的使用方法：配置维护、组服务、分布式消息队列、分布式通知/协调等。   Zo
小土狗一只·2017-10-25 00:00

分布式一致性算法（六）分布式事务的实现方案：消息事务

转载：转载：分布式消息队列RocketMQ–事务消息–解决分布式事务的最佳实践转载：如何用消息系统避免分布式事务？
Zenhobby·2017-10-21 11:08

Rocketmq分布式消息队列的部署与监控（双master）

--------------------------------------------------------------------------------------------一、Rocketmq简介：--------------------------------------------------------------------------------------------Roc
弱水_穿云天·2017-07-25 14:19

分布式消息队列RocketMQ与Kafka架构上的巨大差异之1 -- 为什么RocketMQ要去除ZK依赖？

我们知道，在早期的RocketMQ版本中，是有依赖ZK的。而现在的版本中，是去掉了对ZK的依赖，转而使用自己开发的NameSrv。并且这个NameSrv是无状态的，你可以随意的部署多台，其代码也非常简单，非常轻量。那不禁要问了：ZooKeeper是业界用来管理集群的一个非常常用的中间件，比如Kafka就是依赖的ZK。那为什么RocketMQ要自己造轮子，自己做集群的管理呢？纯粹就是再做一个Zook
Amazing的fighting·2017-07-14 09:43

分布式消息队列RocketMQ&Kafka -- 消息的“顺序消费”-- 一个看似简单的复杂问题

在说到消息中间件的时候，我们通常都会谈到一个特性：消息的顺序消费问题。这个问题看起来很简单：Producer发送消息1,2,3。。。Consumer按1,2,3。。。顺序消费。但实际情况却是：无论RocketMQ，还是Kafka，缺省都不保证消息的严格有序消费！这个特性看起来很简单，但为什么缺省他们都不保证呢？“严格的顺序消费”有多么困难下面就从3个方面来分析一下，对于一个消息中间件来说，”严格的
LzwGlory·2017-06-28 18:46

RabbitMQ分布式消息队列服务器（一、Windows下安装和部署）

RabbitMQ消息队列服务器在Windows下的安装和部署->一、Erlang语言环境的搭建RabbitMQ开源消息队列服务是使用Erlang语言开发的，因此我们要使用他就必须先进行Erlang语言环境的搭建，其实是非常简单的。登录Erlang官网，进入下载页，官网地址->http://www.erlang.org/downloads然后按照自己的系统环境来选择需要下载的安装文件。我选择64-b
7tiny·2017-06-15 10:00

Kafka学习笔记——Kafka简介与使用场景介绍

IntroductionKafka是linkedin用于日志处理的分布式消息队列，同时支持离线和在线日志处理。
fuyuwei2015·2017-06-07 21:00

kafka应用实践

1、简介Kafka是一个分布式的消息缓存系统，用于日志处理的分布式消息队列。
paradise003·2017-06-07 14:00

分布式消息队列kafka系列介绍 — 配置文件详解

kafka的配置分为broker、producter、consumer三个不同的配置一broker的全局配置最为核心的三个配置broker.id、log.dir、zookeeper.connect。帮助123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354
a137268431·2017-05-23 17:00

大型网站架构系列：消息队列（二）

【第二篇的内容大部分为网络资源的整理和汇总，供大家学习总结使用，最后有文章来源】本次分享大纲消息队列概述（见第一篇：大型网站架构系列：分布式消息队列（一））消息队列应用场景（见第一篇：大型网站架构系列：
17099933344·2017-05-16 17:16

Python操作RabbitMQ

消息发送者是消息源，在对消息进行处理后将消息发送至分布式消息队列，消息接受者从分布式消息队列获取该消息后继续进行处理。可以看到，消息发送者和消息接受者之间没有直接耦合，消息发送者将消息
dutsoft·2017-04-30 16:43

腾讯云分布式高可靠消息队列CMQ架构

CMQ是腾讯云内部自研基于的高可靠、强一致、可扩展分布式消息队列，在腾讯内部包括微信手机QQ业务红包、腾讯话费充值、广告订单等都有广泛使用。目前已上线腾讯云对外开放，本文对
菠萝破坏神·2017-03-12 21:13

<>腾讯云分布式高可靠消息队列CMQ架构

CMQ是腾讯云内部自研基于的高可靠、强一致、可扩展分布式消息队列，在腾讯内部包括微信手机QQ业务红包、腾讯话费充值、广告订单等都有广泛使用。目前已上线腾讯云对外开放，本文对腾讯云CM
温小叶·2017-03-11 00:00

腾讯云分布式高可靠消息队列CMQ架构

CMQ是腾讯云内部自研基于的高可靠、强一致、可扩展分布式消息队列，在腾讯内部包括微信手机QQ业务红包、腾讯话费充值、广告订单等都有广泛使用。
何奥雷·2017-03-09 22:54

2017年书单(不定时更新)

回家很晚,看书的时间明显变少.不说了,说出来都是bug啊.书名阅读读后感精通Spring4.x:企业应用开发实战todoKubernets权威指南done大段大段的代码,醉了RabbitMQ实战:高效部署分布式消息队列
studysoft·2017-01-20 10:00

2017年书单(不定时更新)

回家很晚,看书的时间明显变少.不说了,说出来都是bug啊.书名阅读读后感精通Spring4.x:企业应用开发实战todoKubernets权威指南done大段大段的代码,醉了RabbitMQ实战:高效部署分布式消息队列
studysoft·2017-01-20 10:00

分布式消息队列RocketMQ源码分析之3 -- Consumer负载均衡机制 -- Rebalance

同Kafka一样，RocketMQ也需要探讨一个问题：如何把一个topic的多个queue分摊给不同的consumer，也就是负载均衡问题。本人新书出版，对技术感兴趣的朋友请关注：https://mp.weixin.qq.com/s/uq2cw2Lgf-s4nPHJ4WH4aw在讨论这个问题之前，我们先看一下Client的整体架构。Producer与Consumer类体系从下图可以看出以下几点：（
travi·2017-01-17 17:44

分布式消息队列RocketMQ源码分析之2 -- Broker与NameServer心跳机制

我们知道，Kafka是通过ZK的临时节点来监测Broker的死亡的。当一个Broker挂了之后，ZK上面对应的临时节点被删除，同时其他Broker收到通知。那么在RocketMQ中，对应的NameServer是如何判断一个Broker的死亡呢？本人新书出版，对技术感兴趣的朋友请关注：https://mp.weixin.qq.com/s/uq2cw2Lgf-s4nPHJ4WH4awNameSrv监测
travi·2017-01-12 18:05

Zabbix分布式集群监控

Zabbix分布式集群监控1.监控对象1、分布式文件系统HDFS2、分布式离线计算框架MapReduce3、分布式流式计算框架Storm4、分布式消息队列KafKa5、分布式内存计算框架Spark6、分布式列式数据库
MatrixSparse·2017-01-12 00:38

写给2017年，回顾2016

大叔主要成就就是Lind.DDD的不断更新了，从最初的引用DLL到现在的依赖包包，从Ioc组件到IoC容器，可以说本次升级不小，当然最大的亮点还是LindMQ和LindPlugins的加入，这两大组件主要实现的是分布式消息队列和面向插件化的设计
张占岭·2017-01-06 09:00

kafka-2.8-0.8.0安装

kafka是linkedin用于日志处理的分布式消息队列，同时支持离线和在线日志处理。
land-mine·2017-01-01 12:56

分布式消息队列RocketMQ与Kafka的18项差异之“拨乱反正“之2

在前1篇，我讨论了RocketMQ与Kakfa的对比中，几个不太严谨的地方。本着严谨的精神，不偏袒任何一方，本篇想分析一下RocketMQ在Kafka的基础上，的确做的几个改进。有不对之处，敬请指正。本人新书出版，对技术感兴趣的朋友请关注：https://mp.weixin.qq.com/s/uq2cw2Lgf-s4nPHJ4WH4awtopic/partion数量对性能的影响我们知道在Kafka
travi·2016-12-28 20:32

消息队列_Beanstalkd-0001.Beanstalkd之轻量级分布式内存队列部署?

简单介绍:说明:Beantalkd是一个高性能,轻量级的分布式消息队列,最初设计目的是想通过后台异步执行耗时任务降低WEB应用页面访问延迟,支持过1000万用户的应用,被豆瓣内部广泛使用,当然还有很多非常优秀的消息队列
运维开发·2016-12-01 22:15

Redis辅助构建投票网站后台

在很多系统中比如分布式消息队列和大型网站的缓存服务器等都有大规模的使用。
hanchaoqi·2016-11-23 17:11

ZooKeeper基本讲解 & 集群构建 & 常用操作指令

由于ZooKeeper的开源特性，后来我们的开发者在分布式锁的基础上，摸索了出了其他的使用方法：配置维护、组服务、分布式消息队列、分布式通知/协调等。zookeeper是基于内存
qw87112·2016-10-08 18:16

大型网站架构之分布式消息队列

以下是消息队列以下的大纲，本文主要介绍消息队列概述，消息队列应用场景和消息中间件示例（电商，日志系统）。本次分享大纲消息队列概述消息队列应用场景消息中间件示例JMS消息服务常用消息队列参考（推荐）资料本次分享总结一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产
andybbc·2016-09-30 18:39

Kafka源码深度解析－序列2 －Producer －Metadata的数据结构与读取、更新策略

从本篇开始，我们将深入到源码内部，仔细分析Kafka到底是如何实现一个分布式消息队列。我们的分析将从Producer端开始。从Kafka0.8.2开始，发布了一套新的Java版的clientapi,K
travi·2016-09-22 14:50

Netty构建分布式消息队列实现原理浅析

在本人的上一篇博客文章：Netty构建分布式消息队列（AvatarMQ）设计指南之架构篇中，重点向大家介绍了AvatarMQ主要构成模块以及目前存在的优缺点。
Newland·2016-09-07 08:00

Netty构建分布式消息队列（AvatarMQ）设计指南之架构篇

目前业界流行的分布式消息队列系统（或者可以叫做消息中间件）种类繁多，比如，基于Erlang的RabbitMQ、基于Java的ActiveMQ/ApacheKafka、基于C/C++的ZeroMQ等等，都能进行大批量的消息路由转发
Newland·2016-08-25 23:00

Kafka安装（windows）

Kafka简介是一个分布式消息队列，高吞吐量，使用Scala实现。
vonzhou·2016-08-25 22:10

Zookeeper深入浅出之快速入门实例

zk分布式服务框架是apachehadoop的一个子项目，主要用于分布式当中，如集群管理，统一命名服务，分布式锁，分布式消息队列，分布式配置管理等。
zfz_linux_boy·2016-08-13 22:30

大型网站技术架构（服务器端）

其实是负载均衡的一些实现方式）：网站的安全架构：信息加密技术及密钥安全管理:1)单向散列加密2)对称加密3)非对称加密4)密钥安全管理信息过滤与反垃圾:1)文本匹配2)分类算法3)黑名单网站的可扩展架构:一利用分布式消息队列降低系统耦合性
chenrushui·2016-07-25 11:00

Kafka.net使用编程入门(一)

最近研究分布式消息队列，分享下！首先zookeeper和kafka压缩包解压并配置好！
风灵使·2016-06-29 22:45

Kafka.net使用编程入门

最近研究分布式消息队列，分享下！首先zookeeper 和kafka压缩包解压并配置好！
WuLex·2016-06-29 22:00

架构周报|经受电商大促的架构特性

对于外行来说，Kafka是一个开源的分布式消息队列系统。它最初是由LinkedIn研发，现在由Apache软件基金会维护。和其他的消息队列系统一样，你可以给它发送消息，同时也可以读取消息。
王杉·2016-06-28 00:00

分布式消息队列RocketMQ部署与监控

一、RocketMQ简介RocketMQ是一款分布式、队列模型的消息中间件，具有以下特点：1、支持严格的消息顺序；2、支持Topic与Queue两种模式；3、亿级消息堆积能力；4、比较友好的分布式特性；5、同时支持Push与Pull方式消费消息；本文采用双Master的架构模式。二、服务器分布1、相关说明2、hosts信息添加#vim/etc/hosts 10.217.121.123mqnames
tantexian·2016-05-09 16:00

Kafka 个人总结

总的来说，Kafka就是一个新型的分布式消息队列开源工具，现成的PDF、书籍是比较少的，最好的资料还是Apache上的Kafka，ApacheKafka首先说下
cimuhuan·2016-05-06 12:00

大型网站架构之分布式消息队列

以下是消息队列以下的大纲，本文主要介绍消息队列概述，消息队列应用场景和消息中间件示例（电商，日志系统）。本次分享大纲消息队列概述消息队列应用场景消息中间件示例JMS消息服务常用消息队列参考（推荐）资料本次分享总结一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产
yuanzhitang·2016-04-30 22:16

大型网站架构系列：分布式消息队列（二）

【第二篇的内容大部分为网络资源的整理和汇总，供大家学习总结使用，最后有文章来源】本次分享大纲消息队列概述（见第一篇：大型网站架构系列：分布式消息队列（一））消息队列应用场景（见第一篇：大型网站架构系列：
ww169920502·2016-04-20 15:39

大型网站架构系列：分布式消息队列（一）

本次分享大纲消息队列概述消息队列应用场景消息中间件示例JMS消息服务（见第二篇：大型网站架构系列：分布式消息队列（二））常用消息队列（见第二篇：大型网站架构系列：分布式消息队列（二））参考（推荐）资料（
ww169920502·2016-04-20 15:52

大型网站架构系列：分布式消息队列

一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ等。二、消息队列应用场景以下介绍消息队列在实际应用中常用的使用场景。异步处理，应用解耦，流量削
softwave·2016-04-07 11:00

大型网站架构系列：分布式消息队列（一）

阅读更多来源：ITFLY8链接：http://www.cnblogs.com/itfly8/p/5156155.html一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，Me
李超（TERRY）·2016-04-05 09:00

OSSIM中分布式消息队列应用

OSSIM中分布式消息队列应用 1.消息队列处理企业日志数量正在以指数级形式高速增长，日志数据的具有海量、多样、异构等特点，基于传统的单一节点混合式安装的OSSIM平台（指OSSIM4.4及以下系统），
OSSIM·2016-03-14 15:00

OSSIM中分布式消息队列应用

OSSIM中分布式消息队列应用1.消息队列处理企业日志数量正在以指数级形式高速增长，日志数据的具有海量、多样、异构等特点，基于传统的单一节点混合式安装的OSSIM平台（指OSSIM4.4及以下系统），无法满足海量日志分析要求
李晨光·2016-03-14 15:03

OSSIM中分布式消息队列应用

                   OSSIM中分布式消息队列应用 1.消息队列处理企业日志数量正在以指数级形式高速增长，日志数据的具有海量、多样、异构等特点，基于传统的单一节点混合式安装的OSSIM
李晨光·2016-03-14 15:03

大型网站架构系列：分布式消息队列

一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ等。二、消息队列应用场景以下介绍消息队列在实际应用中常用的使用场景。异步处理，应用解耦，流量削
Nicolo_xuding·2016-03-10 23:38
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他