E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式消息队列
使用SpringBoot调用Kafka
一、Kafka基本介绍Kafka是一种
分布式消息队列
系统,按照一定的顺序持久化保存数据,可以按需读取,具备一定的故障保护和性能伸缩能力;Kafka中数据单元被称为消息(Message),可以理解为数据库中的一条记录
shiguangfeixu
·
2018-09-05 22:02
kafka 入门
而在大部分企业开发人员中,都是把kafka当成消息系统使用,即它是一个
分布式消息队列
,很少会使用kafka的流式计算。
迷茫的老人
·
2018-08-26 22:50
kafka
nsq 优秀的消息队列
[隐藏]1nsqd:2nsqlookupd:3nsqadmin:4Topic和Channel5这里提下延时消息:6php和go的客户端的使用7php-nsq延时pub简介NSQ是Go语言编写的,开源的
分布式消息队列
中间件
lldouble
·
2018-08-24 17:06
消息队列
CAP带你轻松玩转Asp.Net Core消息队列
https://github.com/dotnetcore/CAP本博客主要针对易用性这一点,展开叙述,一起看看CAP如何结合EFCore和RabbitMQ带领小白轻松走入
分布式消息队列
的世界。准备首
码农阿宇
·
2018-08-23 22:00
大数据入门之
分布式消息队列
Kafka(2) -- Kafka Java API编程使用与Flume整合
1.前置要求JDK1.8Maven3.5.22.JavaAPI编程实现打开IDEA,选择构建一个maven项目,首先我们修改pom.xml文件。2.11.80.8.2.1org.scala-langscala-library${scala.version}org.apache.kafkakafka_2.11${kafka.version}先写一下,Kafka的配置信息。/***Kafka常用配置文
Kiku_xq
·
2018-08-23 10:18
大数据
Kafka
大数据
Kafka
大数据入门之
分布式消息队列
Kafka(1) -- Kafka介绍以及环境搭建
1.Kafka概述Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群来提供实时的消息。2.Kafka架
Kiku_xq
·
2018-08-23 00:09
大数据
Kafka
kafka 消息队列
kafka是使用Java和Scala编写的一个快速可扩展的高吞吐量的
分布式消息队列
系统。kafka将数据持久化存储到磁盘上,自带分区和副本机制,因而具有较好的持久化保证。
-Finley-
·
2018-07-29 18:00
下一代
分布式消息队列
Apache Pulsar从入门到实现
本文来自:https://github.com/aCoder2013/blog/issues/23(点击下面阅读原文即可进入)Pulsar简介ApachePulsar是一个企业级的分布式消息系统,最初由Yahoo开发并在2016年开源,目前正在Apache基金会下孵化。Plusar已经在Yahoo的生产环境使用了三年多,主要服务于Mail、Finance、Sports、Flickr、theGemi
Hadoop技术博文
·
2018-07-29 11:35
分布式消息队列
RocketMQ 源码分析 —— 高可用
摘要:原创出处http://www.iocoder.cn/RocketMQ/high-availability/「芋道源码」欢迎转载,保留摘要,谢谢!本文主要基于RocketMQ4.0.x正式版1.概述2.Namesrv高可用2.1Broker注册到Namesrv2.2Producer、Consumer访问Namesrv3.Broker高可用3.2Broker主从3.1.1配置3.1.2组件3.1
公众号-芋道源码
·
2018-06-26 06:14
kafka简述与集群配置
一、kafka简述1、简介kafka是一个高吞吐的
分布式消息队列
系统。特点是生产者消费者模式,先进先出(FIFO)保证顺序,自己不丢数据,默认每隔7天清理数据。
LiryZlian
·
2018-06-16 12:18
MQ
Bigdata
Kafka
zookeeper 入门
由于ZooKeeper的开源特性,后来的开发者在分布式锁的基础上,摸索了出了其他的使用方法:配置维护、组服务、
分布式消息队列
、分布式通知/协调等。
Meteor_hy
·
2018-06-11 18:42
zookeeper
入门
Queue
RabbitMQ实战:扩展RabbitMQ与系列总结
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-25 12:55
RabbitMQ
消息队列
RabbitMQ实战:性能和安全
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-23 12:33
RabbitMQ
性能
安全
消息队列
RabbitMQ实战:界面管理和监控
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。上一篇总结了可能出现的异常场景,并对RabbitMQ提供的可用性保证进行了分析,在出现服务器宕机后,仍然可以正常服务。
情情说
·
2018-05-21 13:56
RabbitMQ
界面管理
监控
消息队列
RabbitMQ实战:可用性分析和实现
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-14 13:47
RabbitMQ
可用性
分析
消息队列
RabbitMQ实战:消息通信模式和最佳实践
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-14 13:05
RabbitMQ
消息
通信
消息队列
RabbitMQ实战:运行和管理RabbitMQ
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-11 09:32
RabbitMQ
运行
管理
消息队列
RabbitMQ实战:理解消息通信
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-11 09:19
RabbitMQ
理解
消息通信
消息队列
RabbitMQ实战:扩展RabbitMQ与系列总结
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-04 09:00
RabbitMQ实战:性能和安全
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-05-03 12:00
深入浅出MyBatis:JDBC和MyBatis介绍
最近在休陪产假,时间比较零碎,准备看2本书充实下,一本是「深入浅出MyBatis:技术原理与实践」,一本是「RabbitMQ实战:高效部署
分布式消息队列
」,为了加深记忆和理解,会进行整理、扩展和记录。
情情说
·
2018-05-02 13:21
mybatis
JDBC
51cto
mybatis
RabbitMQ实战:界面管理和监控
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。上一篇总结了可能出现的异常场景,并对RabbitMQ提供的可用性保证进行了分析,在出现服务器宕机后,仍然可以正常服务。
情情说
·
2018-05-02 12:00
RabbitMQ实战:扩展介绍与系列总结
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
weixin_34327761
·
2018-04-29 14:49
大数据
数据库
ldap
RabbitMQ实战:可用性分析和实现
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-04-26 11:00
RabbitMQ实战:消息通信模式和最佳实践
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-04-26 11:00
RabbitMQ实战:运行和管理RabbitMQ
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-04-25 09:00
RabbitMQ实战:理解消息通信
阅读更多本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-04-25 09:00
Kafka与Kafka-manager在CentOS7下的安装与使用
说明kafka作为一种
分布式消息队列
的实现,采用发布订阅的消息模型。通过生产者把消息Topic存储在broke,消息者可以订阅多个感兴趣的topic进行消费。
芸灵fly
·
2018-04-22 12:54
CentOS
消息中间件
kafka
kafka-manager
CentOS7
Spring Cloud 技术栈
避免崩塌监控跟踪:监控资源利用、服务响应消息总线:消息队列、异步通讯配置管理:统一配置管理SpringCloudSpringCloud是若干个框架的集合,提供了服务治理、服务网关、智能路由、负载均衡、监控跟踪、
分布式消息队列
简一未
·
2018-04-21 21:44
微服务
大型网站架构之
分布式消息队列
大型网站架构之
分布式消息队列
以下是消息队列以下的大纲,本文主要介绍消息队列概述,消息队列应用场景和消息中间件示例(电商,日志系统)。
nicholas.wu
·
2018-04-19 14:01
#
Java_资讯
分布式消息队列
大型网站架构之
分布式消息队列
大型网站架构之
分布式消息队列
以下是消息队列以下的大纲,本文主要介绍消息队列概述,消息队列应用场景和消息中间件示例(电商,日志系统)。
yunlielai
·
2018-04-07 22:41
大型网站架构之分布式消息队列
消息中间件
RabbitMQ实战:运行和管理RabbitMQ
本系列是「RabbitMQ实战:高效部署
分布式消息队列
」书籍的总结笔记。
情情说
·
2018-04-07 08:45
大型网站架构之
分布式消息队列
转自:http://www.cnblogs.com/itfly8/p/5155983.html一、消息队列概述消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境,使用较多的消息队列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ
D_G_H
·
2018-03-21 18:31
php
分布式
消息队列
RabbitMQ
中间件
php
大型网站架构之
分布式消息队列
转自:http://www.cnblogs.com/itfly8/p/5155983.html一、消息队列概述消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境,使用较多的消息队列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ
D_G_H
·
2018-03-21 18:31
php
分布式
消息队列
RabbitMQ
中间件
php
大型网站架构之
分布式消息队列
以下是消息队列以下的大纲,本文主要介绍消息队列概述,消息队列应用场景和消息中间件示例(电商,日志系统)。本次分享大纲消息队列概述消息队列应用场景消息中间件示例JMS消息服务常用消息队列参考(推荐)资料一、消息队列概述消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境,使用较
笨尛孩你谁啊
·
2018-02-08 10:47
Kafka源码深度解析-序列2 -Producer -Metadata的数据结构与读取、更新策略
从本篇开始,我们将深入到源码内部,仔细分析Kafka到底是如何实现一个
分布式消息队列
。我们的分析将从Producer端开始。
jokul_51
·
2018-02-02 14:53
kafka
metadata
producer
kafka
rabbitmq消息队列的简单入门
一rabbitmqrabbitmq降低主程序线程压力,是一种非阻塞模式的
分布式消息队列
服务器,有生产者生产到rabbitmq,消费者消费二。
ordinaryday
·
2018-01-10 19:02
rabbitmq
高并发优化方法
数据库:尽量单表查询,好处是:a、好扩展(分库分表)b、缓存利用率高c、易于维护d...
分布式消息队列
:a、起到请求缓冲作用b、与分布式服务系统平滑过渡c...分布式缓存:好处:没别的扩展好,在集群环境下必须使用的方案缺点
妖君你好
·
2018-01-10 14:32
随手记
分布式消息队列
Celery 的最佳实践
目录目录不使用数据库作为Broker不要过分关注任务结果实现优先级任务应用Worker并发池的动态扩展应用任务预取数保持任务的幂等性应用任务超时限制善用任务工作流合理应用ack_late机制传递ORM对象的唯一标识预防内存泄漏合理安排定时任务的调度计划启用任务监控不使用数据库作为BrokerBroker的选择大致有消息队列和数据库两种,这里建议尽量避免使用数据库作为Broker,除非你的业务系统足
weixin_33856370
·
2018-01-05 13:00
数据库
大数据
python
分布式服务
如果说
分布式消息队列
通过消息对象分解系统耦合性,不同子系统处理同一个消息;那么分布式服务则通过接口分解系统耦合性,不同子系统通过相同的接口描述进行服务调用。
杰哥长得帅
·
2018-01-02 15:00
Kafka的分布式架构设计
最初,Kafka实际上是LinkedIn用于日志处理的
分布式消息队列
,LinkedIn的日志数据容量大,但对可靠性要求不高
社会你鑫哥
·
2017-12-26 10:11
Kafka
Kafka
kafka
1、kafka是什么ApacheKafka是一个开源消息系统,由Scala写成Kafka最初是由LinkedIn开发,并于2011年初开源Kafka是一个
分布式消息队列
:生产者消费者的功能。
叫我北北
·
2017-12-18 17:19
kafka
关注的技术
基于Dubbo框架的秒杀系统设计与实现-2
根据目标业务需求,将分布式框架Dubbo、Redis内存数据库、
分布式消息队列
RocketMQ、Spring框架集成应用于秒杀系统,实现秒杀系统功能模块化,有效快速的利用闲置的硬件资源提高秒杀系统活动时系统的稳定性
dingsai88
·
2017-12-06 22:26
java
web
负载均衡
架构设计
消息队列系列之
分布式消息队列
Kafka
介绍ApacheKafka®是一个分布式流媒体平台。这到底是什么意思呢?我们认为流媒体平台具有三个关键功能:它可以让你发布和订阅记录流。在这方面,它类似于消息队列或企业消息传递系统。它允许您以容错方式存储记录流。它可以让您在发生记录时处理记录流。什么是卡夫卡好?它被用于两大类的应用程序:构建可在系统或应用程序之间可靠获取数据的实时流数据管道构建实时流应用程序,可以转换或响应数据流要了解卡夫卡如何做
土豆拍死马铃薯
·
2017-12-03 20:11
大数据
Java
MQ入门总结(一)消息队列概念和使用场景
转载:JavaJedis操作Redis示例(一)——pub/sub模式实现消息队列转载:消息队列的定义,以及引入消息队列可解决的问题转载:大型网站架构之
分布式消息队列
转载:架构设计:系统间通信(19)—
Zenhobby
·
2017-11-29 10:59
分布式
基于Redis实现
分布式消息队列
基于Redis实现
分布式消息队列
原文地址:http://blog.csdn.net/stationxp/article/details/45731497)1、为什么需要消息队列?
517270667
·
2017-11-28 10:21
消息队列
asp.net
Nginx集群之WCF
分布式消息队列
目录1大概思路...12Nginx集群之WCF
分布式消息队列
...13MSMQ消息队列...24编写WCF服务、客户端程序...25服务器安装MSMQ..56部署WCF服务程序到局域网内1台PC机...67Nginx
夜雨瞳
·
2017-11-27 15:00
分布式消息队列
RocketMQ&Kafka -- 消息的“顺序消费”
转自:http://blog.csdn.net/chunlongyu/article/details/53977819在说到消息中间件的时候,我们通常都会谈到一个特性:消息的顺序消费问题。这个问题看起来很简单:Producer发送消息1,2,3。。。Consumer按1,2,3。。。顺序消费。但实际情况却是:无论RocketMQ,还是Kafka,缺省都不保证消息的严格有序消费!这个特性看起来很简单
学战到底
·
2017-11-11 02:11
Kafka 概述 核心组件及特性
Kafka是一个
分布式消息队列
:生产者、消费者的功能。它提供了类似于JMS的特性,但是在设
C_FuL
·
2017-11-02 15:56
Kafka
分布式消息队列
阅读更多
分布式消息队列
一、消息队列概述消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。
马刺王朝
·
2017-11-01 15:00
activemq
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他