浅谈分布式消息技术 Kafka

浅谈分布式消息技术 Kafka_第1张图片

浅谈分布式消息技术 Kafka

本期看点

Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

主要应用场景是:日志收集系统和消息系统。

Kafka主要设计目标如下:

以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间的访问性能。

高吞吐率。即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输。

支持Kafka Server间的消息分区,及分布式消费,同时保证每个partition内的消息顺序传输。

同时支持离线数据处理和实时数据处理。


全文阅读:「浅谈分布式消息技术 Kafka」

欢迎关注“LinkedKeeper”微信公众号。LinkedKeeper是一个致力于打造高品质的技术资源社区。于2013年建站,于2016年1月正式更名为 LinkedKeeper,寓意为,让知识传播,使你我互联。

浅谈分布式消息技术 Kafka_第2张图片
LinkedKeeper 微信公众号

你可能感兴趣的:(浅谈分布式消息技术 Kafka)