李小萌资源网 大数据云计算 Kafka高性能消息中间件 分布式集群安装架构原理


Kafka高性能消息中间件 分布式集群安装架构原理

2019-08-22 1797
阿毛
资源介绍

Kafka高性能消息中间件 分布式集群安装架构原理

课程简介:

Kafka 是分布式发布-订阅消息系统。它最初由 LinkedIn 公司开发,使用 Scala语言编写,之后成为 Apache 项目的一部分。Kafka 是一个分布式的,可划分的,多订阅者,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。

Kafka的特点

同时为发布和订阅提供高吞吐量。据了解,Kafka 每秒可以生产约 25 万消息(50 MB),每秒处理 55 万消息(110 MB)。

可进行持久化操作。将消息持久化到磁盘,因此可用于批量消费,例如 ETL,以及实时应用程序。通过将数据持久化到硬盘以及 replication 防止数据丢失。

分布式系统,易于向外扩展。所有的 producer、broker 和 consumer 都会有多个,均为分布式的。无需停机即可扩展机器。

消息被处理的状态是在 consumer 端维护,而不是由 server 端维护。当失败时能自动平衡。

支持 online 和 offline 的场景。





百度网盘可以用手机平板电脑在线播放,也可以下载之后播放

本帖资源评论
没有账号? 注册