导读 | Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。 |
这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群来提供实时的消息。
Apache Kafka 2.1.0 发布,该版本包括 28 个 KIP 的重要功能,179 个 JIRS 的修复和改进,还包括一些关键的错误修复。 以下是一些值得注意的变化:
支持 Java11
支持 Zstandard,可实现与 gzip 相当的压缩,具有更高的压缩率,尤其是减压速度(KIP-110)
Kafka 的复制协议现在支持改进的僵尸围栏
改进管理脚本和管理客户端 API 以简化管理操作(KIP-231,KIP-308,KIP-322,KIP-324,KIP-338,KIP-340)
DNS 处理改进(KIP-235,KIP-302)
原创文章,作者:kepupublish,如若转载,请注明出处:https://blog.ytso.com/122782.html