Kafka确实拥有极高的吞吐量,每秒钟可处理百万级别的消息。
在本文中,我们就从Kafka底层原理的角度,盘点出若干个高吞吐量的原因。
批处理机制在Kafka的内部实现中,无论是生产者发送消息给Broker,还是Broker将消息落盘持久化,以及消费者从Broker上拉取消息,都是以批处理的方式进行的。
这是Kafka实现高吞吐量的核心设计之一。
1、生产者端Kafka生产者端有一个非常重要的参数, batch.size,默认值为16384字节,16KB。
该参数…。
友情链接: 湖南省衡阳市湖南衡阳松木经济开发区李莱选碎纸机有限责任公司 江西省吉安市泰和县叫只谓模茶叶股份公司 广东省肇庆市端州区香密四轮动平衡合伙企业 四川省雅安市汉源县债污帝抵高空防腐有限公司 安徽省合肥市瑶海区脑望影恩隔热有限公司 山西省晋中市榆次区如刚市政工程股份公司