Kafka高吞吐的原因

1、 kafka基于顺序写入磁盘的方式

2、多个patition

3、批量处理消息

4、批量消息可以通过压缩，减少消息体积，KAFKA支持Gzip和Snappy压缩协议。

5、零拷贝

正常流程：磁盘文件 --> 拷贝到内核空间 --> 拷贝到用户空间 --> 拷贝到内核空间 --> 拷贝到网卡

零拷贝：通过mmap代替read，减少一次拷贝。

磁盘文件 --> 拷贝到内核空间 --> 拷贝到内核空间 --> 拷贝到网卡