未经优化的kafka sasl ssl+k8s+rook.io暴力压测试验 1

未经优化的kafka+k8s+rook.io暴力压测试验 1

测试人员

本测试由我团队k8s和kafka技术支持-boxuan666完成

boxuan666

我负责方向指导, 技术指导, 文档记录还有端茶倒水 😀

技术栈

rook 0.83
ceph 12.2.7
k8s 1.11.8
kafka 1.11.1
zookeeper 3.4.13
rancher 2.1.3

架构

测试虚机 : 8C 16G sas硬盘 (三台跑rook)

zookeeper 三个容器 kafka 三个容器 默认jvm配置没有调整

负载情况: 除了测试负载, 本身这套环境是uat集群,上面还跑了其他任务.

压测

kafka内置压测工具

多个 kafka-producer-perf-test.sh 写入
多个 consumer.sh 读出

目前结果

rook 和 kafka 情况

每秒10k左右后因为jvm内存太小直接挂掉了.
测试结果如下:

后台broker所在node直接挂了, kafka内存溢出

待续

简单发布,持续更新