未经优化的kafka+k8s+rook.io暴力压测试验 1
测试人员
本测试由我团队k8s和kafka技术支持-boxuan666完成
我负责方向指导, 技术指导, 文档记录还有端茶倒水 😀
技术栈
rook 0.83
ceph 12.2.7
k8s 1.11.8
kafka 1.11.1
zookeeper 3.4.13
rancher 2.1.3
架构
测试虚机 : 8C 16G sas硬盘 (三台跑rook)
zookeeper 三个容器 kafka 三个容器 默认jvm配置没有调整
负载情况: 除了测试负载, 本身这套环境是uat集群,上面还跑了其他任务.
压测
kafka内置压测工具
多个 kafka-producer-perf-test.sh 写入
多个 consumer.sh 读出
目前结果
rook 和 kafka 情况
每秒10k左右后因为jvm内存太小直接挂掉了.
测试结果如下:
后台broker所在node直接挂了, kafka内存溢出
待续
简单发布,持续更新