请问pulsar有压力测试数据吗

当前PULSAR集群,有4台机器。内存配置(bookie broker)是-Xms20g -Xmx50g -XX:MaxDirectMemorySize=50g
当前发现在连接过多的时候,消费会出现Subscription is fenced异常导致订阅失败。目前没能定位根因。怀疑是负荷过载。

1 Like

可以参考: Pulsar 和 Kafka 基准测试报告(完整版)https://mp.weixin.qq.com/s/pCFZTzUwtm9WfCi-bGbGag

这个测试订阅数量太少了。与真实场景差异太大。现在是当订阅上4000个的时候会出现错误。

可以等近期2022的 benchmark 报告出来关注下,近期我们会发布

@paulzeng 你用的是什么版本?可以看一下 broker 的 logs 是不是有什么错误信息。Subscription is fenced 要看是在什么情况下出现的,还是说出现之后就无法恢复了,如果是短暂时间的 fenced 状态,这可能是预期的行为,比如 topic 被 unload 的时候,consumer 还在 subscribe to 这个 topic.

@paulzeng 除了 broker,ZK 有报错吗
可以也贴下磁盘的信息吗,包括 ZK、journal、ledger 等存储的目录和磁盘信息(是否 SSD 等)