Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

...

multi-raft-factor=1

multi-raft-factor=3

JProfile

GC log

通过 jprofile 和 gc log 均观察到 观察到 multi-raft-factor 增大后 GC 明显变得严重,这主要是当前对于 multi-raft 没有进行有效的内存控制导致的。即每个 raftlogmanager 都具有一个 512 MB 的日志缓存,raft 组数增加后进一步增大了内存的紧张程度,从而导致 FGC 更加频繁,最终影响性能。具体可以参考该文档查看分布式 raft 内存控制的问题和解决方案。


multi-raft-factor=1

Image Added

Image RemovedImage Added

multi-raft-factor=3

Image Added

Image RemovedImage Added

回顾:

参照之前开发该功能时的测试记录,在 768 G 内存的机器上测试 multi-raft-factor 参数的作用,当内存不紧张 GC 不频繁时,性能提升十分明显。具体可以参考此文档



总结:

当前的 multi-raft 功能在高并发情况下不一定能够带来稳定的提升,主要原因是内存控制工作还不够完善,默认参数可能会导致内存紧张 功能在高并发情况下不一定能够带来稳定的提升,主要原因是 Raft 的内存控制工作还不够完善,默认参数可能会导致内存紧张 GC 频繁。


通过此次测试工作,可以明确分布式的内存控制势在必行。

...