集群做单分片扩展到2分片操作,重分布性能慢。每小时370张表(提升并发任务数,扩展速率也无明显增长)左右,cpu资源无法充分利用只有10%左右。
修改了如下参数: (1)调整gn层gbase_parallel_degree=6 (2)在/etc/sysconfig/gbase中加 export TCMALLOC_MAX_TOTAL_THREAD_CACHE_BYTES=1073741824,并重启集群。 开启并发任务后扩展分片速率提升比较明显,30并发可达到每小时1400张表左右,10并发也可以达到每小时800左右的扩展速度。观察cpu情况, 峰值可达到90%以上,能够较充分的利用cpu资源,并且观察资源情况还未达到cpu和io的瓶颈。并发再加上到40以上,预计扩展速率会再提升一些(现场cpu为40核,378G内存)。