Qcubic技术栈 | 数据库复制原理与性能优化实践

在关键基础设施行业，为保障核心系统安全稳定运行，通常会采用异地双活架构。在这种架构下，不同城市的数据中心需要保持数据实时一致，以便在某个数据中心不可用时，可以迅速切换至另一中心，避免业务中断。然而，跨地域的数据同步往往面临网络时延和复制性能下降的挑战，容易导致数据积压，进而影响双活架构的可靠性。

Qcubic数据库提供高性能复制能力，支持同步和异步两种模式，可用于主备切换、双活架构、读写分离。其核心基于事务日志（redo log）传输，并结合表级别的同步控制和自动冲突处理，保证数据一致性。

复制发送器：持续监控实例的log buffer，一旦发现新的redo log，就会判断是否属于需要复制的表，并进行解析和打包，然后发送；

复制接收器：接收数据包并放入执行队列，如果启用了并行执行器，会将数据分发给多个线程解析并执行；

进度追踪线程：在发送端和接收端分别记录日志进度，确保即使某一方短暂离线，恢复后也能从正确位置继续复制，保证数据完整性。

Qcubic在复制性能上的优化主要体现在三个方面：

多通道复制：单个实例可以同时开启多个复制通道，实现并行数据传输。这样避免了单通道因带宽或延迟受限而成为瓶颈，大幅提升发送速率。

细粒度控制：支持表级别的同步粒度。不需要复制的表可以直接忽略，从而减少无效数据的传输量，降低网络压力和存储开销。

接收端并行执行：在接收端可以启动多个执行线程，分工并行完成日志解析和数据应用，充分发挥多核CPU的计算能力，加快数据落地速度。

整体来看，Qcubic通过发送、传输、执行三个环节的并行化，显著缩短了复制延迟，提升了跨地域场景下的复制吞吐量。

在中国联通集约化核心业务系统建设中，快立方数据库（Qcubic）集群被部署在北京亦庄数据中心和西安咸阳数据中心两地，承载计费、账管、信控和实时抵扣等核心业务。由于两地机房相隔1000公里，经过光纤传输和中继转发等，存在20ms左右的网络延时，严重影响了复制效率。

快立方技术团队通过采用多节点、多通道复制、多线程并行执行等性能优化，大大提升了异地远距复制的性能。另外针对远距离跨域场景，对通信模块进行网络通信优化，通过提高单次发包大小和增加发送数据的TCP缓冲池大小，提升网络传输速度，系统的跨域复制性能显著提升。

性能优化提升方案实测结果表明：在 7600万条/分钟的业务高峰下，两地复制无积压；甚至在 1.06亿条/分钟 的超高业务量下，也能保持稳定。跨千公里数据中心单复制组复制性能可达30MB/秒，同城可达40MB/秒，复制性能完全满足集群之间的数据实时备份，保证业务系统异地集群的双活目标。

在异地双活工作模式下，快立方分布式数据库集群数据节点之间高效的双向复制能力，确保数据更新快速同步至异地节点无积压，支撑上层业务的快速切换，在异地节点应急切换的过程中复制不中断，进而实现故障分钟级快速恢复，保证业务的连续性和正常运行。