暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

云基座技术是大厂专有,那小厂和私有云的出路在哪里?

AustinDatabases 2025-09-08
75



专栏导语

AI 时代数据洪流来袭,晨章数据以创新 “数据基层” 架构破局!旗下分布式数据库系列产品,实现计算、内存、日志、存储四元解耦,0.1ms响应跨模态需求,更全面开源赋能生态。本专栏将邀请五位嘉宾,从不同视角深探晨章数据的领先之道

解析云原生弹性架构优势,探索新硬件红利,看 AI 原生数据库如何突赋能AI创业者,锚定市场痛点破局,听创始人拆解技术创业逻辑,干货持续输出,敬请关注!


本篇特邀专家——刘华阳,深度解析云数据库基座厂商的探索路径,并系统探讨中小厂商与私有云的未来发展可能性,为行业提供兼具实践参考与前瞻视野的深度洞见。


刘华阳

一个与时俱进的DBA 架构师,从传统商业到最新开源数据库,再到分布式,云原生数据库产品,一路体验各种不同数据库给企业,给数据库厂商、数据库使用人员、数据库运维人员带来不同的视角,愿意将这些感受表达出来的小角色。



云数据库是未来

数据库技术的进化都与需求的产生和变化有关,传统数据库厂商是不会想到云数据库厂商逐渐可以玩出他们玩不出的花样,同时也想不到2025年云数据库成为整体国产数据库占比完全碾压线下的数据库厂商,可谓谁想活到后面,谁就要有数据库的云产品。




非云厂商的市场预测


可是这里有一个问题,云数据库的理念和传统数据库设计的理念完全不同,人家的玩法是4维科技,与数据库传统厂商的2维科技相比,可操作性更大。所以摆在传统数据库厂商的角度,怎么能快速的上云数据库这条赛道是后续需要考虑,且要操作的。


从一个数据库从业者的角度考虑,云底座是一个关键点。传统数据库设计的理念是单机的概念,思想维度都是围绕单机性能最大化而来的,云数据库根本不是这么考虑和解决问题的,所以云数据库不是把线下的数据库弄到云上就是云数据库了,而是依据云上硬件和用户的特点来重新设计底层架构,而底层的基座则是云数据库的难点和重点。


众多的小型云厂商,私有云厂商,甚至是大型客户,需要的是云基座,一种基于新的云硬件概念而来的云数据库产品。


所以今天引出我们本次的一种新的基于云的通用性架构,Data Substrate后面将统称Data Substrate为 DS。这样的基于云数据库的基座的产品他有什么技术特点来应对各大云厂商的成熟的云数据库的架构也是我们此次想谈到的问题。


01

云架构是不是大型云厂商的专属?

回答不是,大型企业和私有云厂商需要一个通用性的架构,这里我们强调的是通用性,灵活性等特点。


那么DS通用性云基座技术有什么技术特点:

1 本地部署的能力:在没有云存储服务的本地部署中,DS可以通过Raft协议实现数据的复制,提供与云类似的容错和基本的弹性功能。


2 中立性:云厂商本身的技术都具有技术壁垒,DS技术本身是通用的,可以部署在多个云平台提供统一的访问接口,实现混合云的技术能力。


3 模块化存储能力:模块化存储的能力本身体现的是DS技术的灵活性,他允许多种存储系统融入到云基座中,比如他可以利用对象存储S3作为主存,同时通过EBS存储日志,而将本地的NVMe作为本地的数据缓存。这是一个非常“云”的模式的打法,从性能和成本进行兼顾的设计模式。


02

DS技术本身的核心

或者说优势是什么?

DS技术的核心点在于解耦,DS技术将计算,内存,日志,和存储资源进行独立解耦,提供了与云上云原生数据库本身对系统资源设计类似的方式进行资源的调用和使用。通过这样的技术来建立,按需独立伸缩的能力。


计算 (CPU):可根据查询工作负载的实时变化动态扩展或缩减计算引擎(如 TxServer 的 CPU 核心数),从而显著提升吞吐量并降低延迟。


内存 (缓存):内存节点(即分布式内存表 TxMap)的规模可以独立于总数据量进行伸缩,与热数据的大小或预算成正比。这使得数据库能够根据实际需求快速调整缓存容量,应对读密集型工作负载的峰值。


日志 (写入吞吐量与持久化延迟):日志节点数量可以独立于缓存大小和总数据量进行水平扩展,与在线写流量成正比。通过增加独立的日志工作者和低规格日志节点,能够显著提升写入吞吐量并降低写入延迟,消除写密集型工作负载的日志瓶颈。


存储 (数据容量与缓存未命中性能):存储资源与计算、内存和日志独立扩展,实现大型数据集的成本效益管理和高效的缓存未命中处理。


这种四元解耦(计算、内存、日志和存储的独立扩展)是 Data Substrate 的独特优势,使系统能够根据给定工作负载精确分配所需资源,避免过度配置,从而提高成本效益和运营灵活性,而这个概念也是先进的云企业一直倡导和积极实现的,最终将实现数据库的使用如自来水一样,打开就付费,关闭就免费。


DS技术已经可以达到这个技术能力,支持 Scale to Zero(缩容到零):当数据库长时间没有流量时,系统能够自动释放所有计算资源,用户仅需支付成本极低的对象存储费用,实现“没有使用就没有费用”。当工作负载返回时,系统可在几秒内迅速恢复服务。


03

DS技术的底层是分布式吗?

是新瓶装旧酒吗?怎么保证性能?

Data Substrate


首先DS技术针对CPU,内存,以及存储进行解耦,分布式数据库中对于性能有影响的部分是两阶段提交,DS架构下的数据库不会有两阶段提交的场景,整体的操作均在内存中完成。在这样的设计下,DS可以做到如下的能力:


1  数据库在工作负载繁重的情况下,也能支持亚毫秒级的读取延迟。


2  支持秒级自动故障转移和零数据丢失,并通过热备份模式进一步降低故障恢复时间


3  通过 Pod 池化,可以实现秒级启动,快速响应用户请求,确保动态调整资源时用户无感知


4  内存节点可实现秒级弹性扩容,扩展速度提升百倍


5  Scale 时会有数据的迁移或移动,新增节点马上提供服务


6  每个CPU核绑定一个线程的架构(thread-per-core)充分利用异步 I/O (io_uring)能力,最小化上下文切换,减少锁竞争,即便在重负载下也能维持高吞吐量


最终DS技术并不是一个单纯的数据库技术DS技术是一项高效的通用的云数据库基座,在此以上可以搭建,redis、MySQL、MongoDB、甚至基于多模态的数据库产品。


写到最后,这项技术的拥有者是一家正在稳定创业,通过先进的云基座发展起来的数据库厂商,如果你觉得这个技术很有意思,想试用,在阿里云AWS的云市场中均有他们的产品可以使用(可商用)。除了Redis兼容的高性能KV之外,他们还推出了Mongo兼容的文档数据库产品,后续还将推出更多模态的数据库产品。


AWS市场 晨章数据产品


阿里云  晨章数据产品




下期精彩预告


ElogData--乘硬件之风,破创新之浪


置顶
MySQL SQL 优化指南 SQL 四句真言(优化系列 3)
沧海要,《SQL SERVER 运维之道》,清风笑,竟惹寂寥
SQL SERVER SQL 优化指南  四句真言 (SQL 优化系列 2)
PostgreSQL SQL 优化指南 四句真言(SQL 优化系列 1)
从 Universal 环球影城 到 国产数据库产品 营销 --驴唇对马嘴
3种方式 PG大版本升级  接锅,背锅,不甩锅  以客户为中心做产品
"PostgreSQL" 不重启机器就能调整 shared buffer pool  的原理
超强外挂让MySQL再次兴盛,国内神秘组织拯救MySQL行动
AI 很聪明,但就怕脑子失忆,记忆对AI很重要
从某数据库信任“危机”,简谈危机公关
邦邦硬的PostgreSQL技术干货来了,怎么动态扩展PG内存 !
数据库信创话题能碰吗? 今天斗胆说说
企业出海数据库设计问题一角,与政策动荡下的全球数据库产品
计问题一角,与政策动荡下的全球数据库产品

《数据库江湖邪修门派:心法五式全解》

微软动手了,联合OpenAI + Azure 云争夺AI服务市场

“当复杂的SQL不再需要特别的优化”,邪修研究PolarDB for PG 列式索引加速复杂SQL运行

企业出海“DB”要合规,要不挣那点钱都不够赔的

“合体吧兄弟们!”——从浪浪山小妖怪看OceanBase国产芯片优化《OceanBase “重如尘埃”之歌》

未知黑客通过SQL SERVER 窃取企业SAP核心数据,影响企业运营

那个MySQL大事务比你稳定,主从延迟低,为什么? Look my eyes! 因为宋利兵宋老师

非“厂商广告”的PolarDB课程:用户共创的新式学习范本--7位同学获奖PolarDB学习之星

      说我PG Freezing Boom 讲的一般的那个同学,专帖给你,看看这次可满意

     短评 国产数据库营销市场 “问题”

     这个 PostgreSQL 让我有资本找老板要 鸡腿 鸭腿 !!

     DBA被瞧不起 你有什么建议? Drive Fast !

OceanBase Hybrid search 能力测试,平换MySQL的好选择

HyBrid Search 实现价值落地,从真实企业的需求角度分析 !不只谈技术!

一个IP地址访问两个PG实例,上演“一女嫁二夫”的戏码

OceanBase 光速快递 OB Cloud “MySQL” 给我,Thanks a lot

从“小偷”开始,不会从“强盗”结束 -- IvorySQL 2025 PostgreSQL 生态大会

被骂后的文字--技术人不脱离思维困局,终局是个 “死” ? ! ......

个群2025上半年总结,OB、PolarDB, DBdoctor、爱可生、pigsty、osyun、工作岗位等

卷呀卷,Hybrid 混合查询学习--哪个库是小趴菜

从MySQL不行了,到乙方DBA 给狗,狗都不干? 我干呀!

DBA 干不好容易蹲牢房--这事你知道吗?

SQL SERVER 2025发布了, China幸亏有信创!

MongoDB 麻烦专业点,不懂可以问,别这么用行吗 ! --TTL

P-MySQL SQL优化案例,反观MySQL不死没有天理

MySQL 条件下推与排序优化实例--MySQL8.035

云数据库厂商除了卷技术,下一个阶段还可以卷什么?

PostgreSQL 新版本就一定好--由培训现象让我做的实验

某数据库下的一手好棋!共享存储落子了!

删除数据“八扇屏” 之 锦门英豪  --我去-BigData!

PostgreSQL “乱弹” 从索引性能到开发优化

写了3750万字的我,在2000字的OB白皮书上了一课--记 《OceanBase 社区版在泛互场景的应用案例研究》

SQLSHIFT 是爱可生对OB的雪中送炭!

青春的记忆,MySQL 30年感谢有你,再见!(译)

老实人做的数据库产品,好像也不“老实” !

疯狂老DBA 和 年轻“网红” 程序员 --火星撞地球-- 谁也不是怂货  

哈呀站,OB广州开发者大会 之 “五” 眼联盟

和架构师沟通那种“一坨”的系统,推荐只能是OceanBase,Why ?


OceanBase 相关文章

某数据库下的一手好棋!共享存储落子了!

写了3750万字的我,在2000字的OB白皮书上了一课--记 《OceanBase 社区版在泛互场景的应用案例研究》

     哈呀站,OB广州开发者大会 之 “五” 眼联盟
OceanBase 单机版可以大批量快速部署吗? YES
OceanBase 6大学习法--OBCA视频学习总结第六章
OceanBase 6大学习法--OBCA视频学习总结第五章--索引与表设计
OceanBase 6大学习法--OBCA视频学习总结第五章--开发与库表设计
OceanBase 6大学习法--OBCA视频学习总结第四章 --数据库安装
OceanBase 6大学习法--OBCA视频学习总结第三章--数据库引擎
OceanBase 架构学习--OB上手视频学习总结第二章 (OBCA)
OceanBase 6大学习法--OB上手视频学习总结第一章
没有谁是垮掉的一代--记 第四届 OceanBase 数据库大赛
OceanBase  送祝福活动,礼物和幸运带给您

跟我学OceanBase4.0 --阅读白皮书 (OB分布式优化哪里了提高了速度)

跟我学OceanBase4.0 --阅读白皮书 (4.0优化的核心点是什么)

跟我学OceanBase4.0 --阅读白皮书 (0.5-4.0的架构与之前架构特点)

跟我学OceanBase4.0 --阅读白皮书 (旧的概念害死人呀,更新知识和理念)

聚焦SaaS类企业数据库选型(技术、成本、合规、地缘政治)

OceanBase 学习记录-- 建立MySQL租户,像用MySQL一样使用OB
         MongoDB 相关文章

MongoDB “升级项目” 大型连续剧(4)-- 与开发和架构沟通与扫尾

MongoDB “升级项目” 大型连续剧(3)-- 自动校对代码与注意事项

MongoDB “升级项目” 大型连续剧(2)-- 到底谁是"der"

MongoDB “升级项目”  大型连续剧(1)-- 可“生”可不升

MongoDB  大俗大雅,上来问分片真三俗 -- 4 分什么分

MongoDB 大俗大雅,高端知识讲“庸俗” --3 奇葩数据更新方法

MongoDB 学习建模与设计思路--统计数据更新案例

MongoDB  大俗大雅,高端的知识讲“通俗” -- 2 嵌套和引用

MongoDB  大俗大雅,高端的知识讲“低俗” -- 1 什么叫多模

MongoDB 合作考试报销活动 贴附属,MongoDB基础知识速通

MongoDB 年底活动,免费考试名额 7个公众号获得

MongoDB 使用网上妙招,直接DOWN机---清理表碎片导致的灾祸 (送书活动结束)

MongoDB 2023年度纽约 MongoDB 年度大会话题 -- MongoDB 数据模式与建模

MongoDB  双机热备那篇文章是  “毒”
MongoDB   会丢数据吗?在次补刀MongoDB  双机热备
MONGODB  ---- Austindatabases  历年文章合集

PolarDB 已经开放的课程
PolarDB 非官方课程第八节--数据库弹性弹出一片未来--结课
PolarDB 非官方课程第七节--数据备份还原瞬间完成是怎么做到的--答题领奖品
PolarDB 非官方课程第六节--数据库归档还能这么玩--答题领奖品
PolarDB 非官方课程第五节--PolarDB代理很重要吗?--答题领奖品
PolarDB 非官方课程第四节--PG实时物化视图与行列数据整合处理--答题领奖品
PolarDB 非官方课程第三节--MySQL+IMCI=性能怪兽--答题领奖品
PolarDB 非官方课程第二节--云原生架构与特有功能---答题领奖品
PolarDB 非官方课程第一节-- 用户角度怎么看PolarDB --答题领奖品

免费PolarDB云原生课程,听课“争”礼品,重塑云上知识,提高专业能力


PolarDB 相关文章
数据压缩60%让“PostgreSQL” SQL运行更快,这不科学呀?
这个 PostgreSQL 让我有资本找老板要 鸡腿 鸭腿 !!
用MySQL 分区表脑子有水!从实例,业务,开发角度分析 PolarDB 使用不会像MySQL那么Low
P-MySQL SQL优化案例,反观MySQL不死没有天理
MySQL 和 PostgreSQL 可以一起快速发展,提供更多的功能?
这个MySQL说“云上自建的MySQL”都是”小垃圾“
        PolarDB MySQL 加索引卡主的整体解决方案

“PostgreSQL” 高性能主从强一致读写分离,我行,你没戏!

PostgreSQL 的搅局者问世了,杀过来了!

在被厂商围剿的DBA 求生之路 --我是老油条

POLARDB  添加字段 “卡” 住---这锅Polar不背

PolarDB 版本差异分析--外人不知道的秘密(谁是绵羊,谁是怪兽)

在被厂商围剿的DBA 求生之路 --我是老油条

PolarDB 答题拿-- 飞刀总的书、同款卫衣、T恤,来自杭州的Package(活动结束了)

PolarDB for MySQL 三大核心之一POLARFS 今天扒开它--- 嘛是火


PostgreSQL 相关文章
说我PG Freezing Boom 讲的一般的那个同学专帖给你看这次可满意
一个IP地址访问两个PG实例,上演“一女嫁二夫”的戏码
PostgreSQL  Hybrid能力岂非“小趴菜”数据库可比 ?
PostgreSQL 新版本就一定好--由培训现象让我做的实验
PostgreSQL “乱弹” 从索引性能到开发优化

PostgreSQL  无服务 Neon and Aurora 新技术下的新经济模式 (翻译)

PostgreSQL的"犄角旮旯"的参数捋一捋

PostgreSQL逻辑复制槽功能

PostgreSQL 扫盲贴 常用的监控分析脚本

“PostgreSQL” 高性能主从强一致读写分离,我行,你没戏!

PostgreSQL  添加索引导致崩溃,参数调整需谨慎--文档未必完全覆盖场景
PostgreSQL 的搅局者问世了,杀过来了!
PostgreSQL SQL优化用兵法,优化后提高 140倍速度
PostgreSQL 运维的难与“难”  --上海PG大会主题记录
PostgreSQL 什么都能存,什么都能塞 --- 你能成熟一点吗?
PostgreSQL 迁移用户很简单 ---  我看你的好戏

PostgreSQL 用户胡作非为只能受着 --- 警告他

全世界都在“搞” PostgreSQL ,从Oracle 得到一个“馊主意”开始
PostgreSQL 加索引系统OOM 怨我了--- 不怨你怨谁

PostgreSQL “我怎么就连个数据库都不会建?” --- 你还真不会!

病毒攻击PostgreSQL暴力破解系统,防范加固系统方案(内附分析日志脚本)
PostgreSQL 远程管理越来越简单,6个自动化脚本开胃菜

PostgreSQL 稳定性平台 PG中文社区大会--杭州来去匆匆

PostgreSQL 如何通过工具来分析PG 内存泄露

PostgreSQL  分组查询可以不进行全表扫描吗?速度提高上千倍?

POSTGRESQL --Austindatabaes 历年文章整理

PostgreSQL  查询语句开发写不好是必然,不是PG的锅

PostgreSQL  字符集乌龙导致数据查询排序的问题,与 MySQL 稳定 "PG不稳定"
PostgreSQL  Patroni 3.0 新功能规划 2023年 纽约PG 大会 (音译)
PostgreSQL   玩PG我们是认真的,vacuum 稳定性平台我们有了
PostgreSQL DBA硬扛 垃圾 “开发”,“架构师”,滥用PG 你们滚出 !(附送定期清理连接脚本)

DBA 失职导致 PostgreSQL 日志疯涨


MySQL相关文章

MySQL 条件下推与排序优化实例--MySQL8.035

青春的记忆,MySQL 30年感谢有你,再见!(译)

MySQL 8 SQL 优化两则 ---常见问题

MySQL SQL优化快速定位案例 与 优化思维导图
"DBA 是个der" 吵出MySQL主键问题多种解决方案
MySQL 怎么让自己更高级---从内存表说到了开发方式
MySQL timeout 参数可以让事务不完全回滚
MySQL 让你还用5.7 出事了吧,用着用着5.7崩了
MySQL 的SQL引擎很差吗?由一个同学提出问题引出的实验
用MySql不是MySQL, 不用MySQL都是MySQL 横批 哼哼哈哈啊啊
MYSQL  --Austindatabases 历年文章合集


临时工访谈系列

没有谁是垮掉的一代--记 第四届 OceanBase 数据库大赛

ETL 行业也够卷,云化ETL,ETL 软件不过了


SQL SERVER 系列
SQL SERVER维保AI化,从一段小故事开始
SQL SERVER 如何实现UNDO REDO 和PostgreSQL 有近亲关系吗
SQL SERVER 危险中,标题不让发,进入看详情(译)


文章转载自AustinDatabases,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论