2021年11月,工业和信息化部印发的《“十四五”软件和信息技术服务业发展规划》中明确了软件作为信息技术关键载体和产业融合的关键纽带,强调了软件在数字化发展进程中发挥的重要作用,并在多个方向上支持软件高质量发展、促进软件测试领域持续进步。分布式系统/软件的稳定性已经成为支撑企业数字化转型发展、保障产品和服务质量、提升客户满意度、控制风险的重要影响因子。
可信云是中国信息通信研究院下属的云计算服务评估品牌,也是我国针对云计算服务的权威评估体系。结合当前云上软件开发的事实背景,针对分布式系统稳定性痛点问题,可信云推出分布式系统稳定性评估体系,对软件开发全生命周期内的稳定性进行考察,帮助企业发现系统稳定性问题并提供改进建议,使其在提升系统稳定性方面有的放矢。

评估价值
分布式系统稳定性标准体系可参评部分介绍如下:

分布式系统稳定性标准体系架构
1、混沌工程平台能力评估
混沌工程是一种新型的测试理念与工具框架,通过主动引入故障的方式来验证分布式系统的稳定性,《混沌工程平台能力要求》是可信云针对混沌工程平台而制定的标准。
本评估规范了混沌工程平台应具备的功能及服务能力,覆盖基础设施、平台功能、平台性能及支撑能力,平台功能包括故障场景、介质管理、场景库管理、演练计划、实验流程、实验防护、实验观测及实验报告,近100个评估项。
混沌工程平台能力划分为基础级、增强级和先进级,技术复杂度由低到高,梯度指导厂商能力建设,有效证明并提升参评服务的混沌工程技术能力。

混沌工程平台能力架构图
目前已有六家厂商通过了混沌工程平台能力评估,他们是华泰证券、中国工商银行软件中心、阿里云、中国移动信息中心、北银金科及同创永益。
评估对象
以混沌工程平台产品为申报对象。
评估等级
混沌工程平台能力评估将参评系统分为3个等级:基础级、增强级和先进级。
2、混沌工程成熟度评估
混沌工程平台的使用是个开始,平台是实施混沌工程中故障演练的主要工具,要建立完整混沌工程能力,需要综合软件开发的技术水平以及混沌工程实验的管理能力。
《混沌工程成熟度模型》就是可信云针为指导需求方全面建立混沌工程能力而制定的标准。预期为需求方提供一个阶梯式的建设框架,指明一个组织在混沌工程实践方面需要管理哪些工作、这些工作之间的关系、先后次序,推动混沌工程能力逐步走向成熟。
本评估从工程熟练度、应用成效度、组织建设度三个方面助推企业混沌能力建设,适用于需求方、供给侧的IT系统部门及各个业务线。

混沌工程成熟度能力架构图
评估方法
混沌工程成熟度模型( CEMM )的评估结果分为两个维度:“应用级”和“组织级”:
应用级:以采纳混沌工程理念的应用/系统为申报对象(业务线可独立申报)。考察其“工程熟练度”,暨使用混沌工程的熟练度;
组织级:以采纳混沌工程理念的组织(IT团队或企业)为申报对象。综合考察其“工程熟练度”、“应用成效度”及“组织建设度”,该企业至少有三个应用/系统已采纳混沌工程。
评估等级
混沌工程成熟度模型( CEMM )将企业混沌工程成熟度水平分为5个等级:初始级、基础级、全面级、优秀级、卓越级,便于企业自评定位以及设置合理的提升目标。

混沌工程成熟度评估等级
3、分布式软件系统稳定性评估
混沌工程服务于系统稳定性,而如何有效、全面地度量系统稳定性,有目的性地检查、提升整个系统各个组件或环节的稳定性是众多从业者共同面对的难题。
《分布式软件系统稳定性度量模型》已成功立项CCSA(中国通信标准化协会)行业标准,本标准确定了分布式软件系统稳定性评价体系应考察的维度,从机制到数据到过程,综合评估软件系统的稳定性情况。

分布式软件系统稳定性度量模型
评估方法
分布式软件系统稳定性评估以系统或产品为申报对象:
重点考察参评系统的过程度量能力的完整性及流程机制的完备性,结果度量中的数据作为参考项。
评估等级
评估将根据能力完整性强弱将参评系统的稳定性分为3个等级:基础级、增强级和先进级。
4、可观测性平台能力评估
近些年来,面对日趋复杂的软件系统,即使是已经全球领先的技术公司仍然无法避免大规模宕机事故的发生,企业急需更多的手段和工具去保障软件系统的稳定性。而可观测性,则是保障软件系统稳定性的基石:如果软件系统内部情况都不可观测,则更无从谈起故障分析和系统改进等稳定性保障手段。
为此,可信云推出《可观测性平台技术要求》标准评估,面向可观测性工具和平台的供应方,提供全面的可观测性平台能力参考规范,助力可观测性产品为更多企业软件系统的稳定性保驾护航。

可观测性平台能力
评估方法
面向可观测性工具和平台的供应方。
评估等级
可观测性平台评估将参评系统的可观测性能力分为3个等级:基础级、增强级和先进级。
5、全链路压测平台能力评估
随着软件系统规模得以更进一步扩张,其承载的数据体量与日俱增,逐渐成为威胁系统稳定性的主要因素之一。在此背景下,如何才能准确地把握系统的数据承载量,提前发现服务链路中的性能瓶颈,从而规避数据过载导致的系统崩溃问题。
可信云推出《全链路压测平台技术能力评估》,面向全链路压测服务供应方,提出全链路压测技术能力的评估标准模型,协助扩大全链路压测服务在企业中的影响力和接受度,保障海量数据场景下的软件系统稳定性。

全链路压测平台能力
评估方法
面向全链路压测服务供应方。
评估等级
全链路压测平台能力评估将参评平台的能力分为3个等级:基础级、增强级和先进级。
以上服务评估流程如下:

评估流程
联系方式
混沌工程平台、混沌工程成熟度、分布式系统稳定性评估:
王海清
wanghaiqing@caict.ac.cn
18813097160
可观测性能力、全链路压测能力评估:
李修莹
lixiuying@caict.ac.cn
校 审 | 陈 力、 珊 珊
编 辑 | 凌 霄

推荐阅读







