咨询热线0755-23312011

检测与标准知识分享

软件系统的 MTBF 统计如何定义故障边界

一、概念释义

软件可靠性在 GB/T 25000.10-2016 的质量模型中被归入可靠性特性,其下含成熟性、可用性、容错性与易恢复性四个子特性。软件 MTBF 通常作为成熟性的测度使用,反映在规定运行条件下相邻失效之间的平均工作时间。与硬件不同,软件不会因物理应力疲劳而随时间自然老化,其失效源于设计中潜藏的缺陷在特定输入或状态下被触发,因此统计结果高度依赖运行剖面与失效定义。

所谓故障边界,指的是在统计 MTBF 之前必须划定的一组约定:什么现象算一次失效、哪些严重度门槛以上才计数、失效持续多长时间算结束、哪些事件被排除在外。若边界不清,同一份运行日志不同人会数出不同的失效次数,MTBF 也就失去可复核性。GB/T 25000.23-2019 给出软件产品质量的测量方法, GB/T 15532-2008 与 GB/T 9386-2008 则从测试过程与文档角度要求把判据和结果记录清楚。

计算上需注意一个常见误区:软件 MTBF 应使用系统实际运行时间(总测试时间扣除失效持续时间)除以失效次数,而非简单用总时间除以失效次数。此外,失效次数与严重度门槛直接挂钩——把提示级告警也计入失效,与只统计导致服务中断的失效,会得到差别很大的结果。评价需要回答:运行剖面是否代表真实使用、严重度门槛如何设定、恢复完成以什么事件为准。

二、标准与依据体系

标准 / 文件状态与作用核心内容
GB/T 25000.10-2016现行,SQuaRE 系统与软件质量模型可靠性及成熟性/可用性/容错性/易恢复性子特性
GB/T 25000.23-2019现行,系统与软件产品质量测量可靠性相关测度的测量方法
GB/T 15532-2008现行,计算机软件测试规范测试过程、准则与阶段要求
GB/T 9386-2008现行,计算机软件测试文档编制规范测试计划、说明与报告的文档要求

标准给出质量模型、测量方法与文档规范,但不替项目规定具体的严重度门槛;失效判据与排除项须在测试计划或技术协议中事先约定。

三、核心方法:三个维度

(一)按失效判据划分

要素常见做法关注点 / 作用
功能失效规定功能未实现严重度较高,通常计入
性能越限响应或吞吐低于门槛须约定门槛是否计入
告警提示不影响规定功能一般约定为排除项
恢复成功自动恢复且无数据损失是否计入需事先说明

失效判据决定计数口径:把告警与轻微降级都算失效,会显著压低 MTBF,须按严重度分层约定。

(二)按时间口径划分

要素常见做法关注点 / 作用
总测试时间从开始到结束的跨度含失效持续时间
实际运行时间扣除失效持续时间计算 MTBF 的推荐分母
失效次数达门槛的失效计数分子分母口径须匹配
截尾方式定时或定数截尾影响区间估计

分母用实际运行时间更贴近成熟性含义,且与失效次数的口径一致;报告应写明扣除规则与截尾方式。

(三)按运行剖面划分

要素常见做法关注点 / 作用
真实剖面按用户操作分布结果外推性较强
强化剖面提高高负载占比偏向发现缺陷
测试剖面按测试用例覆盖未必代表现场
剖面声明记录输入与负载分布结果须标明剖面

软件失效由特定输入触发,运行剖面改变会改变失效强度;MTBF 数值必须与所用剖面一并报告。

四、方案设计

流程化表达:

  • 依据 GB/T 25000.10-2016 明确所测子特性,把 MTBF 归入成熟性范畴。
  • 在测试计划中定义失效判据、严重度门槛与恢复完成事件。
  • 列出排除项,如计划内停机、环境故障与已知外部依赖异常。
  • 设计代表性运行剖面,记录输入分布与负载条件。
  • 累计实际运行时间与达门槛失效次数,按口径计算 MTBF。
  • 按 GB/T 9386-2008 编制报告,附边界定义、剖面与区间估计。

(一)设计要点

项目常见安排说明
子特性成熟性测度对应软件 MTBF
失效判据功能失效严重度门槛写入测试计划
排除项计划停机与环境故障逐条列明
时间口径实际运行时间注明扣除规则
结果表述MTBF 加剖面与区间不外推到不同剖面

方案应把失效判据、严重度门槛与排除项写成可核对条目,说明时间口径与运行剖面;缺少边界约定的 MTBF 难以复现与复核。本文条款与参数以所引标准官方文本为准;测试条件须依产品形态、类别与样品状态剪裁,并以技术协议明确,不以单一试样的读数替代整批产品的结论。

五、典型应用场景

(一)成熟性度量场景

  • 指标要求:度量软件成熟性水平。
  • 方案选择:按运行剖面统计 MTBF。
  • 条件要素:定义失效判据与严重度。
  • 标准依据:GB/T 25000.10-2016。

(二)严重度分层场景

  • 指标要求:区分服务中断与轻微降级。
  • 方案选择:按门槛分别计数。
  • 条件要素:门槛写入测试计划。
  • 标准依据:GB/T 25000.23-2019 测量方法。

(三)测试文档场景

  • 指标要求:使统计过程可追溯。
  • 方案选择:按规范编制测试文档。
  • 条件要素:记录边界与原始数据。
  • 标准依据:GB/T 15532-2008、GB/T 9386-2008。

(四)现场数据场景

  • 指标要求:由运行日志反推失效间隔。
  • 方案选择:统一判据后累计时间与次数。
  • 条件要素:核对剖面与排除项。
  • 标准依据:技术协议约定的统计口径。

六、数据分析

关系式与判读:

  • 软件 MTBF 是成熟性测度,失效由缺陷在特定输入下触发,结果依赖运行剖面与失效定义。
  • 分母宜用实际运行时间,即总时间扣除失效持续时间,与失效次数的口径保持一致。
  • 严重度门槛改变失效计数,门槛越低计入事件越多,MTBF 数值相应越低。
  • 把瞬时可自动恢复的异常是否计入,会改变结论,须在统计前约定恢复完成事件。
  • 不同运行剖面下的 MTBF 不具可比性,报告须附剖面说明与区间估计。

运行时间、失效次数与严重度各按自身定义记录,指标不作跨剖面对比;结论限于约定边界与测试条件。

七、技术挑战与前沿方向

  • 失效判据未事先定义,事后计数口径不一。
  • 用总时间而非实际运行时间作分母。
  • 把告警提示与服务中断混为一类失效。
  • 运行剖面与真实使用差异明显却直接外推。
  • 报告缺少边界定义,结果无法复核。

软件可靠性测度正向结合操作剖面建模与失效严重度分层发展,通过明确的失效分类与可追溯日志提升 MTBF 的可比性,并强调与可用性指标的配合。

八、结语

软件 MTBF 属成熟性测度,统计前必须定义失效判据、严重度门槛、恢复完成事件与排除项,并按实际运行时间计算。

边界与运行剖面应随结果一并报告;不同剖面、不同门槛下的数值不作直接比较,也不以单点结果替代整体结论。

说明:文中所述测试项目、方法环节与记录要素为技术参考,不构成对产品、整批产品或后续批次一致性的担保,也不作为认证、验收合格、等级评定、市场准入或产品选型结论;规定试验条件下的结果不等同于实际部署工况与长期服役表现,条件试验、加速试验与预计模型均不折算为实际使用年限或现场可用率。文中各项指标之间不作单向换算或相互替代,应依量纲与试验条件分别判读。标准适用范围、试验条件、判定口径与版本状态以现行有效文本、官方公告及技术协议为准;已发布尚未实施的标准、修订计划与信息化文件不作为现行判定依据。文中表述不构成对服务提供方能力范围、承接资格或服务结果的声明,也不作为服务邀约;具体分工与交付内容以委托合同及技术协议约定为准。