咨询热线0755-23312011

检测与标准知识分享

软件补丁修复的故障,是否纳入 MTBF 统计

一、概念释义

软件补丁修复的故障要不要计入 MTBF,取决于统计边界而不是修复动作本身。软件 MTBF 属成熟性测度,统计的是规定条件下相邻失效之间的工作时间。按 GB/T 25000.10-2016 的质量模型,成熟性关注缺陷导致失效的频次;GB/T 25000.23-2019 提供相应测量方法;GB/T 15532-2008 与 GB/T 9386-2008 要求测试过程与结果可追溯。既然统计对象是失效事件,那么只要某次事件在发生时满足事先约定的失效判据,就应被计数,之后是否打了补丁不改变该次事件已经发生的事实。

容易混淆的是几种不同情形。其一,同一缺陷在补丁前已导致过失效:历史时段的失效照常计入,补丁发布后的时段从新版本或新配置起点重新计算,前后时段须分段统计。其二,补丁本身引入新的缺陷并触发失效:这属于新版本运行期间的新失效,应计入新版本统计,并可标注为回归类问题。其三,补丁已部署但同类失效再次出现:说明修复不完整或存在相近缺陷,仍按失效计数,不作抵消。

还有一种做法是按「已修复缺陷不再重复计入」来统计,这在特定分析(如缺陷收敛趋势)中有意义,但得到的已不是标准意义上的 MTBF,须明确标注为另一种口径。评价需要回答:统计的是事件发生还是未修复缺陷存量、版本切换点如何界定、补丁部署时间是否纳入排除窗口。把不同口径混在一张表里,会使结果失去可比性。

二、标准与依据体系

标准 / 文件状态与作用核心内容
GB/T 25000.10-2016现行,SQuaRE 质量模型成熟性测度与失效概念
GB/T 25000.23-2019现行,系统与软件产品质量测量可靠性测度的测量方法
GB/T 15532-2008现行,计算机软件测试规范测试过程与回归测试要求
GB/T 9386-2008现行,测试文档编制规范测试日志与事件报告的记录要求

标准不专门规定补丁事件的计数规则,须在测试计划或技术协议中约定版本切换点与统计口径,并保留事件记录以便复核。

三、核心方法:三个维度

(一)按事件性质划分

要素常见做法关注点 / 作用
补丁前失效发生时满足失效判据计入历史时段
补丁后复现同类失效再次出现仍按新事件计入
回归新失效补丁引入新缺陷计入新版本统计
已修复不计按缺陷存量口径须标注非标准 MTBF

按事件发生计数是常规口径;按未修复缺陷存量统计属于另一类分析,二者不可混用。

(二)按版本边界划分

要素常见做法关注点 / 作用
版本切换点补丁部署生效时刻前后时段分段
灰度期间部分节点已更新按节点或版本分层
回滚事件补丁撤销恢复旧版记录并重新分段
配置基线记录版本与配置状态便于结果复核

版本切换点决定失效归属哪个时段,灰度与回滚须有记录,否则统计边界不清。

(三)按排除规则划分

要素常见做法关注点 / 作用
部署窗口补丁上线短暂时段是否排除须约定
已知问题已登记未修复缺陷触发失效仍计入
计划维护预定停机时间一般列为排除项
外部依赖第三方服务异常按责任边界约定

排除项须事先列明,不得事后按结果取舍;外部依赖异常是否计入应按责任边界约定。

四、方案设计

流程化表达:

  • 在测试计划中确认统计口径为按事件发生计数,并写明失效判据。
  • 定义版本切换点,明确补丁部署生效时刻与分段统计规则。
  • 列出排除项,包括部署窗口、计划维护与外部依赖的处理。
  • 记录每次失效的时间、版本、配置与处置方式,保留原始日志。
  • 按版本分段累计实际运行时间与失效次数,计算各段 MTBF。
  • 在报告中区分历史失效、复现失效与回归失效,并注明口径。

(一)设计要点

项目常见安排说明
统计口径按事件发生计数注明非存量口径
版本边界部署生效时刻灰度与回滚记录
排除项部署窗口与计划维护事先列明
事件记录时间/版本/配置/处置保留原始日志
结果表述分段 MTBF 与区间注明版本范围

方案应把统计口径、版本边界与排除项写成可核对条目,说明补丁前后分段处理;事件记录完整是结果可复核的前提。本文条款与参数以所引标准官方文本为准;测试条件须依产品形态、类别与样品状态剪裁,并以技术协议明确,不以单一试样的读数替代整批产品的结论。

五、典型应用场景

(一)历史失效场景

  • 指标要求:统计补丁发布前的成熟性水平。
  • 方案选择:按发生时判据计入历史时段。
  • 条件要素:记录版本与配置状态。
  • 标准依据:GB/T 25000.10-2016 成熟性。

(二)补丁后复现场景

  • 指标要求:判断修复是否完整。
  • 方案选择:复现失效按新事件计入。
  • 条件要素:标注为同源复现问题。
  • 标准依据:GB/T 15532-2008 回归测试。

(三)回归缺陷场景

  • 指标要求:识别补丁引入的新问题。
  • 方案选择:计入新版本统计并标注。
  • 条件要素:记录变更前后的差异。
  • 标准依据:GB/T 9386-2008 事件报告。

(四)缺陷收敛分析场景

  • 指标要求:观察未修复缺陷的变化趋势。
  • 方案选择:按缺陷存量另行统计。
  • 条件要素:显著标注非标准 MTBF 口径。
  • 标准依据:测量方法与项目约定。

六、数据分析

关系式与判读:

  • 补丁修复不改变失效已发生的事实,按事件发生计数时,历史失效照常计入。
  • 补丁后同类失效复现说明修复不完整,仍按新事件计数,不作抵消处理。
  • 补丁引入的新缺陷导致的失效,计入新版本统计,可标注为回归类问题。
  • 版本切换点决定失效归属时段,灰度与回滚须记录以便分段统计。
  • 按未修复缺陷存量统计属于另一个口径,须明确标注,不与 MTBF 混用。

事件时间、版本边界与排除窗口各按定义记录,不同口径的结果不合并;结论限于所统计版本与条件。

七、技术挑战与前沿方向

  • 按「修好了就不算」处理,事后剔除历史失效。
  • 灰度期间版本归属不清,失效无法分段。
  • 补丁引入的回归失效被误记为旧缺陷。
  • 部署窗口是否排除未事先约定。
  • 把缺陷存量趋势当作 MTBF 报告。

软件可靠性统计正向以版本与配置为维度的事件追踪发展,通过完整变更记录区分历史失效、复现与回归,使分段 MTBF 与缺陷收敛分析各自口径清晰。

八、结语

补丁修复的故障在发生当时满足失效判据的,应计入对应时段的 MTBF;修复动作本身不抵消已发生的事件,补丁前后按版本切换点分段统计。

若按未修复缺陷存量另行分析,须明确标注为非标准口径;排除项与版本边界应事先约定并保留原始记录。

说明:文中所述测试项目、方法环节与记录要素为技术参考,不构成对产品、整批产品或后续批次一致性的担保,也不作为认证、验收合格、等级评定、市场准入或产品选型结论;规定试验条件下的结果不等同于实际部署工况与长期服役表现,条件试验、加速试验与预计模型均不折算为实际使用年限或现场可用率。文中各项指标之间不作单向换算或相互替代,应依量纲与试验条件分别判读。标准适用范围、试验条件、判定口径与版本状态以现行有效文本、官方公告及技术协议为准;已发布尚未实施的标准、修订计划与信息化文件不作为现行判定依据。文中表述不构成对服务提供方能力范围、承接资格或服务结果的声明,也不作为服务邀约;具体分工与交付内容以委托合同及技术协议约定为准。