Physical Address
304 North Cardinal St.
Dorchester Center, MA 02124
ISO/IEC 14598-6:2001 (CAN/CSA-ISO/IEC 14598-6-02) 软件工程 — 产品评估 — 第6部分：评估模块
基于评估模块的软件产品质量评估方法指南
标准概况与适用范围
ISO/IEC 14598-6:2001（由加拿大标准协会采纳为CAN/CSA-ISO/IEC 14598-6-02）是软件工程标准中关于产品评估的重要组成部分。该标准定义了评估模块（Evaluation Module）的概念和结构，为软件产品的质量评估提供了一套可复用、标准化的构件。评估模块将评估目标、度量方法、评价准则和规程打包，使得评估活动不再依赖临时创建的方法，从而大幅提升评估的重复性和可比性。
本标准适用于以下场景：
- 软件开发组织需要内部评估产品质量时；
- 第三方评估机构为软件产品提供独立评价时；
- 采购方依据评估结果进行软件选型或验收时；
- 质量管理人员设计或选择评估方案时。
截至2026年，尽管软件工程领域已有更新的SQuaRE系列（ISO/IEC 25000），但ISO/IEC 14598-6:2001所提出的模块化评估思想仍然是许多现代评估框架的基础，具有持久的参考价值。
关键技术要点：评估模块可以像“积木”一样组合使用，不同的评估模块可覆盖不同的质量特性（如功能性、可靠性、效率等），评估者可根据实际需求灵活选用或定制模块。
主要技术内容与要求
评估模块的构成
标准规定了一个评估模块应包含的核心要素。每个评估模块是一个自包含的评估单元，至少包括以下部分：
- 目标定义：说明模块适用的评估目的和范围。
- 输入信息：需要采集的软件制品和数据（如文档、代码、测试结果）。
- 评估方法与规程：详细的操作步骤、工具、度量计算方式。
- 输出结果：评估记录的格式和报告要求。
- 评价准则：将测量值转化为等级或判定（例如通过/不通过、质量等级A/B/C）。
- 所需资源：人员技能、时间、环境等。
下表展示了评估模块的典型内容框架：
| 构成要素 | 说明 | 示例 |
|---|---|---|
| 评估目标 | 明确模块针对的质量特性及场景 | 评估软件可靠性——平均无故障时间(MTBF) |
| 输入要求 | 所需数据和工件 | 运行日志、故障记录、配置文档 |
| 度量方法 | 具体的度量定义与计算公式 | MTBF = 总运行时间 ÷ 故障次数 |
| 评价准则 | 度量值的判定阈值 | 优秀：MTBF > 1000h；合格：MTBF ≥ 500h |
| 输出报告 | 结果记录格式 | 包含原始数据、度量值和等级评定 |
评估过程的结合
ISO/IEC 14598-6并不独立定义一个完整的评估流程，而是与ISO/IEC 14598-1定义的通用评估过程（建立评估需求、规定评估、设计评估、执行评估、以及评估结论）协同使用。评估模块相当于“设计评估”阶段的预制方案，评估者从中选取或组合模块，从而高效地构建评估。
重要注意事项：使用评估模块时，应确保模块中的度量方法、评价准则与待评估软件的类型和应用环境相匹配。直接套用不匹配的模块可能导致评估结果失真或误导决策。
实施/应用要点
实施步骤建议
基于标准内容，建议组织按以下步骤实施评估模块：
- 识别评估目标：确定需要评估的质量特性和子特性。
- 选择或开发评估模块：从已有模块库中挑选，或根据目标定制新模块。
- 集成评估模块：将多个模块组合成完整的评估计划，注意避免冲突和重复。
- 执行评估：按照模块规程采集数据、计算度量、应用评价准则。
- 记录和报告：以标准化格式输出结果，便于追溯和比较。
适用性与扩展
评估模块可应用于传统瀑布模型、迭代开发及DevOps环境。在新的软件工程实践中，评估模块可作为自动化质量门禁的规则基础，嵌入CI/CD流水线中，实现持续评估。
标准实施的益处：使用标准化的评估模块能够显著降低评估活动的主观变异性，提高评估结果的重复性和公正性；同时模块的复用减少了每次评估从零开始的成本，提升了团队效率。
安全关键要求：在涉及人身安全或关键任务系统的软件评估中，评估模块必须经过正式验证，且评估过程应保留完整的证据链。标准要求评估模块的输入和输出应具备明确的追踪能力。
与其他标准的关系
ISO/IEC 14598-6是ISO/IEC 14598系列标准的一部分，该系列已逐步被ISO/IEC 25000（SQuaRE——软件质量需求和评估）所取代或合并。然而，了解它与相关标准的关系有助于理解当前质量框架的演进：
- ISO/IEC 9126：定义了软件质量模型（6大特性、27个子特性），评估模块中使用的质量特性通常来源于此模型。
- ISO/IEC 14598-1~5：提供了评估过程的管理框架和不同角度的指导（如开发者视角、采购方视角等），第6部分为这些过程提供具体的评估构件。
- ISO/IEC 25040 / 25041：SQuaRE系列中的评估参考模型和评估模块要求，与ISO/IEC 14598-6基本一致，但引入了更现代化的术语和扩展。
- ISO 9001：软件组织的质量管理体系可引用评估模块作为产品验证和确认的有效手段。
尽管SQuaRE已成为主流，但ISO/IEC 14598-6:2001中关于评估模块的思路和技术内容仍具有直接指导意义，许多组织在过渡期间仍将其作为内部规范。
常见问题FAQ
问：评估模块是否可以由组织自行定制？
答：可以。标准鼓励在遵循核心结构的基础上，根据具体的软件类型、行业要求和评估目的开发或调整评估模块。但定制后的模块应经过评审和验证，以确保其符合评估目标并产生有效结果。
答：可以。标准鼓励在遵循核心结构的基础上，根据具体的软件类型、行业要求和评估目的开发或调整评估模块。但定制后的模块应经过评审和验证，以确保其符合评估目标并产生有效结果。
问：评估模块与测试用例有什么区别？
答：评估模块是更上层的评估构件，它包含了从测量到评价的完整方案，而测试用例仅是被测系统输入输出的具体实例。评估模块可以包含一组测试用例作为数据采集手段，但它还定义了度量计算、评价准则和报告要求。
答：评估模块是更上层的评估构件，它包含了从测量到评价的完整方案，而测试用例仅是被测系统输入输出的具体实例。评估模块可以包含一组测试用例作为数据采集手段，但它还定义了度量计算、评价准则和报告要求。
问：本标准是否适用于敏捷开发环境？
答：适用。评估模块的粒度可以调整，例如针对每个迭代交付的内容，选取小规模的模块（如代码复杂度和覆盖率模块）进行快速反馈。标准强调的模块复用和一致性在频繁迭代中反而更有优势。
答：适用。评估模块的粒度可以调整，例如针对每个迭代交付的内容，选取小规模的模块（如代码复杂度和覆盖率模块）进行快速反馈。标准强调的模块复用和一致性在频繁迭代中反而更有优势。
问：ISO/IEC 14598-6在2026年还有效吗？
答：作为正式国际标准，其技术内容在许多领域仍被引用。实际应用时，建议同时参考更新的ISO/IEC 25000系列以获取最佳实践，但本标准的模块化思想依然是质量评估的基础。
答：作为正式国际标准，其技术内容在许多领域仍被引用。实际应用时，建议同时参考更新的ISO/IEC 25000系列以获取最佳实践，但本标准的模块化思想依然是质量评估的基础。
