基于度量驱动的测试质量控制方法与实践

二、系统应用效果

        中国银行测试中心从2010年持续开展测试质量过程监控与测试质量后评价工作以来，先后参与了蓝图1.0、2.0、3.0几十个测试项目的过程质量监控，并形成质量监控和后评价报告，发现测试过程质量问题并提出改进建议；另外，通过测试质量后评价收集用户对投产产品反馈优化需求和问题，提出重点问题并推动问题解决。

        测试中心通过对蓝图各批次投产问题的跟踪和测试质量后评价，分析投产后出现的质量问题，关注用户对测试产品的使用感受，并将用户质量满意度评价纳入到测试度量指标体系中。同时，相关问题反馈到科技体系相关部门，推动了中国银行IT系统产品整体质量提升。

        1．测试过程质量监控效果
        中国银行测试中心于2010年起将测试质量过程监控应用于总行用户验收测试和分行用户验收测试，提升了测试过程的规范程度，从而推动了测试过程质量。测试项目监控初期仅针对重点项目，目前监控范围已扩大到整个测试中心项目，覆盖范围从40％提高到90％；进入监控范围的测试项目，初期合格率(指示为绿灯)仅占监控项目的70％，目前合格项目已达到95％；通过测试质量量化评估，发现测试项目存在的问题，推动测试质量提升，经统计在蓝图UAT测试中，96.5％缺陷解决在UAT阶段，即缺陷排除率已达到96％。

        2．测试质量后评价效果
        测试中心于2010年起开始进行测试质量后评价方法子模型的创建和实践工作。

        投产缺陷率呈下降趋势。各批次投产期间缺陷率(投产缺陷数量/投产周期)明显下降，测试质量有显著提高，有效保障了投产后产品的质量。通过测试质量后评价对BGL账户问题的重点报告,推动了BGL监控系统项目快速立项和投产实施,解决了蓝图系统用户使用过程中的一大难题;综合开户问题、打印问题、易用性问题等在每次后评价报告中进行重点反映，推动了中国银行科技体系整体蓝图软件产品质量提升。完善了测试项目质量评估体系，将投产后缺陷密度和用户满意度作为测试项目质量评估量化指标，完善了测试质量评价机制，提高了测试人员质量意识。

        投产后重点优化问题得到有效解决。通过测试质量后评价对BGL帐户问题的重点报告，推动了BGL监控系统项目快速立项和投产实施，解决了蓝图系统用户使用过程中的难题；综合开户问题、打印问题、易用性问题等在每次后评价报告中进行重点反映，推动了中国银行科技体系整体蓝图软件产品质量提升。

        完善了测试项目质量评估体系。将投产后缺陷密度和用户满意度作为测试项目质量评估量化指标，完善了测试质量评价机制，提高了测试人员质量意识。

        3．测试质量度量效果
        测试质量控制方法模型遵循了全面质量管理中“用数据说话”的思想，在测试质量过程监控和测试质量后评价过程中贯穿了度量管理方法，构建了测试质量度量子模型。

        有了度量，才能更好地管理。通过设置度量目标，建立为实现测试质量目标而提出的问题集，对问题解决维度进行分解之后建立指示器集，并围绕指示器建立具体度量元，最终形成完整的测试质量度量指标体系。

        测试质量度量自2010年起与测试质量日常监控和测试质量后评价同步启动，应用于中国银行各批次验收测试过程中，体现在测试质量监控和后评价报告中，实现了测试质量量化管理和评估。通过采集测试项目基础质量数据、测试质量后评价数据以及测试项目基础管理数据，并进行相关数据的分析和评价，找到了测试过程中的质量和管理短板，推动了测试过程的持续改进，大大提升了测试质量。

        4．总体效果
        该项目的实施促进了UAT测试管理流程体系有效实施，保障了测试项目过程合规性，推动测试流程体系持续改进和优化；通过度量驱动的测试质量控制，真实客观地报告了测试项目质量状况，促进了人员绩效的提高；通过对UAT测试质量量化评估，提高了测试人员质量风险意识，促进了测试质量提升；强有力保证了IT蓝图大型项目群的测试质量及流程合规，防范测试质量风险。

        中国银行基于度量驱动的测试质量控制方法模型应用实现了对IT蓝图系统整个测试生命周期的健康检查和质量控制，推动了IT蓝图系统测试过程质量和测试产品质量的不断提升，起到了重要的质量保证和质量监督作用。

相关链接：中国银行基于度量驱动的测试质量控制方法与实践专家鉴定意见摘要

        中国人民银行科技司于2012年6月5日在北京主持召开了“中国银行基于度量驱动的测试质量控制方法与实践，项目成果评审会。专家鉴定委员会经讨论认为：

        1．该项目从测试质量过程监控、后评价以及度量多层面构建了测试质量控制方法体系，提出测试质量控制方法模型、质量指标标准和量化评估方法，降低了测试风险，提升了测试管理水平。

        2. 该项目引入先进的质量管理理论、度量方法和质量控制技术，建立了基于度量驱动的测试质量控制方法，包含测试质量控制模型、度量体系、质量评估和后评价四个方面．覆盖了测试全生命周期，实现了测试质量的闭环控制。

        3. 该项目成果已在中国银行的测试项目中得到广泛应用，将测试质量过程监控和测试结果后评价相结合，满足了中国银行项目测试管理的要求。

        专家评审组认为：该项目理念先进、设计合理，模型实用性强，在中国银行应用测试项目推广使用以来，成效显著达到国内同业领先水平。

        （该项目荣获2012年“银行科技发展奖”三等奖）

（文章来源：金融电子化）
 

首页 上一页 1 2

扫码即可手机
阅读转发此文