(項目C和項目D)則維持原來的流程。
經(jīng)過各項統(tǒng)計指標比較分析,可以發(fā)現(xiàn)流程改進后的效果較為顯著。限于篇幅,本文只選取幾個指標做一說明。
3.1 客戶滿意度
從客戶滿意度調(diào)查中,可以看出流程改進后的客戶感覺效果還是有一定的提高。尤其是在Bug書寫、跟蹤上有了明顯的提高;在Bug數(shù)量質(zhì)量上客戶也表示比較滿意??傊?,數(shù)據(jù)分析表明,針對某一個特定的外包測試項目,將風險管理思想與CMMI認證體系標準有機結(jié)合,可以適當改進軟件外包測試流程,提高測試效率和測試水平,并能取得明顯的效果。
3.2 流動人員培訓后初次發(fā)現(xiàn)Bug的時間的數(shù)字表示從流動人員接受培訓開始到發(fā)現(xiàn)第一個Bug的時間間隔,單位精確到“周”。從流動人員的培訓中可以看出,雖然培訓時間一樣,但效果卻有很大的差別,采用新的流程可以縮短新來人員的適應期,更快地進入到正常的工作狀態(tài)中。由此看來,新的測試流程在人員流動率越高的情況下其優(yōu)勢越突顯。在本企業(yè)高達21%的人員流動率下,新流程的實施明確減緩了排名第一的風險“人員流動率太高”所帶來的危害。
3.3 測試用例覆蓋率
由于加入了評審程序能提高大約5%的覆蓋率(用項目A、B與項目C、D比較所得)。無論是工作效率還是測試用例覆蓋率都可以讓客戶更加滿意,同時由于測試用例覆蓋率的提高,還能引導測試人員找到更多的Bug。
3.4 Bug優(yōu)先級分布
各項指標表明,風險識別中所提到的“大量重復Bug”、“大量錯誤Bug”以及“提交Bug數(shù)量太少或者在某些時期太少”都能在新的流程下得到有效改善。而且從總體情況上來看,采用新流程的項目A和項目B在優(yōu)先級的分布上比其他兩個項目要稍好。
很明顯高優(yōu)先級的Bug比率得到了提高,風險“提交的絕大多數(shù)是無關(guān)緊要的Bug”得到了有效的控制。