中國軟件測試認證委員會ChineseSoftwareTestingQualificationsBoard軟件測試過程改進兩大主流框架TPI?NEXT與TMMi?的對比商超博（Ella)Email:2014年9月目錄I.老板的問題與解決方案II.測試過程改進的實際意義III.TPINEXTVs.TMMi在結構、評估、實施改進過程中各個方面的對比IV.TPINEXT與TMMi重要特征總結及對現(xiàn)實選型的影響目錄I.老板的問題與解決方案II.測試過程改進的實際意義III.TPINEXTVs.TMMi在結構、評估、實施改進過程中各個方面的對比IV.TPINEXT與TMMi重要特征總結及對現(xiàn)實選型的影響你是否曾被CTO/測試部門老板/質(zhì)控部門經(jīng)理等問到如下問題：和業(yè)界比，我們測試水平如何？-還行，還不錯。我們先進性、優(yōu)勢在哪里？-…我們的弱點在又在哪里？-…從哪里些方面可以進一步提高？-…測試效率如何提高？-…測試成本如何降低?-…測試交付時間如何縮短？-…多久可以拿出一個整體的改進計劃？-…并且在執(zhí)行計劃的過程中，是否看到整體改進藍圖，如何控制改進的進度，如何衡量改進的成果？-………2/2/2023I.老板的問題壓力山大！怎么回答？于是，測試/質(zhì)控部門的人開始尋找一個整體測試改進的解決方案-測試過程改進框架。它需要符合的需求包括：世界范圍內(nèi)普遍被認可基于最佳實踐的已經(jīng)廣泛被應用可以同行做對比的與軟件開發(fā)過程改進相兼容的可以被快速學習并使用的成本低的周期短的容易實踐的可靈活、自主控制改進計劃：改進范圍，改進目標，改進進度……2/2/2023I.解決方案測試過程改進框架！目錄I.老板的問題與解決方案II.測試過程改進的實際意義III.TPINEXTVs.TMMi在結構、評估、實施改進過程中各個方面的對比IV.TPINEXT與TMMi重要特征總結及對現(xiàn)實選型的影響II.測試過程改進的實際意義測試過程改進服務于企業(yè)的整體業(yè)務目標！轉化縮減在關鍵路徑上的測試執(zhí)行時間降低測試的成本縮短產(chǎn)品上市交付時間改善IT的成本有效性建立服務可持續(xù)性和可用性得到更好（IT支持的）業(yè)務投資回報創(chuàng)建敏捷應對快速變化的市場需求確保IT服務穩(wěn)定和安全

改善業(yè)務可持續(xù)性測試

轉化實現(xiàn)實現(xiàn)業(yè)務目標IT目標測試目標業(yè)務目標轉化為測試目標；測試目標支持業(yè)務目標的實現(xiàn);實現(xiàn)以業(yè)務為驅動的測試參考書籍：TPI?NEXT,BusinessDrivenTestProcessImprovement，2009，UNTPublishers測試過程改進的收益支持業(yè)務目標的實現(xiàn)、提高測試質(zhì)量、縮短測試時間、節(jié)省測試成本、吸收最佳實踐、與同行相比較、培養(yǎng)測試改進人才、與軟件過程改進相互促進、……當然還包括系統(tǒng)地、有憑有據(jù)地回答老板的問題目錄I.老板的問題與解決方案II.測試過程改進的實際意義III.TPINEXTVs.TMMi在結構、評估、實施改進過程中各個方面的對比IV.TPINEXT與TMMi重要特征總結及對現(xiàn)實選型的影響結論：需要找到適合的測試過程改進框架。如何找到？需要思考的問題是：2/2/2023如何找到適合的測試過程改進框架主流測試改進框架？特點/區(qū)別？現(xiàn)實的意義？實際需求？適合的選擇？在這里得到答案TMMiTPI（ENXT）CMMiSPICEV2M2CTPITIMTSMTOMSQR…2/2/2023業(yè)界測試過程改進框架專注于“軟件測試的”，“廣泛應用的”,“業(yè)界最為流行的”過程改進框架2/2/2023TPINEXT矩陣式結構初始階段可控階段有效階段優(yōu)化階段1利益相關人承諾

ABBCFHHKMM2參與程度

ABCEHHJLL3測試策略

AABEFFHKL4測試組織

ADDEIIJJKLL5溝通

BCCDFFJMM6匯報

ACCFGGKK7測試流程管理

AABBGHJKM8估算和計劃

BBCCGHIIKLL9度量

CCDGHHIKK10缺陷管理

AABDFFHJKLL11測試組件管理

BBDEIIJLLL12方法化實踐

CDEFHJJMM13測試人員專業(yè)性

DDEEGGIIKKM14測試用例設計

AAEFIIJKKM15測試工具

EEEFGGILMM16測試環(huán)境

CDDEGHJJLMM參考書籍：TPI?NEXT,BusinessDrivenTestProcessImprovement，2009，UNTPublishers2/2/2023L1初始階段L2已管理階段L3已定義階段L4已測量階段L5優(yōu)化階段1.測試方針與策略2.測試計劃3.測試監(jiān)督與控制4.測試設計與執(zhí)行5.測試環(huán)境1.測試組織2.測試培訓方案3.測試生命周期與集成4.非功能測試5.同行評審1.測試測量2.軟件質(zhì)量評估3.高級同行評審1.缺陷預防2.測試過程優(yōu)化3.質(zhì)量控制TMMi累增式結構參考書籍：TMMi.Framework;TMMi_Professional_v1.1x;測試過程改進的通用步驟評估準備評估認證改進計劃實施改進評估改進準備評估TPINEXTTMMi評估的目標，例如：全面了解被評估目標體的測試現(xiàn)狀評估范圍，例如：為了改進某種測試為了改進某幾個項目的測試過程為了改進某幾個產(chǎn)品線為了改進某個測試中心為了改進某些測試中心評估方法自我評估專業(yè)評估評估的目標：整體企業(yè)通過某個測試成熟度級別評估范圍：-組織級別數(shù)據(jù)方法：-自我評估-專業(yè)評估正式評估非正式評估數(shù)據(jù)準備：-準備要通過測試成熟度PAs數(shù)據(jù)123評估TPINEXTTMMi全面評估：-對全部16個關鍵域（keyareas)進行檢查評估診斷報告：對評估主體做全面診斷提出有針對性的改進建議部分評估：對目標級別所屬的過程域進行評估；例如，希望通過3級，則只對3級的三個過程域（ProcessArea)做評估評估診斷報告：僅對評估主體做目標通過成熟度級別過程域做診斷報告;正式評估，級別通過依據(jù)：目標通過級別所含所有過程域，包括所有的特殊目標和通用目標需要全部達到FullyAchieved(85%~100%).456認證TPINEXTTMMi評估方提供認可文件無單獨認證費用側重于身實縱向對比在通過正式評估(FormalAssessment)，有資質(zhì)的認證機構頒發(fā)通過某一級別的認證證書支付認證的費用非正式的評估（InformalAssessment),不提供證書行業(yè)標桿進行橫向比對(Benchmarking)789改進計劃TPINEXTTMMi改進的目標：無偏見的測試流程改進目標(non-bias)根據(jù)業(yè)務目標(BusinessGoals)及業(yè)務背景（BusinessContext)而客戶化(Customize)測試改進目標改進的范圍：-可以多元次化，見評估范圍改進的路徑（RoadMap）-階段式上升根據(jù)業(yè)務目標的不同產(chǎn)生的多元化途徑改進度量改進的目標：通過下一個成熟度級別通過本次評估的目標成熟度級別改進范圍：組強級別，見評估范圍改進的路徑(RoadMap)階段式上升改進度量1011實施改進TPINEXTTMMi改進具體順序：預先設定的改進順序,體現(xiàn)在改進簇(cluster)，（注，改進簇實現(xiàn)了不同關鍵域之前的邏輯上的依賴關系）可以減少探索/分析在不同的階段關鍵域改進相互依賴關系。某一個改進簇的數(shù)量，可以根據(jù)業(yè)務目標的要求增加或減少。改進目標調(diào)整：在改進過程中可以靈活調(diào)整目標及路徑任何階段都對可以對16個關鍵域進行持續(xù)改進改進具體順序：每一個過程域下，諸多的特殊目標（Specificgoal）之間，特殊目標與通用目標（Generalgoal)之間沒有預先定義明確的邏實施的先后依賴，關聯(lián)等邏輯關系改進目標調(diào)整：很難進行調(diào)整一旦達到某一階段，沒有必要對低級階段所包括的過程域不再要求進行持續(xù)改進1213142/2/2023TPINEXT起點業(yè)務目標1業(yè)務目標N業(yè)務目標3…業(yè)務目標2關鍵域1，3，6，8關鍵域1，5，7關鍵域5，9，2，15關鍵域3，9，16TPINEXT改進路徑的多樣TMMi起點階段4階段2階段3A~E改進簇ClustersK~M改進簇ClustersF~Z改進簇Clusters選擇1無優(yōu)先級、按邏輯順序提高的路徑

選擇2客戶化、定制化后有優(yōu)先級的路徑

2/2/2023TMMi改進路徑的單一性TMMi起點階段4階段2階段3階段4二級過程域1～5三級過程域1～5四級過程域1～3五級過程域1～3無優(yōu)先級、按邏輯順序提高的路徑

評估改進TPINEXTTMMi根據(jù)預先設置的改進度量來評估改進比較容易與IT目標、業(yè)務目標相對應根據(jù)預先設置的改進度量來評估改進152/2/2023其它相同點相同：都是世界范圍內(nèi)廣范認可的都與CMMi,SPICE相兼容，相關聯(lián)；都提供改進參考，例如，改進建議，改進例子等用來培養(yǎng)過程改進的人才…目錄I.老板的問題與解決方案II.測試過程改進的實際意義III.TPINEXTVs.TMMi在結構、評估、實施改進過程中各個方面的對比IV.TPINEXT與TMMi重要特征總結及對現(xiàn)實選型的影響2/2/2023重要特征總結+對現(xiàn)實選型的影響-適用范圍可大、可小-可定制、可客戶化（BDTPI)-側重自身縱向對比-所有過程可無間斷持續(xù)改進-改進周期可長、可短適合：各種規(guī)模，側重于自身對比改進，希望無間斷持續(xù)改進，需要或不需要定制或客戶化的企業(yè)進行改進。-認證嚴格-可定制化弱-側重業(yè)界橫向對比(B