ICS35.08021CCSL7721遼 寧 省 地 方 標 準DB21/T3759—2023應用系統工程關鍵性評價指標Applicationsystemengineering—Keyevaluationindicators20232023063020230730遼寧省市場監督管理局發布DB21/T3759DB21/T3759—2023DB21/T3759DB21/T3759—2023目 次前言 II范圍 1規范性引用文件 1術語和定義 1縮略語 3關鍵指標綜述 4數據生產能力 4數據生產能力計算 4年數據生產能力計算 4日數據生產能力計算 4最大生產能力計算 4并發能力計算 5功能規模 5質量評價指標 5質量測度元素 5評價指標分類 5數據集規模 6經濟指標 7年數據生產能力經濟指標 7功能點綜合單價指標 7期望使用年限 7附錄A（資料性）應用軟件質量指標描述 8附錄B（資料性）數據質量指標描述 11附錄C（資料性）使用質量指標 13參考文獻 15I前 言本文件按照GB/T1.1—2020《標準化工作導則第1部分：標準化文件的結構和起草規則》的規定起草。請注意本文件的某些內容可能涉及專利。本文件的發布機構不承擔識別專利的責任。本文件由遼寧省工業和信息化廳提出并歸口。本文件歸口單位通訊地址：沈陽市北陵大街45-2號，聯系電話：024-869133840411-84755515II本文件起草單位通訊地址：大連市沙河口區星河二街25號凱泰銘座A座38樓6號，聯系電話I應用系統工程關鍵性評價指標范圍本文件適用于大型、中型應用系統工程的新建、擴建和改建。規范性引用文件（包括所有的修改單適用于本文件。GB/T18391.1信息技術元數據注冊系統（MDR）第1部分：框架GB/T25000.1（SQuaRE）1部分：SQuaRE指南GB/T25000.10（SQuaRE）10量模型GB/T25000.23SQuaRE23質量測量GB/T25000.24（SQuaRE）GB/T25000.23SQuaRE23質量測量GB/T25000.24（SQuaRE）24軟件產品分類GB/T50875工程造價術語標準3術語和定義GB/T36475、GB/T50875及GB/T25000系列界定的以及下列術語和定義適用于本文件。3.1應用系統工程applicationsystemengineering3.2應用軟件系統customizedsoftwaresystems針對特定行業應用的定制軟件。3.3架構architecture系統的基本結構，包括組件、組件之間的相互關系以及設計和演變的管理原則。3.4數據架構dataarchitecture13.5運行環境runningenvironment應用軟件系統運行所需要的設備（硬件、軟件及物資）及物理環境。3.6作業job由用戶定義的、訪問并更新信息項的工作單元。通常情況下，一個作業由多個功能組成。[來源：GB/T25000.23—2019，4.3，有修改]3.7記錄record一個單元化的相關信息項的集合。3.8主要作業/基準作業mainjobs/benchmarkjob記錄數量最大或最典型或最具代表性的作業，每個應用系統應確定唯一主要作業作為基準作業。其他作業可以按換算系數換算為主要作業。本文件中主要作業和基準作業具有等同意思。3.9生產production數據處理過程和結果，包括數據的收集、存儲、使用、加工、傳輸、提供、公開等。3.10數據生產能力dataproductioncapacity一段時間內，在一定的用戶規模下，應用系統可以生產的作業記錄數量。3.11年數據生產能力annualdataproductioncapacity在設計用戶數量條件下，應用系統每年生產的主要作業記錄數量。3.12日數據生產能力dailydataproductioncapacity在設計用戶數量條件下，應用系統每日生產的主要作業記錄數量。3.13最大生產能力maximumproductioncapacityofapplicationsystem在單位時間內，應用系統出現作業失效之前，或在單位時間內，作業完成時間超過用戶最長可忍耐3.14并發能力concurrencycapability在設計用戶數量條件下，應用系統每秒生產的主要作業記錄數量。3.15最小連續生產時間minimumcontinuousproductiontime最大生產能力情況下的連續生產時間稱為最小連續生產時間。3.16用戶user與應用軟件系統交互的個體。23.17功能點functionalpoint由應用軟件系統向用戶提供，使其用以完成規定動作的活動。每個功能須在設計文件中描述并須同數據項/信息項對應。3.18功能規模functionpointsize應用軟件系統功能點總數量。3.19應用系統最大存儲能力maximumstoragecapacityofapplicationsystem在應用系統出現作業失效或作業完成時間超過用戶最長可忍耐時間之前，應用系統存儲的記錄數量或文件容量。3.20數據集dataset3.21數據集記錄datasetrecord由數據集元數據描述的、完整的、可核驗的記錄。3.22數據集規模datasetscale以每年產生的數據集記錄數量來衡量應用系統數據生產情況。該指標反映應用系統的運行情況。3.23期望使用年限expectedservicelife應用系統的預計運行年限，通常情況下指應用系統投入使用后至應用軟件出現必要性不足狀況時的預計年限。3.24年數據生產能力經濟指標economicindicatorsofannualdataproductioncapacity3.25功能點概算指標functionpointindexmethodofbudgetestimate3.26法規依從性regulatorycompliance質量測度元素必須符合《電子簽名法》、《網絡安全法》及《數據安全法》、《個人信息保護法》等法律法規要求和國家強制性標準規范要求。4縮略語下列縮略語適用于本文件。DCI：數據綜合指標（DataintegratedIndex）RCI：運行期綜合指數值（RuntimeCompositeIndex）3IFPUG：國際功能點用戶組織(InternationalFunctionPointUserGroup)COSMICCommonSoftwareMeasurementInternationalConsortium)NESMA:荷蘭軟件度量協會（NEtherlandSoftwareMeasurementAssociation）FiSMAFinnishSoftwareMeasurementAssociation)關鍵指標綜述數據生產能力數據生產能力計算n公式如下：nPiK/6i1式中：TTKi——換算系數，基準作業的換算系數為1，其他作業換算系數應經計算或測試確定；n——應用系統數量。年數據生產能力計算公式如下：PyPtd式中：P/日數據生產能力計算公式如下：PdPt式中：Pd——日數據生產能力，單位為百萬條/小時；P——每小時應用系統生產能力；t——每個工作日有效工作小時數。最大生產能力計算4公式如下：式中：

nnm(n/0i1P——P——第n——測試次數，一般情況下最少應測試3次。6.5并發能力計算公式如下：式中：Pc——并發能力，單位為百萬條/秒；P——每小時應用系統生產能力。功能規模

PcP/3600FFi1n式中：F——功能規模，單位為功能點；FAi——第i個應用軟件系統或數據處理系統功能點數量；n——應用軟件系統和數據處理系統總數量。注：功能點的度量方法可參考IFPUG、COSMIC、NESMA和FiSMA方法。8質量評價指標質量測度元素應用系統工程質量包括應用軟件質量、數據質量和使用質量。應用軟件質量分為8個特性，共有94個測度元素，詳見附錄A；數據質量分為15個特性，共有63個測度元素，詳見附錄B；使用質量分為5個特性，共有36個測度元素，詳見附錄C。評價指標分類合格應用系統合格應用系統，應滿足如下要求：投入使用的應用系統應達到的基本條件，滿足短期、初次使用要求；測度指標要求：投入使用前可以比較準確測量的，以及能夠反映生產能力評價指標的元素進行測量。包括：5A；B；C。普通應用系統普通應用系統，應滿足如下要求：適用于業務比較穩定，具有中長期使用要求的應用系統；測度指標要求：在合格應用系統基礎上，應用軟件的易用性、可靠性和維護性得到提升；數據質量得到全面提升；使用質量的滿意度和抗風險能力得到提升。關鍵應用系統關鍵應用系統，應滿足如下要求：適用于用戶群體復雜、用戶量增長較快的應用系統；測度指標要求：在普通應用系統基礎上，應用軟件質量的易用性、可靠性和維護性進一步優化；數據質量的準確性、效率、可理解性基本得到滿足；使用質量基本得到滿足。通用應用系統通用應用系統，應達滿足如下要求：通用應用系統，應達滿足如下要求：適用于具有較好前景，具有推廣價值的應用系統；測度指標要求：在關鍵應用系統基礎上，應用軟件質量的兼容性、易用性、可移植性得到提升；數據質量的可訪問性、可移植性得到提升；使用質量的周境覆蓋得到提升。就緒可用應用系統就緒可用應用系統，應達滿足如下要求：適用于應用領域不斷拓廣,其正確的運行對于業務、安全或個人往往至關重要的應用系統；測度指標要求：在通用應用系統基礎上，應用軟件質量、數據質量和使用質量得到全面滿足，從而能夠在不同使用周境中持續穩定運行。9數據集規模指標能夠用于應用系統的績效考核，促進歷史記錄的規范化保存，促進形成數據資產。公示如下：Dii1n式中：6PD——數據集記錄數量，單位為百萬條；DAi——第i個數據集的記錄數量，單位為百萬條；n——按年度統計的應用系統數據集數量。經濟指標年數據生產能力經濟指標公式如下：式中：

II/yDCI——年數據生產能力經濟指標值，以萬元/百萬條為單位；TI——應用系統工程費，以萬元人民幣為單位；P功能點綜合單價指標公式如下：式中：

AFFAF——應用軟件功能規模指標，以萬元/功能點為單位；AF——應用軟件功能規模指標，以萬元/功能點為單位；F——應用軟件功能點數量，數量為整數且不得出現小數；TI——應用軟件系統開發費，以萬元人民幣為單位。11期望使用年限年限不足一年的按一年計算；超過一年不足五年的按實際年限計算；超過五年的，按五的倍數計算。量評價指標，約束設備選型和工程造價指標等設計內容。7附錄 A（資料性）應用軟件質量指標描述應用軟件質量指標描述參見表A.1。表A.1應用軟件質量指標序號特性子特性測度元素法規依從性1級2/3級4/5級內/外1功能性功能完備性功能覆蓋率√√√內外2功能正確性功能正確性√√√內外3功能適合性使用目標的功能適合性√√√內外4系統的功能適合性√√√內外5功能性的依從性功能性的依從性√內外6性能效率時間特性平均響應時間√√√內外7響應時間的充分性√√√內外8平均周轉時間√√√內外9周轉時間充分性√√√內外10平均吞吐量√√√內外11資源利用性處理器平均占用率√√√外12內存平均占用率√√√外13I/O設備平均占用率√√√外14帶寬占用率√√√外15容量事務處理容量√√√內外16用戶訪問量√√√內外17用戶訪問增長的充分性√√√外18性能效率的依從性性能效率的依從性√√√內外19兼容性共存性與其他產品的共存性√外20互操作性數據格式可交換性√內外21數據交換協議充分性√內外22外部接口充分性√內外23兼容性的依從性兼容性的依從性√內外24易用性可辨識性描述的完整性√√√內外25演示覆蓋率√內外26入口點的自描述性√內外27易學性用戶指導完整性√√√內外28輸入字段的默認值√√√內外29差錯信息的易理解性√√內外30用戶界面的自解釋性√√內外88表A.1應用軟件質量指標（續）序號特性子特性測度元素法規依從性1級2/3級4/5級內/外31易用性易操作性操作一致性√√√內外32消息的明確性√√內外33功能的易定制性√內外34用戶界面的易定制性√內外35監視能力√內外36撤銷操作能力√√內外37信息分類的易理解性√√內外38外觀一致性√內外39輸入設備的支持性√內外40用戶差錯防御性抵御誤操作√√√內外41用戶輸入差錯糾正率√√√內外42用戶差錯易恢復性√√內外43用戶界面舒適性用戶界面外觀舒適性√內外44易訪問性特殊群體的易訪問性√√內外45支持的語種充分性√內外46易用性的依從性易用性的依從性√√√內外47可靠性成熟性故障修復率√√√內外48平均失效間隔時間(MTBF)√√外49周期失效率√√外50測試覆蓋率√√√外51可用性系統可用性√√外52平均宕機時間√√外53容錯性避免失效率√√√外54組件的冗余度√√內外55平均故障通告時間√外56易恢復性平均恢復時間√√外57數據備份完整性√√√內外58可靠性的依從性可靠性的依從性√√√內外59信息安全性保密性訪問控制性√內外60數據加密正確性√內外61加密算法的強度√內外62完整性數據完整性√內外63內部數據抗訛誤性√內外64緩沖區溢出防止率√內65抗抵賴性數字簽名使用率√內外66可核查性用戶審計跟蹤的完整性√內外67系統日志保留滿足度√內外99表A.1應用軟件質量指標（續）序號特性子特性測度元素法規依從性1級2/3級4/5級內/外68真實性鑒別機制的充分性√內外69鑒別規則的符合性√內外70信息安全的依從性信息安全的依從性√內外71維護性模塊化組件間的耦合度√√√內外72圈復雜度的充分性√內73可重用性資產的可重用性√√√內外74編碼規則符合性√√內75易分析性系統日志完整性√內外76診斷功能有效性√√內外77診斷功能充分性√√內外78易修改性修改的效率√√內外79修改的正確性√√內外80修改的能力√內外81易測試性測試功能的完整性√√內外82測試獨立性√內外83測試的重啟動性√內外84維護性的依從性維護性的依從性√√內外85可移植性適應性硬件環境的適應性√外86系統軟件環境的適應性√外87運營環境的適應性√外88易安裝性安裝的時間效率√外89安裝的靈活性√外90易替換性使用相似性√內外91產品質量等價性√內外92功能的包容性√外93數據復用/導入能力√外94可移植性的依從性可移植性的依從性√內外合計9414312029注1：“內”指測度元素依賴應用軟件自身，“外”指測度元素依賴運行環境。注1：“內”指測度元素依賴應用軟件自身，“外”指測度元素依賴運行環境。注2：表中1級對應合格應用系統，2級對應普通應用系統，3級對應關鍵應用系統，4級對應通用應用系統，5級對應就緒可用應用系統。10附錄 B（資料性）數據質量指標描述數據質量指標描述參見表B.1。表B.1數據質量指標序號特性子特性屬性名稱法規依從性1級2/3級4/5級1準確性測度“固有的”視點語法數據準確性√√√2語義數據準確性√√√3數據精度保證√√4數據集不準確性風險√√5數據模型準確性√√6元數據準確性√√7數據精度范圍√√√8完備性測度“固有的”視點記錄完備性√√√9屬性完備性√√√10數據文件完備性√√√11數據值完備性√√√12數據文件中的空記錄√√√13概念數據模型完備性√√√14概念數據模型屬性完備性√√15元數據完備性√16一致性測度“固有的”視點引用完整性√√17數據格式一致性√√18數據不一致性風險√√19體系結構一致性√20數據值一致性覆蓋范圍√21語義一致性√√√22確實性測度“固有的”視點值確實性√23資源確實性√24數據字典確實性√25數據模型確實性√√26現實性測度“固有的”視點更新頻率√√27更新時效性√√28更新項要求√√√29可訪問性測度“固有的”視點用戶可訪問性√30“依賴系統的”視點設備可訪問性√31數據格式可訪問性√32依從性測度“固有的”視點值或格式的標準依從性√1111表B.1數據質量指標（續）序號特性子特性屬性名稱法規依從性1級2/3級4/5級33“依賴系統的”視點技術上的標準依從性√34保密性測度“固有的”視點加密使用√35非易損性√36效率測度“固有的”視點有效數據項格式√37可用效率√√38數據格式效率√√39數據處理效率√√√40浪費空間風險√√41冗余記錄占用的空間√√42數據更新延遲√√√43精度測度“固有的”視點數據值精度√√44“依賴系統的”視點數據格式精度√√√45可跟蹤性測度“固有的”視點數據值可跟蹤性√46“依賴系統的”視點用戶訪問可跟蹤性√47數據值可跟蹤性√48可理解性測度“固有的”視點符號可理解性√√49語義可理解性√√50主數據可理解性√√51數據值可理解性√√52“依賴系統的”視點數據模型可理解性√√√53數據表示法可理解性√√54相關主數據的可理解性√√√55可用性測度“依賴系統的”視點數據可用性比率√√√56數據可用概率√√√57體系結構元素可用性√√√58可移植性測度“依賴系統的”視點數據可移植性比率√59數據可移植性期望√60結構元素可移植性√61可恢復性測度“依賴系統的”視點數據可恢復性比率√√√62周期備份√√√63結構可恢復性√√合計639212211注1：“固有的”視點是指該測度元素依賴應用軟件功能或數據架構設計。注1：“固有的”視點是指該測度元素依賴應用軟件功能或數據架構設計。注2：“依賴系統的”視點是指該測度元素依賴數據庫管理系統或運行環境。注3：表中1級對應合格應用系統，2級對應普通應用系統，3級對應關鍵應用系統，4級對應通用應用系統，5級對應就緒可用應用系統。12附錄 C（資料性）使用質量指標參見表C.1。表C.1使用質量指標序號特性子特性屬性名稱1級2/3級4/5級1有效性有效性測度任務完成率√√√2目標實現率√√√3任務中的差錯數√√√4出錯任務率√√√5任務差錯密度√√√6效率效率測度任務用時√√√7時間效率√√√8成本效率√√√9生產性時間比√√√10非必要動作率√√√11疲勞影響√√√12滿意度滿意度測度總體滿意度√√√13有用性測度特征滿意度√√14自主使用率√√15特征利用率√√16用戶投訴率√√17具體特征用戶投訴率√√18可信性測度用戶可信性√√19（用戶體驗）愉悅性測度用戶愉悅性√√20（人體功效學）舒適性測度身體舒適性√√21抗風險經濟風險緩解性測度投資回報率√√22投資回報用時√√23業務績效√√24信息技術投資收益(率)√√25客戶服務表現√√26網站訪客客戶轉化率√√27單客收入√√28伴經濟后果差錯