備案號:24614-2009DB北京市地方標準DB11/T384.15—2009圖像信息管理系統技術規范第15部分:軟件質量評價方法TechnicaIspecificationforimageinformationmanagementsystempart15:SoftwareqUaIityevaIUationmethods2009-02-06發布2009-05-01實施北京市質量技術監督局發布 III 2規范性引用文件 4質量模型 34.1質量模型的定義 34.2質量模型的使用 20 20 20 20 20 20 20 20 20附錄A(資料性附錄)評價模塊的實例 功能性.....................................................................................21A.1功能性的子特性的測量方法 21A.2功能性的測量方法 21A.3測量結果的解釋 22——第1部分:總體平臺結構;——第2部分:視頻格式與編碼;——第3部分:通信控制協議;——第4部分:傳輸網絡;——第5部分:圖像質量要求與評價方法;——第6部分:圖像存儲與回放要求;——第7部分:工程要求與驗收;——第8部分:危險場所的施工與驗收;——第9部分:圖像資源及系統設備編碼與管理;——第10部分:圖像采集點設置要求;——第11部分:控制權限分類與管理;——第12部分:圖像采集區域標志的設計與設置;——第13部分:圖像信息存儲系統;——第14部分:手持移動終端聯接技術要求;——第15部分:軟件質量評價方法;——第16部分:視頻圖像字符疊加要求;——第17部分:運行維護要求;——第18部分:系統平臺技術要求。根據《北京市人民政府關于加強圖像信息管理系統建設工作的意見》(京政發[2006]17號)文件精神,以本市應急指揮部門目前使用的圖像信息管理系統為基礎,并考慮數字圖像信息系統建設的實際需圖像信息管理系統軟件的驗收測試由獨立于軟件開發的第第15部分:軟件質量評價方法本部分規定了圖像信息管理系統軟件及接口軟件等的質量模型,對軟件的質量特性、子特性、屬性以及相應的度量方法進行了詳細描述,對軟件產品描述和用戶文檔提出了明確要求。(1)根據質量模型,需求方確定圖像信息管理系統軟件質量需求和驗收準則;(2)根據需求方提出的質量需求,供應方結合質量模型,編制圖像信息管理系統軟件需求規格案、測試計劃,設計測試用例,完成對軟件產品的評價。下列文件中的條款通過本部分的引用而成為本部分的條款。凡是注日期的引用文件,其隨后所有的修改單(不包括勘誤的內容)或修訂版均不適用于本部分,然而,鼓勵根據本部分達成協議的各方研究是否可使用這些文件的最新版本。凡是不注日期的引用文件,其最新版本適用于本部分。GB/T16260—2006軟件工程產品質量GB/T17544—1998信息技術軟件包質量要求和測試GB/T18905—2002軟件工程產品評價GB2312—1980信息交換用漢字編碼字符集GB13000.1—1993信息技術通用多八位編碼字符集(UCS)第一部分:體系結構與基本多文種GB18030—2000信息技術信息交換用漢字編碼字符集基DB11/T384.3圖像信息管理系統技術規范第3部分:通訊協議控制DB11/T384.6圖像信息管理系統技術規范第6部分:圖像存儲與回放DB11/T384.7圖像信息管理系統技術規范第7部分:工程要求與驗收2指定交付給用戶的軟件實體,包括一套完整的計算機程序、過程以及有關的文檔和數據。在軟件生存周期過程中執行開發活動(包括需求分析、設計、測試直至驗收)的組織。同需方簽訂合同,并按合同的規定提供系統、軟件產品或軟件服務的組織。軟件質量特性softwarequaIitychara需求得到滿足的程度,由一組質量特性的特定值來表示。軟件質量度量softwarequaIi產品描述productdescri陳述應用軟件性質的文檔,其主要目的是幫助潛在的購買者在購買前對產品進行適用性評價。為最終用戶提供系統指令方面的信息的一套文檔,如用戶手冊。3陳述系統或系統部件(如軟件配置項)的需求的規格說明,通常包括功能需求、性能需求、接口需求、準確性容錯性準確性容錯性穩定性共存性性功能性指軟件在指定條件下使用時,軟件產品提供滿足明確和隱含需求的功能的能力。功能性合性、準確性、互操作性、保密安全性以及功能性的依從性圖像信息管理系統的需求規格說明、用戶手冊和軟件系統描述及其實現,至少涵蓋DB11/T384系列384.3-2009中6和DB11/T384.7-204功能實現的充X=1—A/BA=檢測中發現有問題的功能數B=檢測的功能總數檢測的功能總數為需求規格1,越接近1.0,越充分。功能實現的完X=1—A/BA=檢測中發現缺少的功能數B=在需求規格說明中規定的功能總數檢測中發現缺少的功能數為軟件系統實現功能與需求規格說明中規定功能總數的差值。0≤X≤1,越接近1.0,越功能實現的覆需求規格說明中規定的X=1—A/BA=檢測中發現有問題的或缺B=在需求規格說明中規定的0≤X≤1,越接近1.0,越好圖像信息管理系統軟件應準確實現DB11/T384系列標準中規定的,有關需要使用軟件系統來實現的功能,同時還應準確實現需求規格說明、用戶手冊和軟件系統描述中所明示的功能。實際的與預期的結果的X=1-A/BA=用戶得到結果與預期不一B=實際檢測的用例總數預期的結果可以在需求規格期望中標識。0≤X≤1,越接X=1-A/BA=用戶得到的不精確計算的B=實際檢測中計算的總次數操作規程的一實際操作規程與文檔化X=1-A/BA=用戶實際操作規程與說明B=檢測用例總數54.1.1.3互操作性基于數據格式的數據可交換性換接口功能實現的正確X=A/BA=能成功地與其他軟件或系統進行B=要交換的數據格式總數0≤X≤1,基于用戶操作的數據可交換性X=A/BA=用戶成功地與其他軟件或系統交B=用戶企圖交換數據的總次數0≤X≤1,4.1.1.4安全保密性圖像信息管理系統軟件應符合GB/T20271-2006信息安全技術信息系統通用安全技術要求和訪問的可審核性用戶對系統和數據的訪X=A/BA=在數據庫中記錄的訪問次數B=在檢測過程中的實際訪問對系統和數據的訪問可包括訪問的可控制性不同用戶訪問系統和數X=A/BA=檢測出的非法操作類型數B=規格說明中非法操作的類防止非法操作,如非授權的創建、刪除或修改程序等操作,0≤X≤1,越接近1.0越好。6訪問者身份的訪問者身份識別的有效X=A/BA=有效實現的識別方法數B=規格說明中要求實現的方卡、指紋識別等,0≤X≤1,軟件產品遵循與功能性相關的標準、約定或法圖像信息管理系統軟件應符合DB11/T384系列標準中規定的,有關需要軟件系統功能應遵循的法功能性的依從性產品的功能遵循所實施A=在測試中還未實現規定的B=規定的功能性的依從性項0≤X≤1,越接近1.0越好。在指定條件下使用時,軟件產品維持規定的性能級別的能力。可靠性由成熟性、容錯性、易恢復性7在一定的試驗周期內出X=A/BA=檢測到的故障數目B=運行時間或測試用例數X=A/BA=已經排除的故障數B=實際檢測到的故障總數0≤X≤1,越接近1.0越好因失效的平均間軟件在運行中失敗的頻率X=T/AT=相繼發生失效之間的時間A=實際檢測出的失效總數注意失效發生之間的時間間0<X,越長越好,因為期望失在軟件出現故障或者違反指定接口的情況下,軟件產品維持規定理系統軟件的避免死機能力不低于99%,避免失效能力不低于95%,抵御避免由于軟件產品而引起整個運行環境死機X=1-A/BA=死機發生的次數B=軟件失效的數目死機意味著在系統重新啟動停,或對系統失去控制,系統避免關鍵性的或嚴重的X=A/BA=避免關鍵和嚴重失效發生B=執行的故障模式的測試用可根據失效的影響程度進行抵御誤操作能力有多少種功能具有抵御X=A/BA=抵御危急和嚴重失效發生B=執行的誤操作模式的測試錯誤的輸入數據序列,錯誤的接近1.0越好,以避免更多的8在失效發生的情況下,軟件產品重建規定的性能級別并恢復受直接影響的數年中的平均宕機時間不大于30分鐘;可重新啟動性和易恢復性符合用戶需求。在規定的時間周期內系X=A/BA=用戶試圖使用軟件時能成B=觀察期間用戶試圖使用該在類似于生產環境的特定時間周期內執行所有的用戶操出現失效時系統逐步啟X=T/NT=總的宕機時間N=所觀察到的中斷次數測量在特定的試驗周期內每在要求的時間內系統能重新啟動為用戶提供服X=A/BA=在測試或用戶操作期間符合時間要求的重新啟動次數B=重新啟動的總次數對系統在要求的時間內重新啟動并為用戶提供服務的次周期內系統中斷后重新啟動軟件產品在異常情況下或需要時自身的恢復能力X=A/BA=成功完成恢復的用例數B=每個需求要測試的恢復用樣產品更能在一定的用例中9可靠性的依從性遵循與產品的可靠性適X=1-A/BA=在測試中規定的可靠性的依從性還未完全實現的項數B=規定的可靠性的依從性項性、易操作性、語言支持特性和易用性的依產品描述的完整和易理X=A/BA=被理解的功能(或功能的類型)數B=功能(或功能的類型)總數表明用戶在閱讀產品描述后理解產品能力的程功能的易理解性用戶通過界面或菜單理X=A/BA=目的能被用戶正確理解的界面B=界面上可用的功能總數輸入輸出的易用戶對輸入輸出的理解X=A/BA=用戶成功理解的輸入和輸出數B=從界面上能得到的輸入和輸出表明用戶能否理解輸入據的含義。0≤X≤1,越功能學習的難用戶學習使用一項功能T=學習正確使用一項功能要用學習正確使用一項功能的用戶文檔和幫助機制的有效性用戶在閱讀用戶文檔或使用幫助系統后能正確地完成任務或使用功能X=A/BA=在訪問在線幫助系統和/或文檔后能成功完成的任務數B=測試任務的總量的完整性以及兩者結合的完幫助的可訪問性用戶需要時定位找到幫X=A/BA=正確定位找到的在線幫助B=要測試的任務總數審查在線幫助。0≤X≤1,越使用中錯誤的可糾用戶糾正任務中的錯誤或重新執行任務的難易X=A/BA=用戶成功糾正其錯誤操作的次數B=試圖糾正的錯誤操作的總數包括修復操作錯誤或使用中默認值的可軟件默認值機制的可用X=1-A/BA=在短時間內用戶未能建立或選擇參數B=用戶試圖建立或選擇參數值的總次數觀察運行軟件的用戶息的可理用戶能否容易理解系統動作之前是否有任何引X=A/TA=由于缺乏對消息的理解,導致用戶長T=用戶的操作時間包括自解釋的出錯信對指定語言的支易用性的依從性遵循產品的易用性適用X=1-A/BA=在測試期間規定的易用性的依從性項還未實現的數目B=規定的易用性的依從性項的總數用戶從發出請求到得到T=獲得結果的時間—完成命響應時間包括處理時間和傳輸時間。0<T,越快越好。針對特定的系統資源和一定數量的并發任務,用戶從發出請求到得到答A=測量為完成所選擇的操作B=所需要的平均響應時間最大負載情況下的響應時間比針對特定的系統資源,在系統處于最大負載的情A=在檢測中最長的響應時間B=所需要的最大響應時間最大負載指在保證系統正常運行的情況下,CPU、內存、并發數量等要素的極限值。系統在指定時間內成功X=A/TA=完成的任務個數T=觀察的時間周期任務指完成一個特定的業務邏輯的全過程。0<X,越大越好針對特定的系統資源,在系統處于最大負載的情X=A/BA=在檢測期間工作任務的最B=所需要的最大吞吐量在規定條件下,軟件產品執行其功能時,使用合適的資源數量和類別的能力。I/0設備利用率系統完成特定任務時,X=A/BA=占用I/0設備的時間B=在設計時規定占用I/0設檢查I/0設備的利用是否合針對特定的系統資源,在系統處于最大負載的情況下,系統執行任務時,X=A/BA=檢測中I/0消息的最大次數B=要求的I/0最大的消息數系統完成特定的任務時,在保證系統正常運行的軟件完成特定的任務后,系統完成特定任務的過程中,處理器的利用情況處理器負載極限在保證系統正常運行的在完成特定任務的過程中,網絡發送和接收的速率網絡傳輸負載在保證系統正常運行的產品的效率遵循適用的X=1-A/BA=在測試期間規定的效率的B=規定在效率上有依從性要可維護性指軟件產品可被修改的能力。修改可能包括修正、改進或軟件對環境、需求和功能規格說明變化的適應。維護性由易分析性、易改變性、穩定性和維護性的依從審核追蹤的能力用戶和維護者識別引起X=A/BA=在運行中實際記錄到的數B=計劃在運行中要記錄的足觀察試圖解決失效的用戶或維護者的表現。0≤X≤1,越診斷功能支持度在支持原因分析方面診X=A/BA=維護者能(利用診斷功能)診斷并理解因果關系的失效數B=登記的失效總數用戶能否標識引起失效的是找到失效原因所花費的X=sum(T)/NT=找到失效原因的時間N=失效數用戶能否有效地分析失效的參數化變更能力通過改變參數來解決問X=1-A/BA=維護者未能用參數改變軟B=維護者企圖用參數改變軟描述用戶或維護者能否容易軟件變更控制軟件版本變更的可控程X=A/BA=實際記錄在工作日志上的B=計劃在工作日志上記錄的反映用戶能否容易地標識修訂過的版本。0≤X≤1,越接X=A/BA=在特定的期限內通過改變解決失效后再出現的失效數B=解決的失效數關注在改變之后受其影響而圖像信息管理系統軟件應實現DB11/T384系列標準中規定的,以及用戶需求文檔中,有可維護性的依產品的維護性遵循適用度X=1-A/BA=在測試期間規定的可維護性的依從性還未實施的項數B=規定的維護性的依從性的項目總數0≤X≤1,越接近1.0則依從可移植性指軟件產品從一種環境遷移到另外一種環境的能力。可移植性由適應性、易安裝性、共硬件環境適應性軟件功能對硬件環境的X=1—A/BA=在結合硬件環境進行運行測試時未能完成任務或不足以使任務滿足適當級別的運B=進行測試的功能總數軟件系統是否有足夠的能力≤1,越大越好。對系統軟件環絡軟件及合作應用軟件X=1—A/BA=在結合操作系統軟件或并行應用軟件進行運行測試期間未能完成任務或不足以使任務滿足適當級別的運行功B=進行測試的功能總數組織環境適應性涉及用戶組件的環境適應性涉及系統技術運行環境。0≤X≤1,越大注:屬性“硬件環境適應性”的應用場景經常是,當一套軟件系統被安裝到不同的硬件環境中,檢查該屬性“對系統軟件環境的適應”的應用場景是,當一套軟件從一種操作系統移植到另一種新的操作系統環境下時,度量該軟件能否在新的操作系統中正常運行,其網絡,聲卡等是否能夠正常運行。用戶根據自己的意愿成功改變安裝選項的難易X=A/BA=用戶成功地改變安裝操作B=用戶試圖改變安裝操作的描述用戶或維護者能否容易重新安裝難易度在安裝操作中,用戶重新X=1-A/BA=在安裝操作中,用戶試圖重新安裝而遭到失敗的次數B=用戶試圖重新安裝的總次數描述用戶或維護者能否容易用戶成功卸載軟件的難X=A/BA=用戶成功地進行卸載操作B=用戶試圖進行卸載操作的描述軟件能否完全卸載,充分在與其他軟件共同運行X=A/TA=在與其他軟件共同運行T=與其他軟件共同運行的時間其它軟件指評價過的或用戶圖像信息