1、準確度性能評價 -方法對比及偏倚評估 南充市中心醫院檢驗科 李多孚準確度性能評價準確度性能評價?原有實驗方法 （比較方法） 新實驗方法（實驗方法） 檢測系統 檢測系統 儀器 儀器 試劑盒 試劑盒 偏倚 比較、評估準確度性能評價準確度性能評價?l按正確的方法檢測。方法比較，實際上主要是檢測實驗方法相對于比較方法的系統誤差（恒定誤差、比例誤差）l按正確的標準評估。方法可否被接受? 要根椐評價實驗中的誤差結果進行歸納，作出判斷（方法學性能判斷)準確度性能評價的基本步驟準確度性能評價的基本步驟l方法內雙份數據中離群值的檢查l方法間離群值的檢查l點畫數據，線性回歸lX值合適范圍的檢驗l計算預期偏倚及其可

2、信區間l偏倚評估與允許總誤差比較 (national committee for clinical laboratory standards) NCCLS文件文件 EP9-A用患者樣品進行 方法對比及偏倚評估 1995.12批準儀器熟習階段儀器熟習階段l操作 儀器操作及維護步驟 樣品準備方法 校準和監控功能方法對比實驗方法對比實驗l 實驗樣品 -貯存：待測成份的穩定性 -來源：應從含有待測物的各種疾病的患者中收集，但不使用已知含有會干擾方法的成分的標本（如溶血） l參比方法(比較方法、X) - 具有比待評方法更好的精密度 -不受已知干擾物的干擾 -使用與待評方法相同的單位 -可能的情況下, 與

3、國家標準或參考方法的相對偏倚為已知(可溯源)方法對比實驗方法對比實驗方法對比實驗方法對比實驗l 測定范圍 -在具有臨床意義(醫學決定水平)的范圍內 -涵蓋參考范圍 -分析濃度盡可能均勻分布 -可報告范圍：參比方法的范圍至少與 待評方法的范圍相同 -延伸范圍：不用超出可報告范圍以外 的數據。方法對比實驗方法對比實驗l 樣品數 -至少40份以上 -雙份測定 -混合樣品(微混合樣品)方法對比實驗方法對比實驗l樣品測定序列 -在樣品的雙份測定中指定第一份測定順序 -按反方向順序檢測第二份(雙份)樣品, 如1、2、 3、4、5、6、7、8，和8、7、6、5、4、3、2、1。兩方法都應按此反向步驟進行，但

4、每種方法可使用不同開始順序 -順序中的濃度應盡可能隨機排列方法對比實驗方法對比實驗l時間和期限 -應在兩小時內完成 -最好使用當天采取的樣品 -如為貯存樣品，要確保結果穩定，滿足兩方法的要求，且貯存條件要一致。 -一天最多測定8個樣品。如果方法對比實驗與精密度評價實驗同時進行，方案確定之后，每天只能做4個樣品方法對比實驗方法對比實驗l數據收集過程中的檢查 -分析系統誤差 -人為誤差 -其它不一致數據的處理方法對比實驗方法對比實驗l質量控制 -遵守實驗室的常規質量控制 -兩方法出現失控時應重新測定方法對比實驗方法對比實驗l刪除數據的文件化 -任何需要刪除數據的情況都應仔細形成文件并保留，記錄所發

5、現的原因和問題反映數據集中趨勢的指標反映數據集中趨勢的指標l算術平均數(均數)l中位數nxixni1)(2121為奇數其中 nMxn)(21212為偶數其中nMxxnn反映數據集中趨勢的指標反映數據集中趨勢的指標l幾何平均數nxniGIgIgxi11反映數據離散度的指標反映數據離散度的指標l標準差l變異系數l極差112nisnixx%100%xsCVxxRminmax評價實驗室性能的指標評價實驗室性能的指標l偏倚值（Bias）xBiasxi初步數據檢查-方法內雙份數據中離群值的檢查 比較方法（參比）-X，實驗方法 （待評）-Yl計算每一樣品的兩次重復測定值之間差的絕對值： Dxi = Xi1-

6、 Xi2 (1) Dyi = Yi1- Yi2 (2)l差值絕對值的均值: NDxiDxNDyiDy初步數據檢查-方法內雙份數據中離群值的檢查l如果一絕對差值超過此限（Dx或Dy），用標準化（相對）的絕對差值，并進行附加計算：xixixiDxi21yiyiyiDyi21初步數據檢查-方法內雙份數據中離群值的檢查NDxiDxNDyiDy以相對差值的4倍作為標準化值的檢測界限初步數據檢查-方法內雙份數據中離群值的檢查l如有一值超出上述范圍和相對范圍的檢測界限，觀察為何如此，并從數據中刪除此值（該標本X、Y所有數據）后，再繼續分析 -樣品原因 -可糾正，但不能追蹤到特定樣品 -找不到原因，也不能糾正

7、初步數據檢查-方法內雙份數據中離群值的檢查lCO2數據匯總表標本號(i) Xi1 Xi2 Dxi Yi1 Yi2 Dyi 1 42.0 42.5 -0.5 41.1 41.1 0 2 68.0 67.1 0.9 68.2 68.7 -0.5 3 32.9 31.8 1.1 29.2 29.6 -0.4 . 40 49.4 49.2 0.2 49.5 50.2 -0.7 X =? Dx =? Y =? Dy=?初步數據檢查-方法內雙份數據中離群值的檢查lCO2離群值觀察表標本 Xi Dxi Yi Dyi Xi-Yi (Xi-X) (Yi-Y)123.40計算 Dx Dxi Dy Dyi Dx D

8、y Eij初步數據檢查-數據作圖lYi對Xi的散點圖初步數據檢查-數據作圖lYij對Xi均值的散點圖 初步數據檢查-數據作圖l雙份測定均質之差(Yj-Xj)相對于Xi的偏倚圖 初步數據檢查-數據作圖l每次測定的差(Yij-Xij)對Xi偏倚圖(略)初步數據檢查-線性相關的目測檢查l明顯的非線性關系 -目測是否數據有直線部分 -如非直線部分明顯或直線部分太短l線性關系滿意，按以下方法檢查數據方法間方法間離群值的目測檢查離群值的目測檢查l檢查兩張散點圖是否有明顯的離群值。有，則按以下計算方法刪除。l計算兩種方法的絕對差及其均值： Eij = yij xij l計算檢測限（4E），并將每一Eij與之

9、比較，標記出超出4E的點 NijEijNE221方法間方法間離群值的目測檢查離群值的目測檢查l計算方法間的相對絕對差值及其均值l計算檢測限（4E），并將每一Eij與之比較，標記出超出4E的點xijxijyijijENijijENE221方法間方法間離群值的目測檢查離群值的目測檢查l任何一點(Xij，Yij)如在兩個實驗中都不能通過，則為離群點l從數據組中刪除的數值不能超過2.5% -如有超過2.5%的離群值X值合適范圍的檢驗值合適范圍的檢驗lX的測定范圍是否夠寬，可用相關系數r做粗略的估計l本例中, r =0.9777 NijNijNijyyijxxijyyijxxijr22222X值合適范圍

10、的檢驗值合適范圍的檢驗l上式中Nxijx2Nyijy2 X值合適范圍的檢驗值合適范圍的檢驗l作為一般規則，如果r0.975，則可認為X分布范圍適合l如果r 0.975，數據分布不夠寬，必須分析更多樣品以擴大數據范圍l注意：此只能評價數據的范圍，而不能反映數據在范圍內的分布情況線性回歸線性回歸-計算計算l對于成對的數據（Xij-Yij)，可按以下公式計算斜率b及截距al本例中, b=0.8819 a=5.5557 NijNijxxijyyijxxijb222xbya線性回歸線性回歸-計算計算l上式中l可用下式表算示出直線Nxijy2 Nxijx2 abXy線性回歸線性回歸-分散均性的目測檢查分散

11、均性的目測檢查l目測離散圖和偏倚圖，可以看出在數據范圍的上限和下限的偏倚之間是否有很大和顯著差異 -如果數據具有合理的均勻離散度，則可用以下描述的線性回歸方程計算平均偏倚 -如果數據不具有合理的均勻離散度，則可使用以下描述的分部殘余方法作變異評估以及作平均偏倚的評估計算預期偏倚及其可信區間計算預期偏倚及其可信區間-線性回歸法線性回歸法（當數據通過合適范圍及均勻離散度的檢查）（當數據通過合適范圍及均勻離散度的檢查）l在Y的方向上數據點與回歸之差稱為此點的剩余值，其計算公式如下： 剩余值l估計值的標準誤（Sx,y)是這些剩余值的標準差，它是測量圍繞回歸線這些點的“離散度”。其計算公式如下：bxij

12、ayijijYyijji22,2 NxSyijYyij計算預期偏倚及其可信區間計算預期偏倚及其可信區間-線性回歸法線性回歸法（當數據通過合適范圍及均勻離散度的檢查）（當數據通過合適范圍及均勻離散度的檢查）l以給定的醫學決定水平Xc上的預期偏倚（Bc）估計值，可按下式計算：lBc的95%可信區間（在Xc上的真正偏倚）按下式計算：XcbacB) 1(XXijXXcBBBNxSychighclowc22,.21.2計算預期偏倚及其可信區間計算預期偏倚及其可信區間-線性回歸法線性回歸法（當數據通過合適范圍及均勻離散度的檢查）（當數據通過合適范圍及均勻離散度的檢查）項目醫學決定水平允許誤差預期偏差BC9

13、5%的可信限預期值預期值95%可信限下限上限下限上限PCO2 (mmHg)352.191.40.91.936.437.338.3452.810.2-0.30.740.239.940.969.84.362.7-3.22.267.163.969.3PH、PCO、PO允許誤差的限度分別為：0.34%、6.25%、5.6%.計算預期偏倚及其可信區間計算預期偏倚及其可信區間-分部偏倚法分部偏倚法（當數據未通過適合范圍檢查時（當數據未通過適合范圍檢查時）l按X遞增順序制表，將數據分為低、中、高三組，每組應含大約相同數目的數據，然后分別用下列方程式分別計算每組的平均偏倚 式中Nk=K組的數據數（K=1、2、

14、3） 式中為“虛設的”下標，說明K組中成對X和成對Y的和NxyBkNimmmk1計算預期偏倚及其可信區間計算預期偏倚及其可信區間-分部偏倚法分部偏倚法（當數據未通過適合范圍檢查時（當數據未通過適合范圍檢查時）l組中每個點的偏倚（差別）及這些偏倚的標準差，可按下式計算112NBxySDkmknkmmk計算預期偏倚及其可信區間計算預期偏倚及其可信區間-分部偏倚法分部偏倚法（當數據未通過適合范圍檢查時（當數據未通過適合范圍檢查時）l在醫學決定水平濃度Xc下，通過選擇對于Xc的適當K值并作如下計算，可得出預期偏倚Bc 95%可信區間NSDBBBkkchighclowc2,.,計算預期偏倚及其可信區間計

15、算預期偏倚及其可信區間-分部剩余法分部剩余法（當數據有不恒定（當數據有不恒定(可變的可變的)精密度時精密度時）l如分部偏倚法分組,計算公式如下l在給定的醫學決定水平Xc處，預期偏倚Bc的估計值為：112NYYSDkNkmkmmxBccba1計算預期偏倚及其可信區間計算預期偏倚及其可信區間-分部剩余法分部剩余法（當數據有不恒定（當數據有不恒定(可變的可變的)精密度時精密度時）l通過選擇對于Xc的適當K值并作如下計算，可得出預期偏倚Bc 95%可信區間NSDBBBkkchighclowc2,.,結果的解釋以及與內部性能標準的結果的解釋以及與內部性能標準的比較比較l兩方法之間的差別如何，一般將預期偏倚的可信區間與醫學決定點Xc上的允許誤差的限值相比較。 -如預期偏倚的可信區間包含了規定的可接受偏倚，則兩種方法的數據未顯示二者偏倚有區別 -如預期偏倚的可信區間不包含規定的可接受偏倚時 可接受的偏倚小于預期偏倚可信區間的下限，則兩方法不相當 可接受的偏倚大于預期偏倚可信區間的上限，則兩方法相當結果的解釋以及與內部性能標準的結果的解釋以及與內部性能標準的比較比較l如果兩法不相當，但仍相信待評方法更特異，則不應拒絕新方法。可在常規應用前收集新的臨床數據，建立新的參考范圍，確定兩方法之間的允許差異，不一定單獨應用醫學允許誤差來決定精密度l當廠家提供了待評方法的對比數據時，則應另做一些性能評