一、案例介紹

當(dāng)前有3位專家，同時根據(jù)測試結(jié)果對8名同學(xué)的智商進(jìn)行打分，打分結(jié)果如下：

試分析3位專家的打分一致性。

二、問題分析

研究3位專家對8名同學(xué)的智商打分值的一致性，此類情況可使用ICC組內(nèi)相關(guān)系數(shù)，或者Kendall W協(xié)調(diào)系數(shù)進(jìn)行一致性檢驗。本案例為定量數(shù)據(jù)進(jìn)行一致性測量，一般使用ICC組內(nèi)相關(guān)系數(shù)進(jìn)行分析。

三、軟件操作及結(jié)果解讀

（1）原理說明

1、三類系數(shù)對比

ICC組內(nèi)相關(guān)系數(shù)用于測量評分?jǐn)?shù)據(jù)一致性水平，相比于Kappa和Kendall系數(shù)使用范圍更廣，適用于定量和定類數(shù)據(jù)。這三個系數(shù)的功能類似，使用上需要注意，對比說明如下：

首先從數(shù)據(jù)類型適用性上判斷：ICC適用于定量；但是Kappa一致性系數(shù)通常用于定類數(shù)據(jù)一致性；以及Kendall W協(xié)調(diào)系數(shù)用于定量數(shù)據(jù)，尤其是定序等級數(shù)據(jù)。

2、ICC模型選擇

ICC組內(nèi)相關(guān)系數(shù)的計算有3種模型，分別是：雙向混合模型、雙向隨機(jī)模型、單向隨機(jī)模型。ICC模型選擇共涉及三個方面，分別為單向/雙向、混合/隨機(jī)、一致性/絕對一致性；除此之外：3種模型均會輸出單一度量或者平均度量這兩個指標(biāo)值。結(jié)合3種模型，以及計算類型和度量標(biāo)準(zhǔn)，ICC模型一共可分為六個，如下表匯總：

有關(guān)ICC模型選擇問題，可以查看SPSSAU幫助手冊詳細(xì)說明，在此不再贅述。

ICC組內(nèi)相關(guān)系數(shù)

本案例不考慮系統(tǒng)誤差，且針對3位專家給出的原始數(shù)據(jù)進(jìn)行分析，因此使用ICC(C,1)進(jìn)行分析。

（2）軟件操作

將數(shù)據(jù)上傳至SPSSAU系統(tǒng)后，在實驗/醫(yī)學(xué)研究模塊，選擇【ICC組內(nèi)相關(guān)系數(shù)】，將3位專家的打分?jǐn)?shù)據(jù)拖拽到右側(cè)分析框中，模型選擇“雙向混合/隨機(jī) 一致性”，點擊“開始分析”，操作如下：

（3）結(jié)果解讀

SPSSAU輸出ICC組內(nèi)相關(guān)系數(shù)分析結(jié)果如下：

使用ICC(C,1)模型進(jìn)行分析，得到ICC組內(nèi)相關(guān)系數(shù)為0.7148，95%CI為0.3364~0.9271。ICC組內(nèi)相關(guān)系數(shù)介于0.6和0.8之間，說明3位專家的打分一致性程度較強(qiáng)。

四、結(jié)論

使用ICC組內(nèi)相關(guān)系數(shù)，具體為ICC(C,1)分析3位專家對8名同學(xué)智商打分值的一致性。一般來講，ICC <0.2則說明一致性程度較差；0.2~0.4之間說明一致性程度一般；0.4~0.6之間說明一致性程度中等；0.6~0.8之間說明一致性程度較強(qiáng)；0.8~1.0之間說明一致性程度很強(qiáng)。分析結(jié)果顯示，ICC組內(nèi)相關(guān)系數(shù)為0.7148，說明3位專家的打分一致性程度較強(qiáng)。

五、知識小貼士

1、SPSSAU共提供三類ICC模型選項，應(yīng)該如何選擇？

匯總說明如下：

2、怎么選擇正確的ICC模型？

①單向/雙向

若希望研究測量的數(shù)據(jù)是否完全相等時，此時選擇單向ICC模型。

若希望研究測量數(shù)據(jù)之間的一致性程度，此時選擇雙向ICC模型。

②混合/隨機(jī)

雙向混合和雙向隨機(jī)模型，從原理角度進(jìn)行了區(qū)分，從算法計算的角度看，其二者的數(shù)字計算結(jié)果完全一模一樣。因而在分析時，只需要描述選擇過程，計算結(jié)果上雙向混合和雙向隨機(jī)模型的結(jié)果完全一致。

③一致性/絕對一致性

如果研究中考慮系統(tǒng)誤差問題，此時需要選擇絕對一致性計算類型。如果不需要考慮系統(tǒng)誤差時，此時選擇一致性計算類型。特別說明一點在于，單向模型只有絕對一致性。

除此之外，3類模型均會輸出單一度量或者平均度量這兩個指標(biāo)值。

④單一度量/平均度量

單一度量：比如多位醫(yī)生通過一項測試對抑郁癥患者進(jìn)行抑郁程度打分。此時數(shù)據(jù)為原始數(shù)據(jù)，應(yīng)該使用單一度量。

平均度量：比如多位醫(yī)生通過對抑郁癥患者進(jìn)行多項測試，得出平均值，進(jìn)行打分，此時的數(shù)據(jù)為多項測試平均后的得分，故應(yīng)該使用平均度量。