[問題] Cohen kappa Asymmetric Table (SPSS)
rater A和rater B，分別評完了一份資料，評出來的是ordinal分數，
要算inter-rater reliability cohen kappa
分數的criteria共有6個levels: 0~5分。不過總計下來，
rater A所有的評分分數有0,1,2,3,5共5類分數，
rater B所有的評分分數有0,1,2,4 共4類分數。
轉換後的總計表大概長這樣：
rater B
0 1 2 4
0 (略)
1
2
3
5
rater A
但這樣是不對稱的。欄、列都要有0,1,2,3,4,5，也就是表格要6x6才是對稱的。
SPSS錯誤訊息顯示，評分結果要對稱才能跑Kappa，我做假資料調成對稱後，確實能跑。
可是真正的評分，是不對稱的，
rater A就是缺4分，rater B就是缺3,5分，
只要A有任一個4分，B有3,5各一個，就可以跑Kappa了。
但是就是沒有，那能怎麼跑？還有什麼方法嗎？
Fleiss只能跑nominal。是可以跑Pearson correlation，不過好像還不夠。
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 140.122.30.140
推
10/20 23:12, , 1F
10/20 23:12, 1F
討論串 (同標題文章)
以下文章回應了本文：
完整討論串 (本文為第 1 之 2 篇)：