Re: [問題] 多位評分者的評分者信度
※ 引述《tomin (stuffy)》之銘言:
: 大於2位評分者(也就是有3,4,5,6,7,8,9, ....以上的評分者),
: 皆對同一份資料評分的情況,
: 國內似乎常採用Holsti's method加強版
: 國內一些統計書上提供Holsti's method多人版的算法
: 不過我看英文的書或paper 只看到2人版的 好像只有國內用多人加強版
: 我個人是有點懷疑加強版的公式啦
: 我算過 加強版的平均相互同意值 就算只是0.3~0.4偏低的數值
: 只要人數多一些 (7~8人以上) 信度仍然能超過0.8
: 多人版有什麼跑法嗎?
: 我是有查到Krippendorff's alpha,不過要另外用巨集等公式下去代,很麻煩且複雜。
: 剛查到Cohen Kappa也有多人版 沒試過
: http://cosmion.net/jeroen/software/kappa/
: http://justus.randolph.name/kappa
之前統計課老師有提過 若3位以上的評分員
可以用項目間一致性檢定的方式,模式選取alpha,統計量勾選類組間相關係數(SPSS)
不過不知道這是不是常用的方法
要找這麼多評分員也不簡單啊XD
--
◤◢ 玄妙系列作第二部《黃泉路》 全家、福客多、OK便利商店熱賣中 ▊▋▌▍▎
▇▆◣▅▇▇▅▆▇█▋ ▇▆▇▍▄▇ ▇▅▂▄▆▇▏ ▇ .
. ▏ ‧ ═▉ ▎ 發生過命案的三重賓館857號房 ▏ ‧
… ═ ▉ ▏ 憑空傳來的詭異歌聲 ▏ ▎ . ‥
‥ . ═ ˙▊ ▉ ‧ 歸來的惡靈即將帶走他們的性命. ◢▉.
. ◣ ﹎ ▄ ‧ ▊ ▉▇http://kuso.cc/4@6d http://kuso.cc/4@6l ▎▊g
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 114.32.2.212
討論串 (同標題文章)