2022年1月2日 星期日

CAT終止條件注意事項

 CAT終止條件設定:

 

共會有三種考量:

分別為:

1.      MRR:某個人的信度到達N後,即停止施測。

2.      LRI某個人增加信度小於N

3.      MRR or LRI

 

首先:CAT的考量為:在信度與原本題庫差不多的情況下,可以精簡掉多少題目。

依此,我們會產生2種可能版本(可能!)。

1.      信度最佳且快速版(通常不會有此版本)

2.      最快速版(如果有1,此版本就不重要)

3.      最有效率版

 

MRRLRI之其他注意事項如下:

MRR

1.      MRR通常外在標準會設定0.70.9(為信度之絕對外在標準),如果需要增加其他的標準,例如:0.85,可能會需要額外的解釋為什麼有這個標準存在

2.      客觀評估內容例如動作,信度通常會設高標(0.9);而抽象概念評估的信度,例如:認知,可能達到0.7,即可以接受。另此處是會看平均信度而非最小信度

 

LRI

1.      可能會有信度改變量為負值之問題,因為程式碼中取了絕對值,可能使作答了某題之後信度反而下降,但此條件影響不大。

 

 

NOTE1:通常在比較各版本信度時,會以>0.9>0.8>0.7之各人數比例做為判斷標準,而非使用平均信度。而重點會放在0.9以上。

NOTE2:挑選時僅看平均題數即可,因為通常都會有界外值做很多題目。

NOTE3:可能會需要考量在多向度的時候,是不是會有個向度CAT不愛選擇該向度,如此的話,會需要強制變成個別單向度答題,或是設定該項度至少必須達幾題。

 

沒有留言:

張貼留言

CAT終止條件注意事項

  CAT 終止條件設定:   共會有三種考量: 分別為: 1.       MRR :某個人的信度到達 N 後,即停止施測。 2.       LRI : 某個人 增加信度小於 N 3.       MRR or LRI   首先: CAT 的考...