2016年10月17日 星期一

FAST CAT分析結果及進度規劃

FAST CAT簡介
FAST CAT包含4個向度:上肢動作、下肢動作、平衡、及BADL,此4向度之題目分別來自:UE-STREAM、LE-STREAM、PASS、BI等4個測驗。

模擬分析方法
FAST CAT模擬分析共使用2類(共8種)「測驗停止規則 (stopping rule)」,第1類測驗停止規則僅考慮「信度增加量」,此類規則包含4種,分別為若多測1題後,「信度增加量小於 0.005、0.010、0.015、及0.020」則停止測驗。

第2類測驗停止規則同時考慮「信度增加量及測驗最終信度」,此類規則亦包含4種,分別為「信度≧0.90信度增加量小於 0.005、0.010、0.015、及0.020」則停止測驗。

模擬分析結果
FAST CAT模擬分析結果呈現於 (Table 1)。整體趨勢顯示第1類測驗停止規則之Rasch信度略優於第2類;然而第2類測驗停止規則之測驗效率優於第1類(所需測驗題數較少)
第1及第2類測驗停止規則中,FAST CAT各向度之Rasch信度皆介於0.89~0.94。第1類測驗停止規則之測驗平均題數為6.6~10.4;第2類測驗停止規則則為6.2~8.4

測驗停止規則選擇
停止規則選擇條件有2:(1) 4向度的信度皆≧0.90;(2)平均測驗題數<10題。
滿足以上條件之測驗規則僅1個:信度增加量小於 0.010 (Table 1, set B)。
使用此測驗停止規則之FAST CAT,其各向度Rasch信度皆介於0.90~0.94,平均測驗題數8.4題(全距4~17題)。



Table 1. Precision and efficiency of the 8 sets of stopping rules for the FAST CAT
Sets of rules/Measures
A
B
C
D

E
F
G
H
Item bank
Precision (Rasch reliability)










UE-STREAM










0.91
0.90
0.90
0.90

0.90
0.89
0.89
0.89
0.92
Maximal
0.99
0.99
0.99
0.99

0.99
0.99
0.99
0.99
1.00
Minimal
0.35
0.34
0.33
0.33

0.35
0.34
0.33
0.33
0.36
% of the patients with reliability0.70
91.6
92.2
90.9
90.5

91.6
92.2
90.9
90.5
91.6
% of the patients with reliability0.90
72.6
74.0
72.6
73.3

73.3
74.0
72.6
73.3
74.0
LE-STREAM










0.93
0.92
0.91
0.91

0.91
0.91
0.90
0.90
0.94
Maximal
0.98
0.98
0.98
0.97

0.98
0.98
0.97
0.97
0.99
Minimal
0.47
0.47
0.47
0.47

0.47
0.47
0.47
0.47
0.47
% of the patients with reliability0.70
97.6
97.6
97.6
97.6

97.3
97.6
97.6
97.6
98.0
% of the patients with reliability0.90
81.1
78.7
78.4
73.3

81.1
78.7
78.4
73.3
82.4
PASS










0.94
0.94
0.93
0.92

0.94
0.93
0.92
0.92
0.97
Maximal
0.98
0.98
0.98
0.97

0.98
0.97
0.97
0.97
0.99
Minimal
0.79
0.77
0.77
0.77

0.79
0.77
0.77
0.77
0.79
% of the patients with reliability0.70
100.0
100.0
100.0
100.0

100.0
100.0
100.0
100.0
100.0
% of the patients with reliability0.90
91.2
85.8
81.1
75.3

91.2
85.8
81.1
75.3
96.3
BI










Average
0.91
0.90
0.89
0.89

0.91
0.90
0.89
0.89
0.95
Maximal
0.95
0.94
0.94
0.94

0.95
0.94
0.94
0.93
0.97
Minimal
0.78
0.77
0.77
0.77

0.78
0.77
0.77
0.77
0.79
% of the patients with reliability0.70
100.0
100.0
100.0
100.0

100.0
100.0
100.0
100.0
100.0
% of the patients with reliability0.90
78.4
73.3
66.6
56.4

78.7
73.6
66.9
56.8
95.9
Efficiency (number of items)










Average
10.4
8.4
7.4
6.6

8.4
7.3
6.7
6.2
58
Medium (Q1–Q3)
10
(18–13)
9
(7–10)
8
(6–9)
7
(5–8)

7
(6–11)
7
(6–9)
7
(5–9)
6
(5–8)
58
(58–58)
Range
4–17
3–13
3–12
3–12

3–17
3–13
3–12
3–12
58
% of the patients using > 5 items
97.0
88.5
77.0
67.2

76.0
71.6
63.5
55.7
100.0
% of the patients using > 10 items
49.3
17.6
5.1
1.0

28.7
13.9
4.1
1.0
100.0
2.0
0.0
0.0
0.0

2.0
0.0
0.0
0.0
100.0
Sets of stopping rules A~D: LRI (A: < 0.005, B: < 0.010, C: < 0.015, D: < 0.020);
Sets of stopping rules E~H: Rasch reliability  0.90 or LRI (E: < 0.005, F: < 0.010, G: < 0.015, H: < 0.020);
LRI: limited reliability increase.

FAST CAT稿件寫作進度:每週2-3個半天,至少3段。

2016年8月29日 星期一

反應性驗證─掌握所有可能影響之因素

反應性驗證結果之解讀至少需考量下列4項影響因素:

  1. 前後測之間隔:反應性前後測間隔將影響【評量概念(如注意力)改變程度】,
    理想上前後測間隔越久,則受測者之注意力改變量越大,反應性也越大。
  2. 受測者接受之治療:
    受測者於前後測期間,接受特定之治療(如注意力治療),將有助於評量概念之恢復。
    理想上有接受注意力治療之受測者,其注意力測驗之反應性應該越大。
  3. 樣本特性:
    受測者之疾病嚴重程度及年齡等,都會影響受測者之注意力改變程度。
    理想上疾病嚴重度越嚴重且年齡越輕,反應性越大。
  4. 評量工具之練習效應及隨機測量誤差:評量工具之練習效應會導致反應性驗證結果【高估】,
    隨機測量誤差則會造成評量工具之反應性【較差】。
受測者接受之治療可透過與治療師之訪談深入了解。
訪談之內容包含(以注意力為例):
  • 找出(決定)需注意力介入個案之方法
  • 採用之治療方案
  • 治療之頻率





CAAT收案:每週二臨床觀察

CAAT本週開始於工作坊收案。

CAAT之操作方法較複雜(包含二討答題規則且須交替使用),因此需藉由實際觀察個案之作答情形及表現,以最為後續測驗發展/改良之依據。

目前預計每週二(為期一個月)與沛綺同去工作坊收案全天。
收案過程仍由沛綺為主,我則在旁觀察,必要時給予協助。