CAAT@schizo.之信效度分析結果

CAAT預期評量之認知功能：規則轉換 (rule switching)，規則轉換屬於何種認知功能尚無定論，常被視為「轉換性注意力 (alternating attention)」的一種或「認知彈性 (cognitive flexibility)」的一種基礎能力。

發展動機：過去研究發現思覺失調症患者之規則轉換能力有缺損，且目前缺乏評估工具。

測驗內容：CAAT要求受測者轉換於二種測驗規則：「判斷數字是否小於5」及
「判斷圖形是否為左右對稱」（詳CAAT介紹）。
CAAT之正式測驗含三部分：僅數字題、僅圖形題、及規則轉換題。每部分含24題，前二部分受測者無需規則轉換，但第三部分數字與圖形題各半，受測者需規則轉換。

CAAT主要分數：CAAT之正式測驗第三部分之「平均反應時間」。本研究樣本於4次評量之CAAT分數如表一。
我們假設第三部分的平均反應時間 > 第一、二部份的平均反應時間。因於第三部分中，患者應須花費額外的認知能力（時間）以處理「規則轉換」之任務。

表一：CAAT第三部分平均反應時間

施測次數	1	2	3	4
平均反應時間 (秒)	0.80 (0.17)	0.78 (0.16)	0.77 (0.17)	0.75 (0.19)

研究評估流程：本研究招募症狀穩定之思覺失調症患者進行4次評估，患者每次評估皆須完成CAAT。此外於第一、三次評估時須額外完成迷宮測驗 (Mazes test)及T-SDMT；第二、四次評估須完成Lawton IADL。

心理計量特性驗證結果
再測信度：幾乎無練習效應，但ICC及隨機測量誤差僅達可接受之邊緣（數值呈現於表二）。

表二：CAAT再測信度、隨機測量誤差及練習效應

	Difference (SD), 秒	ICC	SEM, (秒)	MDC, (秒)	MDC%	SRM	p
CAAT_Time1~2	0.03 (0.12)	0.74	0.09	0.25	31.3%	0.25	0.86
CAAT_Time2~3	0.01 (0.14)	0.66	0.09	0.25	32.1%	0.07	0.70
CAAT_Time3~4	0.02 (0.12)	0.78	0.08	0.22	28.6%	0.17	0.28

效度：
建構效度不佳：CAAT「Part3」與「Part1&2」之平均反應時間無顯著差異，此結果表示：Part3之平均反應時間（CAAT的主要指標）無法顯示出患者處理「規則轉換」任務須額外花費的時間。

生態效度不佳：和IADL分數相關性低。（然而IADL與這次所有測驗的相關性都<0.20，原因尚不明）

收斂效度可接受：和T-SDMT有中度相關；和MAZE弱相關。

結論：CAAT應用於思覺失調症患者之再測信度勉強可接受，但效度不佳...

可能原因：「規則轉換提醒」至「呈現規則轉換題」的間隔太長（目前為5秒），導致CAAT無法偵測到患者「轉換規則需額外花費的時間」。

同筆資料中亦可分析MCCB-Mazes測驗的再測信度：

Mazes-Time1, mean (SD) = 13.4 (6.9)

Mazes-Time2, mean (SD) = 15.8 (7.9)

	Difference (SD), 秒	ICC (95% CI)	SEM, (秒)	MDC, (秒)	MDC%	SRM	p
Mazes_Time1~2	2.38 (5.75)	0.67 (0.46~0.80)	3.96	10.95	81.6%	0.25	0.003

我們研究結果顯示Mazes的隨機測量誤差極大，且ICC與練習效應的effect size與MCCB發展時之數據有相當大的出入 。MCCB原始論文呈現之 ICC = 0.80，練習效應之effect size = 0.08。

此出入可能來自於「再測間隔之差異」，我們研究之間隔為2週，而雖然原始論文的間隔為4週。

原始論文：
Nuechterlein KH, Green MF, Kern RS, Baade LE, Barch DM, CohenJD, Essock S, Fenton WS, Frese FJ 3rd, Gold JM, Goldberg T,Heaton RK, Keefe RS, Kraemer H, Mesholam-Gately R, SeidmanLJ, Stover E, Weinberger DR, Young AS, Zalcman S, Marder SR:The MATRICS Consensus Cognitive Battery, part 1: test selection,reliability, and validity. Am J Psychiatry 2008; 165:203–213