題組之相關特性對電腦化適性測驗測量精準度的影響

陳 柏熹(Po-Hsi Chen), 黃 宏宇(Hung-Yu Huang), 王 文中(Wen-Chung Wang)

Research output: Contribution to journalArticle

Abstract

本研究主要目的在探討當CAT中含有題組(例如語文測驗中的克漏字測驗、閱讀測驗……等)而違反IRT局部獨立性的假定時,如何使用題組反應模式來進行CAT,並分析在含有題組的情況下,題組的相關特性(題組效果大小、題組題數佔CAT總題數的比例、題組施測順序)對CAT之能力估計精準度的影響。研究結果顯示:在含有題組的CAT中,題組的存在會降低CAT的能力估計精準性。而且隨著題組效果愈大,或是題組佔CAT總題數的比例愈高,CAT的能力估計精準性會更差。而題組試題的施測順序也會影響CAT的效能,先施測題組的信度比先施測單題高;先施測題組的均方根誤(RMSE)比先施測單題低。而且此現象在題組佔總題數比例較高時或CAT總題數較高時更加明顯。本研究建議未來在含有題組的測驗中若要進行CAT,應考慮上述題組特性的影響,以使CAT發揮較大的優勢。
Original languageChinese
Pages (from-to)129-150
Number of pages22
Journal測驗學刊
Volume55
Issue number1
Publication statusPublished - 2008

Cite this

陳柏熹(Po-Hsi C, 黃宏宇(Hung-Yu H, & 王文中(Wen-Chung W (2008). 題組之相關特性對電腦化適性測驗測量精準度的影響. 測驗學刊, 55(1), 129-150.

題組之相關特性對電腦化適性測驗測量精準度的影響. / 陳柏熹(Po-Hsi Chen); 黃宏宇(Hung-Yu Huang); 王文中(Wen-Chung Wang).

In: 測驗學刊, Vol. 55, No. 1, 2008, p. 129-150.

Research output: Contribution to journalArticle

陳柏熹(Po-HsiC, 黃宏宇(Hung-YuH & 王文中(Wen-ChungW 2008, '題組之相關特性對電腦化適性測驗測量精準度的影響', 測驗學刊, vol. 55, no. 1, pp. 129-150.
陳柏熹(Po-HsiC, 黃宏宇(Hung-YuH, 王文中(Wen-ChungW. 題組之相關特性對電腦化適性測驗測量精準度的影響. 測驗學刊. 2008;55(1):129-150.
陳柏熹(Po-Hsi Chen) ; 黃宏宇(Hung-Yu Huang) ; 王文中(Wen-Chung Wang). / 題組之相關特性對電腦化適性測驗測量精準度的影響. In: 測驗學刊. 2008 ; Vol. 55, No. 1. pp. 129-150.
@article{6a1a2c105b164b8e941ca3f8f5c4d724,
title = "題組之相關特性對電腦化適性測驗測量精準度的影響",
abstract = "本研究主要目的在探討當CAT中含有題組(例如語文測驗中的克漏字測驗、閱讀測驗……等)而違反IRT局部獨立性的假定時,如何使用題組反應模式來進行CAT,並分析在含有題組的情況下,題組的相關特性(題組效果大小、題組題數佔CAT總題數的比例、題組施測順序)對CAT之能力估計精準度的影響。研究結果顯示:在含有題組的CAT中,題組的存在會降低CAT的能力估計精準性。而且隨著題組效果愈大,或是題組佔CAT總題數的比例愈高,CAT的能力估計精準性會更差。而題組試題的施測順序也會影響CAT的效能,先施測題組的信度比先施測單題高;先施測題組的均方根誤(RMSE)比先施測單題低。而且此現象在題組佔總題數比例較高時或CAT總題數較高時更加明顯。本研究建議未來在含有題組的測驗中若要進行CAT,應考慮上述題組特性的影響,以使CAT發揮較大的優勢。",
keywords = "題組, 試題反應理論, 題組反應理論, 電腦化適性測驗, testlet, item response model, terstlet response model, computerized adaptive testing",
author = "陳, {柏熹(Po-Hsi Chen)} and 黃, {宏宇(Hung-Yu Huang)} and 王, {文中(Wen-Chung Wang)}",
year = "2008",
language = "Chinese",
volume = "55",
pages = "129--150",
journal = "測驗學刊",
issn = "1609-4905",
publisher = "中國測驗學會",
number = "1",

}

TY - JOUR

T1 - 題組之相關特性對電腦化適性測驗測量精準度的影響

AU - 陳, 柏熹(Po-Hsi Chen)

AU - 黃, 宏宇(Hung-Yu Huang)

AU - 王, 文中(Wen-Chung Wang)

PY - 2008

Y1 - 2008

N2 - 本研究主要目的在探討當CAT中含有題組(例如語文測驗中的克漏字測驗、閱讀測驗……等)而違反IRT局部獨立性的假定時,如何使用題組反應模式來進行CAT,並分析在含有題組的情況下,題組的相關特性(題組效果大小、題組題數佔CAT總題數的比例、題組施測順序)對CAT之能力估計精準度的影響。研究結果顯示:在含有題組的CAT中,題組的存在會降低CAT的能力估計精準性。而且隨著題組效果愈大,或是題組佔CAT總題數的比例愈高,CAT的能力估計精準性會更差。而題組試題的施測順序也會影響CAT的效能,先施測題組的信度比先施測單題高;先施測題組的均方根誤(RMSE)比先施測單題低。而且此現象在題組佔總題數比例較高時或CAT總題數較高時更加明顯。本研究建議未來在含有題組的測驗中若要進行CAT,應考慮上述題組特性的影響,以使CAT發揮較大的優勢。

AB - 本研究主要目的在探討當CAT中含有題組(例如語文測驗中的克漏字測驗、閱讀測驗……等)而違反IRT局部獨立性的假定時,如何使用題組反應模式來進行CAT,並分析在含有題組的情況下,題組的相關特性(題組效果大小、題組題數佔CAT總題數的比例、題組施測順序)對CAT之能力估計精準度的影響。研究結果顯示:在含有題組的CAT中,題組的存在會降低CAT的能力估計精準性。而且隨著題組效果愈大,或是題組佔CAT總題數的比例愈高,CAT的能力估計精準性會更差。而題組試題的施測順序也會影響CAT的效能,先施測題組的信度比先施測單題高;先施測題組的均方根誤(RMSE)比先施測單題低。而且此現象在題組佔總題數比例較高時或CAT總題數較高時更加明顯。本研究建議未來在含有題組的測驗中若要進行CAT,應考慮上述題組特性的影響,以使CAT發揮較大的優勢。

KW - 題組

KW - 試題反應理論

KW - 題組反應理論

KW - 電腦化適性測驗

KW - testlet

KW - item response model

KW - terstlet response model

KW - computerized adaptive testing

M3 - 文章

VL - 55

SP - 129

EP - 150

JO - 測驗學刊

JF - 測驗學刊

SN - 1609-4905

IS - 1

ER -