CAT分层类曝光控制策略研究新进展

1

作者 刘海东 虞芷筠 +3 位作者 李浩 秦春影 杨建芹 喻晓锋 《江西师范大学学报（自然科学版）》 CAS 北大核心 2024年第2期139-146,共8页

计算机化自适应测验(computerized adaptive testing,CAT)可以根据每一名考生的不同作答进行自适应选题,提高了测验精度.但高精度也伴随着高曝光风险,分层类项目曝光控制策略作为项目曝光控制的方法之一,是近年来曝光控制研究领域的热点... 计算机化自适应测验(computerized adaptive testing,CAT)可以根据每一名考生的不同作答进行自适应选题,提高了测验精度.但高精度也伴随着高曝光风险,分层类项目曝光控制策略作为项目曝光控制的方法之一,是近年来曝光控制研究领域的热点.同时,反应时(RT)的收集是CAT的一大优势,RT对于测验的实施具有重要价值.该文综合介绍了传统的分层策略,并结合RT的分层策略探讨当前分层策略应用于CAT项目曝光控制中存在的问题及其未来研究方向. 展开更多

关键词 计算机化自适应测验 反应时 项目曝光控制 分层策略 测验时间 选题策略

在线阅读 下载PDF 职称材料

等级反应模型下计算机化自适应测验选题策略 被引量：38

2

作者 陈平 丁树良 +1 位作者 林海菁 周婕 《心理学报》 CSSCI CSCD 北大核心 2006年第3期461-467,共7页

计算机化自适应测验(CAT)中的选题策略,一直是国内外相关学者关注的问题。然而对多级评分的CAT的选题策略的研究却很少报导。本研究采用计算机模拟程序对等级反应模型(G raded Response Model)下CAT的四种选题策略进行研究。研究表明:... 计算机化自适应测验(CAT)中的选题策略,一直是国内外相关学者关注的问题。然而对多级评分的CAT的选题策略的研究却很少报导。本研究采用计算机模拟程序对等级反应模型(G raded Response Model)下CAT的四种选题策略进行研究。研究表明:等级难度值与当前能力估计值匹配选题策略的综合评价最高;在选题策略中增设“影子题库”可以明显提高项目调用的均匀性;并且不同的项目参数分布或不同的能力估计方法都对CAT评价指标有影响。 展开更多

关键词 等级反应模型 计算机化自适应测验 选题策略 影子题库

在线阅读 下载PDF 职称材料

引入曝光因子的计算机化自适应测验选题策略 被引量：35

3

作者 程小扬 丁树良 +1 位作者 严深海 朱隆尹 《心理学报》 CSSCI CSCD 北大核心 2011年第2期203-212,共10页

在计算机化自适应测验(CAT)的研究中,制定既高效又安全的选题策略是一个追求目标。用极大项目信息量准则(MIC)选题使得测验效率高、能力估计准确,缺点是项目调用很不均匀,影响考试的安全;按a分层法通过控制试题曝光率以提高考试的安全性... 在计算机化自适应测验(CAT)的研究中,制定既高效又安全的选题策略是一个追求目标。用极大项目信息量准则(MIC)选题使得测验效率高、能力估计准确,缺点是项目调用很不均匀,影响考试的安全;按a分层法通过控制试题曝光率以提高考试的安全性,但该方法可能会使测验效率略有下降,且该方法在各层内部无法实现对区分度的调整。本文针对上述两种选题策略的优缺点,对0-1评分下的CAT,通过引入曝光因子、分阶段自动调整区分度的影响以及提高选题准确性等手段,对MIC和a-STR进行改进,引入了两类新的选题策略。计算机模拟实验显示,新的选题方法效果比较理想。 展开更多

关键词 曝光因子 计算机化自适应测验 选题策略 3PLM

在线阅读 下载PDF 职称材料

认知诊断计算机化自适应测验中新的选题策略:结合项目区分度指标 被引量：14

4

作者 郭磊 郑蝉金 +2 位作者 边玉芳 宋乃庆 夏凌翔 《心理学报》 CSSCI CSCD 北大核心 2016年第7期903-914,共12页

当前国内外大部分认知诊断计算机化自适应测验(CD-CAT)主要采用PWKL作为选题策略进行研究。PWKL结合后验分布信息对KL指标进行加权,提高了判准率,但该方法仅利用个体层面信息加权,忽视了项目本身能够提供的信息,属于单源指标。本研究结... 当前国内外大部分认知诊断计算机化自适应测验(CD-CAT)主要采用PWKL作为选题策略进行研究。PWKL结合后验分布信息对KL指标进行加权,提高了判准率,但该方法仅利用个体层面信息加权,忽视了项目本身能够提供的信息,属于单源指标。本研究结合认知诊断中的项目区分度信息,对PWKL进行修正,提出了4种新的多源选题策略:GIDPWKL、AIDPWKL、CIDPWKL和KLEDPWKL方法,并在加入曝光控制下与PWKL和互信息法(MIM)进行比较。模拟研究结果表明:(1)在定长测验情景下的绝大多数实验结果表明,测验长度越短,新方法的判准率越高。平均属性/模式判准率最高的是GIDPWKL,之后是AIDPWKL,而CIDPWKL、KLEDPWKL和MIM方法的优势随实验条件不同而不同。(2)在定长测验情景下的绝大多数实验结果表明,题目质量越高,新方法的优势越明显。(3)Q矩阵结构的复杂性会影响不同选题策略的表现。(4)在变长测验情景下,4种新方法和MIM的平均测验长度均要低于PWKL方法,表现最好的是GIDPWKL方法。因此,若实际测验情景与本研究的模拟情景相似,推荐GIDPWKL方法。 展开更多

关键词 认知诊断计算机化自适应测验 选题策略 项目区分度 曝光控制

在线阅读 下载PDF 职称材料

基于CD-CAT的多策略RRUM模型及其选题方法开发 被引量：9

5

作者 戴步云 张敏强 +3 位作者 焦璨 黎光明 朱华伟 张文怡 《心理学报》 CSSCI CSCD 北大核心 2015年第12期1511-1519,共9页

在有多种解题策略的认知诊断问题情境中,用每个Q矩阵表示一种解题策略,由此将单策略认知诊断RRUM模型拓广为多策略RRUM模型(MS-RRUM)。随后,在应用MS-RRUM模型的CD-CAT中开发了适用于多策略情境的MAP参数估计法和多策略香农熵(MSSHE)选... 在有多种解题策略的认知诊断问题情境中,用每个Q矩阵表示一种解题策略,由此将单策略认知诊断RRUM模型拓广为多策略RRUM模型(MS-RRUM)。随后,在应用MS-RRUM模型的CD-CAT中开发了适用于多策略情境的MAP参数估计法和多策略香农熵(MSSHE)选题法。将MSSHE选题法与随机选题法分别在不同属性数量、不同测验长度下进行比较,结果发现前者对被试的策略和认知状态判准率都显著优于后者,而且都很理想。这样就顺利实现了在CD-CAT做策略诊断的目标。 展开更多

关键词 多策略CD-CAT 选题方法 多策略RRUM模型 多策略香农熵选题法

在线阅读 下载PDF 职称材料

等级评分模型下的最大信息量分层选题策略 被引量：6

6

作者 程小扬 丁树良 +1 位作者 朱隆尹 巫华芳 《江西师范大学学报（自然科学版）》 CAS 北大核心 2012年第5期446-451,共6页

对于0-1评分模型,R.B.Juan等提出了最大信息量分层选题策略,将此选题策略应用到等级反应评分模型(GRM)中,即以项目j的最大信息量I max(j)作为分层的依据,以取得该项目的最大信息量时能力点值θmax(j)作为项目的综合难度,分别用I max(j)... 对于0-1评分模型,R.B.Juan等提出了最大信息量分层选题策略,将此选题策略应用到等级反应评分模型(GRM)中,即以项目j的最大信息量I max(j)作为分层的依据,以取得该项目的最大信息量时能力点值θmax(j)作为项目的综合难度,分别用I max(j)与θmax(j)替代张华华等提出的按a分层和按b分块按a分层方法中的a、b参数,形成最大信息量按a分层选题策略(MI-AS)和最大信息量按b分块按a分层方法(MI-BS).模拟实验结果表明:MI-AS和MI-BS方法较传统的按a分层方法要好. 展开更多

关键词 计算机化自适应测验 等级反应模型 最大信息量分层法 选题策略

在线阅读 下载PDF 职称材料

认知诊断计算机化自适应测验的题库使用均匀性初探 被引量：18

7

作者 陈平 李珍 辛涛 《心理与行为研究》 CSSCI 2011年第2期125-132,153,共9页

项目曝光控制是认知诊断计算机化自适应测验(CD-CAT)中亟需解决的重要问题之一。采用蒙特卡洛模拟方法对CD-CAT中五种常用选题策略(随机化方法、KL信息量方法、香农熵方法、后验加权的KL信息量方法和综合后验加权和距离加权的KL信息量方... 项目曝光控制是认知诊断计算机化自适应测验(CD-CAT)中亟需解决的重要问题之一。采用蒙特卡洛模拟方法对CD-CAT中五种常用选题策略(随机化方法、KL信息量方法、香农熵方法、后验加权的KL信息量方法和综合后验加权和距离加权的KL信息量方法)的题库使用情况进行探讨。结果发现:四种非随机化选题策略的题库使用均匀性较差、测验重叠率高,从而导致测验安全性较差;香农熵方法的判准率总是最高。今后可以将传统CAT中的项目曝光控制技术融入到CD-CAT选题策略中。 展开更多

关键词 认知诊断计算机化自适应测验(CD—CA T) 选题策略 题库使用均匀性.

在线阅读 下载PDF 职称材料

自动控制区分度作用的选题策略研究 被引量：8

8

作者 李萍 甘登文 丁树良 《江西师范大学学报（自然科学版）》 CAS 北大核心 2013年第1期101-105,共5页

沿用引入曝光控制因子的CAT选题策略中所提出的曝光控制因子,同时将定长测验的测验长度以及不定长测验中被试累积信息量加入到新选题策略中,提出了在不分层的条件下自动控制区分度作用的选题策略.蒙特卡洛模拟结果表明:新方法在项目调... 沿用引入曝光控制因子的CAT选题策略中所提出的曝光控制因子,同时将定长测验的测验长度以及不定长测验中被试累积信息量加入到新选题策略中,提出了在不分层的条件下自动控制区分度作用的选题策略.蒙特卡洛模拟结果表明:新方法在项目调用均匀性、测验效率等评价指标上效果均较为理想. 展开更多

关键词 项目曝光控制 选题策略 计算机化自适应测验

在线阅读 下载PDF 职称材料

具有认知诊断功能的计算机化自适应测验的研究与实现 被引量：21

9

作者 林海菁 丁树良 《心理学报》 CSSCI CSCD 北大核心 2007年第4期747-753,共7页

构造具有认知诊断功能的计算机化自适应测验(Computerized Adaptive Testing,CAT),关键在于设计不同于传统CAT的选题策略。本文采用先认知诊断后估计能力的方法,在诊断阶段用状态转换图描述特定认知领域中所有知识状态及这些状态之间的... 构造具有认知诊断功能的计算机化自适应测验(Computerized Adaptive Testing,CAT),关键在于设计不同于传统CAT的选题策略。本文采用先认知诊断后估计能力的方法,在诊断阶段用状态转换图描述特定认知领域中所有知识状态及这些状态之间的联系,以图的深度优先搜索方法为基础设计选题策略;而在能力估计精细化阶段,每个被试所测项目,不仅与其能力估计值相匹配,且只与其所掌握的属性相关。本文采用蒙特卡罗模拟针对三种不同的属性结构进行试验,结果良好。 展开更多

关键词 认知诊断 计算机化自适应测验 选题策略 状态转换图.

在线阅读 下载PDF 职称材料

结合a分层的兼具项目曝光和广义测验重叠率控制的选题策略 被引量：3

10

作者 郭磊 王卓然 +1 位作者 王丰 边玉芳 《心理学报》 CSSCI CSCD 北大核心 2014年第5期702-713,共12页

测验安全和题库使用率在计算机化自适应测验中十分重要,特别是高风险测验。传统的SHGT法兼具同时控制项目曝光率和广义测验重叠率的功能,但题库使用率较差。a分层法能够提高题库使用率,但对过度曝光的项目控制不足。本研究将a分层法的... 测验安全和题库使用率在计算机化自适应测验中十分重要,特别是高风险测验。传统的SHGT法兼具同时控制项目曝光率和广义测验重叠率的功能,但题库使用率较差。a分层法能够提高题库使用率,但对过度曝光的项目控制不足。本研究将a分层法的思想与SHGT法相结合,各取所长,提出了3种新的选题方法:SHGT_a法,SHGT_b法和SHGT_c法。研究结果表明:(1)与SHGT法相比,新方法均可以在有效地控制项目曝光率和广义测验重叠率同时,极大地提高题库使用率;(2)随着预设项目曝光率(rmax)和广义测验重叠率(max?)取值的增大以及共享人数?的减小,新方法对被试能力估计的精度呈上升趋势。比起SHGT法,新方法仍能保持很高的题库使用率;(3)当区分度和难度的相关(rab)较大时,SHGT_b和SHGT_c法在能力估计精度方面优于SHGT_a法;(4)在不同的测验考察内容比例下,3种新方法对被试能力估计的精度均较好;(5)与SHGT法相比,新方法能够有效地控制项目曝光率过度控制的问题。 展开更多

关键词 项目曝光率 广义测验重叠率 计算机化自适应测验 a分层法 选题策略

在线阅读 下载PDF 职称材料

认知诊断自适应测验选题策略探新 被引量：11

11

作者 尚志勇 丁树良 《江西师范大学学报（自然科学版）》 CAS 北大核心 2011年第4期418-421,共4页

提出了一种新的认知诊断自适应测验选题策略和题库按项目所包含的属性模式分层方法.与传统方法相比,该方法不仅提高了测量精度而且可以提升选题速度.

关键词 认知诊断自适应测验 选题策略 按模式分层

在线阅读 下载PDF 职称材料

不定长CAT引入曝光因子的平均调整信息选题策略研究 被引量：1

12

作者 朱隆尹 丁树良 +1 位作者 程小扬 蓝立毅 《心理学探新》 CSSCI 北大核心 2015年第1期68-71,共4页

选题策略是CAT关键技术之一,好的选题策略应该能够较好地权衡考生能力估计精度和测验的安全性。从引入曝光因子的选题策略入手,通过调整信息平均的方法提出了引入曝光因子的平均调整信息选题法,实验数据表明新的选题策略能大大增强测验... 选题策略是CAT关键技术之一,好的选题策略应该能够较好地权衡考生能力估计精度和测验的安全性。从引入曝光因子的选题策略入手,通过调整信息平均的方法提出了引入曝光因子的平均调整信息选题法,实验数据表明新的选题策略能大大增强测验的安全性而不降低能力估计的精度。 展开更多

关键词 不定长CAT选题策略 曝光因子 极大平均调整信息策略 优化的极大平均调整信息策略

在线阅读 下载PDF 职称材料

多维计算机化自适应测验中项目曝光控制选题策略的比较 被引量：5

13

作者 毛秀珍 王娅婷 杨睿 《心理学探新》 CSSCI 北大核心 2019年第1期47-56,共10页

在MCAT中考查四种项目选择指标在有无曝光控制条件下的选题表现。项目选择指标分别是:(1)贝叶斯的D优化方法(D-optimality)、后验期望Kullback-Leibler方法(KLP)、基于等权重复合分数的最小误差方差方法(the minimized error variance o... 在MCAT中考查四种项目选择指标在有无曝光控制条件下的选题表现。项目选择指标分别是:(1)贝叶斯的D优化方法(D-optimality)、后验期望Kullback-Leibler方法(KLP)、基于等权重复合分数的最小误差方差方法(the minimized error variance of the linear combination scorewith equal weight,V1)和基于最优权重复合分数的最小误差方差方法(the minimized error variance ofthe composite score with optimized weight,V2)。将针对认知诊断CAT项目曝光控制的的限制阈值方法(Restrictive Threshold,RT)和限制进度(Restrictive Progressive,RPG)方法、单维CAT中的最大优先指标方法(Maximum Priority Index,MPI)推广到MCAT。模拟研究表明:(1) KLP,D-优化和V1对领域分数估计准确,能力返真性比V2更好。(2)尽管V1和V2方法相比KLP和D-优化方法提高了题库利用率,但这四种选题指标都产生不均匀的项目曝光率分布。(2)三种曝光控制策略都极大地提高项目曝光均匀性,且不明显降低测量精度。(3) MPI与RPG方法在曝光控制方面表现类似,且比RT的方法表现更好。 展开更多

关键词 多维项目反应理论 计算机化自适应测验 选题方法 测量精度 项目曝光率

在线阅读 下载PDF 职称材料

可达阵在认知诊断选题策略中的运用研究 被引量：3

14

作者 吴智辉 甘登文 丁树良 《江西师范大学学报（自然科学版）》 CAS 北大核心 2011年第4期422-426,共5页

在香农熵选题策略的基础上,采用4种不同的测验蓝图考察运用可达阵对诊断精度的影响.Monte Carlo模拟试验表明:选择可达阵所有列对应的项目对改进计算机化自适应诊断测验(CD-CAT)的诊断精度有着重要的作用,而且对于CD-CAT的选题策略有重... 在香农熵选题策略的基础上,采用4种不同的测验蓝图考察运用可达阵对诊断精度的影响.Monte Carlo模拟试验表明:选择可达阵所有列对应的项目对改进计算机化自适应诊断测验(CD-CAT)的诊断精度有着重要的作用,而且对于CD-CAT的选题策略有重要的参考价值.在CD-CAT过程中选择较多可达阵的列对应的项目能够明显提高模式判准率,项目质量对结果的影响不大;而未包含所有可达阵的列对应的项目时,项目质量对于模式判准率有较大的影响. 展开更多

关键词 可达阵 计算机化自适应测验 认知诊断 选题策略

在线阅读 下载PDF 职称材料

不定长认知诊断计算机化自适应测验终止规则研究 被引量：2

15

作者 艾国金 甘登文 +1 位作者 丁树良 熊建华 《江西师范大学学报（自然科学版）》 CAS 北大核心 2014年第5期441-444,共4页

目前大多数认知诊断计算机化自适应测验采用定长终止规则,该文提出3种不定长终止规则.通过实验对比,新方法较已有方法具有如下优势:i)能够较好地保障测验精度;ii)大幅降低了人均测验用题数;iii)人均测验用时也有所下降;iv)项目调用均衡... 目前大多数认知诊断计算机化自适应测验采用定长终止规则,该文提出3种不定长终止规则.通过实验对比,新方法较已有方法具有如下优势:i)能够较好地保障测验精度;ii)大幅降低了人均测验用题数;iii)人均测验用时也有所下降;iv)项目调用均衡性和题库安全性有所增强. 展开更多

关键词 认知诊断 计算机化自适应 不定长终止规则 MONTE CARLO模拟 题库安全

在线阅读 下载PDF 职称材料

结合优先级指标和曝光因子的多级评分选题策略 被引量：3

16

作者 汤楠 丁树良 余丹 《江西师范大学学报（自然科学版）》 CAS 北大核心 2011年第6期646-650,共5页

在等级反应模型(GRM)下考察改进的最大优先级指标(MMPI)中引入曝光因子的选题策略与其他选题策略之间的优劣.蒙特卡洛模拟中采用定长CAT,其中能力估计采用贝叶斯期望后验估计(EAP).研究结果表明,MMPI与曝光因子相结合的选题策略,在保证... 在等级反应模型(GRM)下考察改进的最大优先级指标(MMPI)中引入曝光因子的选题策略与其他选题策略之间的优劣.蒙特卡洛模拟中采用定长CAT,其中能力估计采用贝叶斯期望后验估计(EAP).研究结果表明,MMPI与曝光因子相结合的选题策略,在保证精度的情况下,很大程度上解决了曝光率不均匀问题. 展开更多

关键词 最大优先级指标 曝光因子 选题策略 计算机化自适应测验

在线阅读 下载PDF 职称材料

认知诊断计算机化自适应测验的选题策略 被引量：3

17

作者 唐倩 毛秀珍 +1 位作者 何明霜 何洁 《心理科学进展》 CSSCI CSCD 北大核心 2020年第12期2160-2168,共9页

随着认知诊断计算机化自适应测验(cognitive diagnostic computerized adaptive testing,CD-CAT)理论与实践的发展,兼顾知识状态与能力的双目标CD-CAT逐渐受到重视。选题策略是CAT的核心,通过梳理传统CD-CAT和双目标CD-CAT选题策略的研... 随着认知诊断计算机化自适应测验(cognitive diagnostic computerized adaptive testing,CD-CAT)理论与实践的发展,兼顾知识状态与能力的双目标CD-CAT逐渐受到重视。选题策略是CAT的核心,通过梳理传统CD-CAT和双目标CD-CAT选题策略的研究,并对它们的特点、关系及表现进行介绍和评析。最后,基于认知诊断模型与CAT实践发展指出未来应加强一般化认知模型、复杂测验条件认知诊断模型下选题策略的研究;应开发双目标诊断测验的项目和测验特征指标;还应加强非参数选题方法和CD-CAT的实践应用研究。 展开更多

关键词 计算机化自适应测验 认知诊断模型 选题策略 测量精度 非统计约束

在线阅读 下载PDF 职称材料