-
题名认知诊断评价中测验结构的优化设计
被引量:7
- 1
-
-
作者
彭亚风
罗照盛
喻晓锋
高椿雷
李喻骏
-
机构
江西师范大学心理学院
华南师范大学心理应用研究中心/心理学院
-
出处
《心理学报》
CSSCI
CSCD
北大核心
2016年第12期1600-1611,共12页
-
基金
江西省研究生创新专项基金(YC2015-B025)资助
-
文摘
Q矩阵是认知诊断评价的基础和核心要素,它反映了测验的构念和内容设计,直接影响着测验诊断分类的效果。本文采用Monte Carlo模拟,研究了6种属性层级关系下,不同的Q矩阵设计对于认知诊断效果的影响。用模式判准率的均值和标准差分别从分类准确性和稳定性的角度来评价诊断效果。实验结果表明:(1)不同属性层级关系下,分类准确性会随着测验长度的增加而提高,但当测验长度增加到一定程度时,会出现"天花板效应";(2)Q矩阵中R*的个数(NR*)会影响测验的分类准确性及稳定性:NR*越大,测验的分类稳定性越高,当测验长度为属性个数的整数倍,且NR*为测验长度相对属性个数的最大奇数倍时分类准确性最高;(3)Q矩阵中除R*以外的项目考察的属性个数会随着属性层级关系的不同对测验的分类准确性和稳定性产生不同的影响。根据实验结果,本研究提出了进行诊断评价时Q矩阵优化设计的一些建议。
-
关键词
认知诊断评价
Q矩阵
测验结构设计
分类准确性
分类稳定性
-
Keywords
cognitive diagnostic assessment
Q matrix
the design of test construct
classification accuracy
classification stability
-
分类号
B841
[哲学宗教—基础心理学]
-
-
题名基于作答数据的模型参数和Q矩阵联合估计
被引量:13
- 2
-
-
作者
喻晓锋
罗照盛
秦春影
高椿雷
李喻骏
-
机构
江西师范大学心理学院
亳州师范高等专科学校
-
出处
《心理学报》
CSSCI
CSCD
北大核心
2015年第2期273-282,共10页
-
基金
国家自然科学基金(31160203
31100756
+8 种基金
31360237)
国家社会科学基金(12BYY055)
教育部人文社会科学研究青年基金项目(13YJC880060)
安徽省高校省级优秀青年人才基金重点项目(2013SQRL127ZD)
安徽省自然科学研究项目(KJ2010B123
KJ2013B151)
高等学校博士学科点专项科研基金(20113604110001)
江西省研究生创新专项基金(YC2013-B024)
安徽省哲学社会科学规划项目(AHSKY2014D102)资助
-
文摘
Q矩阵在认知诊断的模型参数估计和诊断分类中起着重要作用。本文通过研究Liu等人的方法,设计了同时估计项目参数和Q矩阵的联合估计算法。在DINA模型下,对项目参数未知时开展模拟研究。研究假设项目为20个,考察的属性个数分别是3、4和5,初始Q矩阵中分别存在3、4和5个属性界定错误的项目。结果表明,联合估计算法能在错误的初始Q矩阵基础上以很高的概率得到正确的Q矩阵。另外,当专家认定测验的属性个数存在错误时,该方法推导的Q矩阵和模型参数能提供很好的鉴别Q矩阵错误的信息。
-
关键词
认知诊断评价
Q矩阵
T矩阵
联合估计
DINA模型
-
Keywords
cognitive diagnostic assessment
Q-matrix
T-matrix
joint estimate
DINA model
-
分类号
B841
[哲学宗教—基础心理学]
-
-
题名CD-MST初始阶段模块组建方法比较
被引量:3
- 3
-
-
作者
高椿雷
罗照盛
喻晓锋
彭亚风
郑蝉金
-
机构
江西师范大学心理学院
江西师范大学初等教育学院
-
出处
《心理学报》
CSSCI
CSCD
北大核心
2016年第8期1037-1046,共10页
-
基金
国家自然科学基金(31500909)
2014年江西省高校人文社会科学一般项目(XL1403)
+1 种基金
2015年江西省高校人文社会科学项目(XL1509)
江西省研究生创新基金(YC2015-B025)资助
-
文摘
具有认知诊断功能的计算机化多阶段测验(CD-MST)是CDA和MST相结合的一种测验方式。由于CD-MST自适应频次较少,初始阶段模块组建会影响整个测验的判准率。借鉴CD-CAT初始项目选取方法,根据CDA和MST自身特点,提出了7种CD-MST初始阶段模块组建方法,分别是随机法、选题策略法、R*矩阵法、CTTID法、CDI法、CTTIDR*法和CDIR*法。采用模拟研究对不同项目质量下7种方法的判准率进行了比较。研究结果表明,当初始阶段结束时,包含R*矩阵的方法判准率显著高于其他方法,尤其是CTTIDR*法;整个测验结束时,CTTIDR*法较其他方法仍然有优势,CDIR*法和R*矩阵法结果较为接近。选题策略法在初始阶段结束时判准率较低,甚至低于随机法,整个测验结束时,判准率同CDIR*法和R*矩阵法持平。4种项目质量对判准率影响较大,HD-HV题库下判准率最高,HD-LV次之,LD-HV较差,LD-LV最差。
-
关键词
认知诊断评价
计算机化多阶段测验
具有认知诊断功能的计算机化多阶段测验
初始阶段模块组建方法
-
Keywords
CDA
MST
CD-MST
initial stage module assemble methods
-
分类号
B841
[哲学宗教—基础心理学]
-