德国COMET评分量表在我国应用的多面Rasch模型分析 被引量：5

1

作者 何兴国 赵志群 何壮 《职业技术教育》 北大核心 2016年第25期69-74,共6页

德国COMET评分量表是职业能力测评的重要评价工具,其蕴含着设计导向的职业教育思想和综合职业能力的人才培养目标,对我国职业教育评价及改革都具有重要借鉴意义。运用项目反应理论之多面Rasch模型,对COMET评分量表在我国学生职业能力测... 德国COMET评分量表是职业能力测评的重要评价工具,其蕴含着设计导向的职业教育思想和综合职业能力的人才培养目标,对我国职业教育评价及改革都具有重要借鉴意义。运用项目反应理论之多面Rasch模型,对COMET评分量表在我国学生职业能力测评中的适用性进行了分析。结果表明:COMET评分量表总体区分度较高,能够有效地区分我国职业教育背景下的学生职业能力水平;我国学生对COMET评分量表部分项目存在着不适应现象,部分学生答题行为内部一致性较差;我国教师对COMET评分量表宽严尺度把握内部一致性较好,但不同评分教师个体之间的宽严程度还存在差异;评分教师与评分项目交互作用也存在一些显著偏差。 展开更多

关键词 COMET评分量表 多面rasch模型 项目分析 职业能力测评 职业院校

在线阅读 下载PDF 职称材料

多面Rasch模型在结构化面试中的应用 被引量：25

2

作者 孙晓敏 薛刚 《心理学报》 CSSCI CSCD 北大核心 2008年第9期1030-1039,共10页

使用项目反应理论中的多面Rasch模型,对66名考生在结构化面试中的成绩进行分析,剔除了由于评委等具体测量情境因素引入的误差对原始分数的影响,得到考生的能力估计值以及个体水平的评分者一致性信息。对基于考生能力估计值和考生面试分... 使用项目反应理论中的多面Rasch模型,对66名考生在结构化面试中的成绩进行分析,剔除了由于评委等具体测量情境因素引入的误差对原始分数的影响,得到考生的能力估计值以及个体水平的评分者一致性信息。对基于考生能力估计值和考生面试分得到的决策结果进行比较,发现测量误差的确对决策造成影响,对个别考生的影响甚至相当巨大。进一步使用Facets偏差分析以及评委宽严程度的Facets分析追踪误差源。结果表明,将来自不同面试组的被试进行面试原始成绩的直接比较,评委的自身一致性和评委彼此之间在宽严程度上的差异均将导致误差。研究表明,采用Facets的考生能力估计值作为决策的依据将提高选拔的有效性。同时,Facets分析得到的考生个体层次的评分者一致性指标,以及评委与考生的偏差分析等研究结果还可以为面试误差来源的定位提供详细的诊断信息。 展开更多

关键词 结构化面试 项目反应理论 多面rasch模型

在线阅读 下载PDF 职称材料

基于多面Rasch模型的商务英语口语测试评分研究 被引量：5

3

作者 揭薇 《山东外语教学》 2018年第3期22-32,49,共12页

信度和效度研究较多考察通用英语测试,而对专门用途英语测试的效度微观研究则相对缺失。本文应用FACETS软件对某高校VECTOR商务英语主观题型测试进行分析,从微观上对评分者严厉程度、考生能力差异、试题难易度差异进行进一步分析。结果... 信度和效度研究较多考察通用英语测试,而对专门用途英语测试的效度微观研究则相对缺失。本文应用FACETS软件对某高校VECTOR商务英语主观题型测试进行分析,从微观上对评分者严厉程度、考生能力差异、试题难易度差异进行进一步分析。结果显示,与其他通用英语主观题型测试的经验性结论相比,商务英语话题任务难度差异大,评卷者严厉度存在显著差异。本研究的结论有助于解释商务英语口语测试效度,并且利用该模型对评分者进行培训,从而改善考试设计、控制评分质量,改进评分标准和提高考试效度,这对相关教学和测试意义重大。 展开更多

关键词 商务英语口语测试 评分员 多面rasch模型 FACETS

在线阅读 下载PDF 职称材料

基于GT和多面Rasch模型的结构化面试分析 被引量：6

4

作者 徐思 张敏强 黎光明 《心理学探新》 CSSCI 2009年第5期77-82,共6页

该研究应用GT和多面Rasch模型对结构化面试数据进行分析,并提出一些建议。针对某辅导员招聘面试数据,运用GT从宏观上分析应聘者、考官和项目所带来的总体误差大小。在此基础上,运用多面Rasch模型从微观上进一步探查考官严厉度、应聘者... 该研究应用GT和多面Rasch模型对结构化面试数据进行分析,并提出一些建议。针对某辅导员招聘面试数据,运用GT从宏观上分析应聘者、考官和项目所带来的总体误差大小。在此基础上,运用多面Rasch模型从微观上进一步探查考官严厉度、应聘者能力差异、项目难易度及侧面偏差。结果表明:1)GT分析表明应聘者产生的变异较大(90.65%),说明面试可靠性较高,且当考官数为2时可靠性已较好。2)多面Rasch模型分析出了各侧面效应中的非拟合因素及交互效应中的偏差因素,表明面试误差主要来自考官间严厉度的差异及其自身一致性的不稳定。将GT与多面Rasch模型相结合分析面试数据不仅能测查出评价过程各方面的问题因素,并能更好地作整体把握。 展开更多

关键词 概化理论 多面rasch模型 结构化面试

在线阅读 下载PDF 职称材料

采用多面Rasch模型提高英语运用测试的评分质量 被引量：5

5

作者 杨睿 《开放教育研究》 CSSCI 北大核心 2011年第5期73-78,共6页

目前电大系统英语考试的口试和作文部分多采用语言运用测试的方式。语言运用测试由于引入评分者而使评分的主观性变大。如何控制评分者差异对考生分数的影响成为保证语言运用测试评分质量的重要环节。本文在比较了行为测试中评分质量控... 目前电大系统英语考试的口试和作文部分多采用语言运用测试的方式。语言运用测试由于引入评分者而使评分的主观性变大。如何控制评分者差异对考生分数的影响成为保证语言运用测试评分质量的重要环节。本文在比较了行为测试中评分质量控制方面常用的三种理论的基础上,着重介绍了多面Rasch模型在提高评分质量方面的贡献,并探讨了在电大系统如何采用该模型对英语运用测试中的评分者进行培训,以控制评分质量和提高考试信度。 展开更多

关键词 多面rasch模型 评分者差异 评分者培训 行为测试

在线阅读 下载PDF 职称材料

大学生团队协作能力测评的多面Rasch分析 被引量：1

6

作者 黄明明 《心理技术与应用》 2015年第10期23-29,共7页

本文以一个大学社团的团体协作项目活动的参赛大学生为测评对象,运用多面Rasch模型从参赛选手、评分者和测评内容三个侧面考察团队协作能力测评的有效性。结果发现,参赛选手的团队协作能力大都处于中等水平且彼此间相差不大,4位评分者... 本文以一个大学社团的团体协作项目活动的参赛大学生为测评对象,运用多面Rasch模型从参赛选手、评分者和测评内容三个侧面考察团队协作能力测评的有效性。结果发现,参赛选手的团队协作能力大都处于中等水平且彼此间相差不大,4位评分者的评分宽严度较低且不一致,评分者在评分过程中产生了偏差。另外,文章还揭示了团队协作能力的结构,为培养大学生团队协作能力提供了参考依据。 展开更多

关键词 团队协作能力 多面rasch模型 大学生 评分者效应

在线阅读 下载PDF 职称材料

结构化面试评定量表的现代测量学分析 被引量：10

7

作者 孙晓敏 张厚粲 《应用心理学》 CSSCI 2007年第3期250-256,共7页

结构化面试作为使用最为普遍的人事选拔技术之一受到越来越多研究者的关注。本研究与传统分析方法和内容不同,选用IRT的Rasch模型的拓展——多面Rasch模型,对某次结构化面试中两组12位评委对66名考生的面试数据进行分析,主要对面试中10... 结构化面试作为使用最为普遍的人事选拔技术之一受到越来越多研究者的关注。本研究与传统分析方法和内容不同,选用IRT的Rasch模型的拓展——多面Rasch模型,对某次结构化面试中两组12位评委对66名考生的面试数据进行分析,主要对面试中10点量表的使用进行了检测。结果表明:在面试的五个维度中,10点量表并未完全使用,低端的3个等级未被使用;总体而言,考生在各维度上得到的评定越高就越有能力,但在综合分析和口头表达两个维度上,出现了等级评定和考生能力倒挂现象;而且,在各个面试维度上均发现了评定等级的非等距性。 展开更多

关键词 结构化面试 评定量表 多面rasch模型

在线阅读 下载PDF 职称材料

新高考背景下英语学科思维品质评价框架构建

8

作者 马利红 《语言教育》 2025年第1期11-18,129,共9页

在英语教学中培养学生的思维品质已成共识,但如何评价英语学科思维品质尚未形成共识。本研究基于《普通高中英语课程标准》(2017年版)和相关文献构建英语学科思维品质评价框架,采用专家调查法修订完善,并基于实证研究进行效度验证,形成... 在英语教学中培养学生的思维品质已成共识,但如何评价英语学科思维品质尚未形成共识。本研究基于《普通高中英语课程标准》(2017年版)和相关文献构建英语学科思维品质评价框架,采用专家调查法修订完善,并基于实证研究进行效度验证,形成思维的批判性、逻辑性和创新性三维一体英语学科思维品质评价框架,涵盖质疑批判、反思评估、分析综合、推理判断、好奇开放、创意生成6个评价指标,4个等级水平。该框架对新高考背景下英语学科思维品质培养和评价研究具有借鉴意义。 展开更多

关键词 思维品质 核心素养 新高考 多面rasch模型

在线阅读 下载PDF 职称材料

分步增值评分——提高主观题评分质量的有效方法 被引量：1

9

作者 刘斯佳 张建新 《心理学探新》 CSSCI 北大核心 2015年第3期266-271,共6页

主观题特别是作文题评分的客观性和有效性存在着一定的问题,有必要通过优化评分流程降低作文评分的误差程度。本研究通过多面Rasch模型对500份国家级考试作文题的评分进行了分析,比较了分步增值评分模式和传统综合评分模式对评分成绩的... 主观题特别是作文题评分的客观性和有效性存在着一定的问题,有必要通过优化评分流程降低作文评分的误差程度。本研究通过多面Rasch模型对500份国家级考试作文题的评分进行了分析,比较了分步增值评分模式和传统综合评分模式对评分成绩的影响。结果显示,相对于综合评分模式,分步增值评分模式对评分结果的分布和区分度更好、评分者在评分偏差程度指标上的表现更加理想。虽然作文题评分依然普遍存在着评分等级不一致的问题,但采取分步增值评分模式可以提高评分成绩的合理性,并且更好地控制评分者评分成绩间的差异。此外,这种评分模式还能有效提高评分程序的效率。 展开更多

关键词 作文 分步增值评分 综合评分 多面rasch模型 评分效率

在线阅读 下载PDF 职称材料

GT与IRT的比较:北京奥运会男子10米跳台跳水分析 被引量：8

10

作者 俞宗火 唐小娟 王登峰 《心理学报》 CSSCI CSCD 北大核心 2009年第8期773-784,共12页

概化理论(GT)和项目反应理论(IRT)从两个不同的方向发展了经典测量理论,GT和IRT中的多面Rasch测量模型(MFRM)在主观评分中都可以用来估计评分中各变异来源对变异的贡献,对测评的信度进行估计,提出测评改进意见。12名运动员参加了2008北... 概化理论(GT)和项目反应理论(IRT)从两个不同的方向发展了经典测量理论,GT和IRT中的多面Rasch测量模型(MFRM)在主观评分中都可以用来估计评分中各变异来源对变异的贡献,对测评的信度进行估计,提出测评改进意见。12名运动员参加了2008北京奥运会男子10米跳台跳水决赛,比赛共6个回合,7名裁判独立对他们在各个回合的表现进行打分。GT和MFRM比较一致地认为运动员自身、回合、运动员与回合的交互效应是运动员得分的重要变异来源,而裁判员对运动员得分差异的贡献不显著。MFRM同时还估计出难度系数是影响男子跳台跳水成绩的重要变异来源,在评分等级6.5附近存在步校准错乱,得出的运动员成绩排序与2008奥运实际排序有所不同。在GT中难度系数作为隐藏侧面,其效应未能分离出来。GT和MFRM从两个不同的方面给测量提供改进意见:GT发现可以通过增加回合数来提高g系数,而增加裁判数对其影响不大。MFRM给出各侧面的要素(如某裁判、运动员等)的估计值及其标准误,它给出的诊断性拟合统计也有助于甄别异常得分或评分模式。 展开更多

关键词 概化理论 多面rasch测量模型 主观评分

在线阅读 下载PDF 职称材料

评分与共享

11

作者 中原 《开放教育研究》 CSSCI 北大核心 2011年第5期F0002-F0002,共1页

读完这一期的杂志，感觉要数杨睿的《采用多面Rasch模型提高英语运用测试的评分质量》最好了!据说，环太平洋国家的英语运用测试国际会议最近要在浙江省的嘉兴市召开，主办方邀请我去参加这个会议。说实在的，中国的人很多很多，学习英... 读完这一期的杂志，感觉要数杨睿的《采用多面Rasch模型提高英语运用测试的评分质量》最好了!据说，环太平洋国家的英语运用测试国际会议最近要在浙江省的嘉兴市召开，主办方邀请我去参加这个会议。说实在的，中国的人很多很多，学习英语的人也不少，要学习就得考试，考试了就得打分，而打分的主观意志很强，难免会出现分数的高低。我们所说的教育公平如何体现？这需要研究，是好的方法我们就得学习，就得运用。外面的世界很大很大，总有好的方法林立其中。中央电大的英语考试能否运用这一方法，给更多的人以公平，我觉得是可以试试看的。杂志人就是这样，是好文章总得夸奖一番。 展开更多

关键词 多面rasch模型 共享 评分 学习英语 英语考试 英语运用 教育公平 太平洋国家

在线阅读 下载PDF 职称材料

第九届“新标准杯”基础英语教育教学论文大赛获奖名单

12

《山东师范大学外国语学院学报（基础英语教育）》 2013年第6期105-106,共2页

一等奖（8名）蒋京丽杨鲁新王华伟姚连荣范咏梅朱括杨清军孙勇卞永成刘东杰初中英语课堂活动指导语的问题及优化策略基于行动教育理论的中学英语教师在职发展模式研究两种词汇教学模式对初中生英语词汇记忆广度和深度的影响河南省农村... 一等奖（8名）蒋京丽杨鲁新王华伟姚连荣范咏梅朱括杨清军孙勇卞永成刘东杰初中英语课堂活动指导语的问题及优化策略基于行动教育理论的中学英语教师在职发展模式研究两种词汇教学模式对初中生英语词汇记忆广度和深度的影响河南省农村中小学英语教师现状调查两个版本的（（英语课程标准》 展开更多

关键词 评价标准 教育教学论文 获奖名单 基础英语 英语教师专业发展 多面rasch模型 大赛 英语课程标准

在线阅读 下载PDF 职称材料