如何评判测试质量.ppt

英语学科教育测量与评价 如何评判测试的质量 效度与信度  英语学科教育测量与评价 、效度( Validity) 口定义: 效度,又称有效性,它是指一套测试所考的是 否就是设计人想要考的内容,或者说,在多大 程度上考了想要考的。(刘润清,韩宝成: 2000) 效度指证据支持我们根据测试分数作出的推论 的程度。(王振亚:2009) ■效度就是考试达到其预期测试意图的程度。 (邹申,杨任明:2000)  英语学科教育测量与评价 、效度( Validity) 口分类 内容效度 ■结构效度内在效度 ■尺度关联效度 口预测效度}外在效度 口共时效度 表面效度 反应效度 使用效度 ■后效效度—超考试效度  英语学科教育测量与评价 、效度( Validity) 口内容效度( content Validity) 指测试是否考了考试大纲规定要考的,或者说考试的题 目在多大程度上能代表它所要测量的目标 内容效度研究关注测量工具内容上的代表性或所选内容 样的充分性。 如何检验内容效度 口测试的内容是否和测试目标有关 口测试内容(试题)是否具有代表性 口测试内容是否适合测试对象 如何保证测试内容的高效度 口食愣都骨鬟考辏这美利款随目标,制定考 口题目编制好后,要请有经验的老师或专家审阋。  英语学科教育测量与评价 、效度( Validity) 结构效度( construct validity) 口结构效度指测试是否依有效的语言观(包括语言学 习观和语言运用观)为依据 口这里的结构不是指试卷的结构或题目的编排,而是三 指整个考试的理论基础。 口结构效度是所有其它效度之本。结构效度决定了整 个考试的性质,决定了考试属于哪一代体系。 口一项测试的结构效度的高低是指考试的结果能在多 大程度上解释人的语言能力及与语言能力有关的心三 理特征。  英语学科教育测量与评价 、效度( Validity) 口尺度关联效度( criterion- related validity) 主要指本考试与某一个“独立并且相当可靠的学生 能力测量工具”之间的关联程度。 口共时效度( concurrent validity) 口预测效度( predictive validity) ■共同点 口都是借用另一个考试来作为验证标准。即对用一个受 试群进行两次考试。第一次考的是需要验证的考试, 第二次考的是借作验证标准的考试。然后计算两次考」 试结果分数的高低排列的相关系数,作为效度数据  英语学科教育测量与评价 、效度( Validity) 不同点: 口考试时间不同。验证共时效度,要求两次考试在受 试群的目标能力还不可能产生变化的时间之内举行; 验证预测效度,要求第二次考试在受试群的目标能 力应该已经有所发展或变化之后举行。 口对作为验证的试卷的要求不同。共时效度中使用的 尺度也不一定是一份公认的试卷,比如教师对学生 的排序也可以作为参照尺度 口考试目的不同。共时效度说明考试是否能判断受试 者目标能力的当前现状;预测效度说明考试是否能 预测受试者目标能力将来的发展。  英语学科教育测量与评价 、效度( Validity) 口表面效度( face validity) ■指由非测试专家(教育机构的主管人员、未经 测试理论与实践培训的教师和学生等)对某 测试的内容和形式适合于测试目标的程度的主 观判断。  英语学科教育测量与评价 、效度( Validity) 口反应效度( response validity) 指的是研究收集有关应试者答题策略和风格的 数据来确定测试的合理性程度。 反应效度研究的是测试的过程,关注的是受试 者做题的时候是否按试题设计的要求去作出反