熟悉自己学生的教师,在判卷时很难做到客观,导致信度较低。在评分时。经常出现一种现象一一晕轮效应,即教师对学生的总体印象影响到对论文题目的评价。 (2)问题解决题。问题解决题是向学生提供一定的问题情境和目标情境,要求学生通过对知识进行组织、选择和运用等复杂的程序来解决问题。通常有两种形式,一种是间接测验,是采用纸笔测验来评价学生的学业成就或能力。学生在完成时,通常必须写出若干步骤或过程,以展现他的思路。评分时,按照步骤计分。如果缺少某些步骤就不能得分。问题解决题的另一种方式则是直接测验。由于它考查了学生处理实际问题的能力。所以有时又叫做操作
评价。操作评价对于考查高级思维技能十分有效,但是往往费时费钱。而且主观性较大,并且效度也经常受到质疑。 (四)有效自编测验的特征 1.信度
信度是指测验的可靠性,即多次测验分数的稳定、一致的程度。它既包括在时间上的一致性,也包括内容和不同评分者之间的一致性。
信度指标通常以相关系数表示.即用同一被试样本所得的两组资料的相关系数作为测量一致性的指标,称为信度系数。影响信度的相关因素有:①测题数量;②测验难度;③施测对象;④施测过程。 (1)重测信度法
同样的问卷,对同一组访问对象在尽可能相同的情况下,在不同时间进行两次测量。两次测量相距一般在两到四周之内。用两次测量结果间的相关分析或差异的显著性检验方法,评价量表信度的高低。 (2)折半法。折半法是将上述两份问卷合成一份问卷(通常要求这两份问卷的问题数目相等),每一份作为一部分,然后考察这两个部分的测量结果之间的相关性。 (3)折半信度法
折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷(如年
龄与性别无法相比),常用于态度、意见式问卷的信度分析。在问卷调查中,态度测量最常见的形式是5级李克特量表。 2.效度
效度是指测量的正确性,即一个测验能够测量出其所要测量的东西的程度,它是科学测量工具最重要的质量指标。效度考虑的问题是:测验测量什么?测验对测量目标的测量精确性和真实性有多大?效度的重要性大于信度。但效度并不是绝对的,而是相对的.任何一种测验只是对一定的目的来说是有效的,对其他目的和用途却不一定有效。
(1)内容效度:指项目对欲测的内容或行为范围取样的适当程度。例如,教师在讲授
相关推荐: