特殊儿童教育评估-第三章-心理计量评估基本知识-.pptx
《特殊儿童教育评估-第三章-心理计量评估基本知识-.pptx》由会员分享,可在线阅读,更多相关《特殊儿童教育评估-第三章-心理计量评估基本知识-.pptx(82页珍藏版)》请在咨信网上搜索。
1、第三章第三章 心理计量评估的基本知识心理计量评估的基本知识2024/5/22 周三1 1第一节第一节 信度与效度信度与效度信度和效度是衡量信度和效度是衡量测验性能测验性能的两个重要指标,反应的两个重要指标,反应测验的质量测验的质量。一、信度(一、信度(reliabilityreliability)(一)含义:(一)含义:同一被试者在不同时间内用同一同一被试者在不同时间内用同一测验重复测验重复测量,所得测量,所得结果的一致程度结果的一致程度。是指测量结果的稳定性和可靠性程度。信度只。是指测量结果的稳定性和可靠性程度。信度只受受随机误差的随机误差的影响。影响。理论上:理论上:真分数真分数 实得分数
2、实得分数 随机误差随机误差信度信度=真分数方差真分数方差/实得分数方差实得分数方差实际中:实际中:一一组受测着在同一个测验上两次施测所取得的两组分数之组受测着在同一个测验上两次施测所取得的两组分数之间的相关系数来表示,这个相关系数为间的相关系数来表示,这个相关系数为信度系数。信度系数。方差是各个数据与其算术平均数的离差平方和的平均数。方差是各个数据与其算术平均数的离差平方和的平均数。2024/5/22 周三2 2信度信度的作用的作用信度信度是测量过程中所存在的随机误差大小的反映。信度低,测量随机是测量过程中所存在的随机误差大小的反映。信度低,测量随机误差大,测量结果就会与真分数发生较大偏离。误
3、差大,测量结果就会与真分数发生较大偏离。信度是衡量一个测验好坏的重要指标之一,测验的信度达到多少才可信度是衡量一个测验好坏的重要指标之一,测验的信度达到多少才可以接受呢?一般来讲,能力与成就测验的信度应该在以接受呢?一般来讲,能力与成就测验的信度应该在0.900.90以上,人格测以上,人格测量信度系数应该在量信度系数应该在0.80 0.80 以上。以上。测量中的系统误差与信度无关。测量中的系统误差与信度无关。2024/5/22 周三3 3(二)检验方法(二)检验方法1.稳定性系数:又称再测信度。使用同一测验,在同样条件下对同一组被试者前后施测两次前后施测两次测验,求两次得分间的相关系数。其大小
4、等于同一组被试在两次测验上其大小等于同一组被试在两次测验上所得分数的积差相关系数。所得分数的积差相关系数。一般是两周到四周较宜,间隔时间最好不超过六个月。一般是两周到四周较宜,间隔时间最好不超过六个月。2024/5/22 周三4 4重测信度使用的条件重测信度使用的条件(1 1)所测量的心理特质必须是稳定的)所测量的心理特质必须是稳定的(2 2)遗忘和练习的效果基本上相互抵消)遗忘和练习的效果基本上相互抵消(3 3)在两次测试时间间隔内,被试在所要测查的心理特质)在两次测试时间间隔内,被试在所要测查的心理特质方面没有其他的学习和练习方面没有其他的学习和练习2024/5/22 周三5 52.2.复
5、本复本信度(信度(Alternate-form reliabilityAlternate-form reliability)含义含义与计算与计算是指两个平行测验测量同一批被试所得结果的一致程是指两个平行测验测量同一批被试所得结果的一致程度,其大小等于同一组被试在两个复本测验上所得分度,其大小等于同一组被试在两个复本测验上所得分数的积差相关系数。计算公式同重测信度。数的积差相关系数。计算公式同重测信度。2024/5/22 周三6 6两个复本测验实施的时间不同,复本信度所表两个复本测验实施的时间不同,复本信度所表达的含义略有不同。达的含义略有不同。(1 1)等值性系数)等值性系数如果两个复本测验是
6、同时连续测试的,则称这如果两个复本测验是同时连续测试的,则称这种复本信度为等值性系数。等值性系数的大小主种复本信度为等值性系数。等值性系数的大小主要反映着两个复本测验的题目差别带来的变异情要反映着两个复本测验的题目差别带来的变异情况。况。2024/5/22 周三7 7()稳定性与等值性系数()稳定性与等值性系数如果两个复本测验是相距一段时间分两次测试,如果两个复本测验是相距一段时间分两次测试,则称这种复本信度为稳定性与等值性系数。此时则称这种复本信度为稳定性与等值性系数。此时两个题目间的差别、两次施测情境、被试特质水两个题目间的差别、两次施测情境、被试特质水平等方面的差别都会成为测验结果不一致
7、的原因。平等方面的差别都会成为测验结果不一致的原因。2024/5/22 周三8 8复本复本信度使用的条件信度使用的条件(1 1)两个测验必须在项目的内容、形式、数量、难易、)两个测验必须在项目的内容、形式、数量、难易、时限、指导语等方面相同或相似。时限、指导语等方面相同或相似。(2 2)两次测验的时间间隔要适当。)两次测验的时间间隔要适当。局限:局限:(1 1)复本法只能减少而不能排除练习和记忆效应。)复本法只能减少而不能排除练习和记忆效应。(2 2)对于许多测验来说要建立复本是非常困难的。)对于许多测验来说要建立复本是非常困难的。2024/5/22 周三9 93.3.分半信度分半信度(Spl
8、it-half reliabilitySplit-half reliability)含义含义与计算与计算是指将一个测验分成对等的两半后,是指将一个测验分成对等的两半后,所有被试在这两半上得分的一致性。所有被试在这两半上得分的一致性。分半信度信度与等值性系数的解释一分半信度信度与等值性系数的解释一样,即可以把对等的两半测验看成是样,即可以把对等的两半测验看成是最短时距内施测的两个平行测验。分最短时距内施测的两个平行测验。分半信度描述的是两半题目间的一致性,半信度描述的是两半题目间的一致性,所以也叫内部一致性系数。所以也叫内部一致性系数。2024/5/22 周三1010注意题目分半的方法:按题号奇
9、偶性分半、注意题目分半的方法:按题号奇偶性分半、按题目难度分半、按题目内容分半等。按题目难度分半、按题目内容分半等。计算方法与复本信度类似,但被试在两半测计算方法与复本信度类似,但被试在两半测验上得分的相关系数只是半个测验的信度,验上得分的相关系数只是半个测验的信度,所以必须用斯皮尔曼所以必须用斯皮尔曼布朗公式加以校正:布朗公式加以校正:2024/5/22 周三11 11使用使用的前提条件和范围的前提条件和范围分半信度通常是在只能施测一次或没有复本的分半信度通常是在只能施测一次或没有复本的情况下使用。其中使用斯皮尔曼情况下使用。其中使用斯皮尔曼布朗公式时布朗公式时要求全体被试在两半测验分数的变
10、异数相等。要求全体被试在两半测验分数的变异数相等。当测验无法分成对等的两半时,无法使用。当测验无法分成对等的两半时,无法使用。2024/5/22 周三12124.4.同质性同质性信度(信度(Homogeneity reliabilityHomogeneity reliability)含义含义同质性信度也叫内部一致性系数,它是测验同质性信度也叫内部一致性系数,它是测验内部所有题目间的一致性程度。这里的一致性内部所有题目间的一致性程度。这里的一致性有两种含义:一是所有题目都测的是同一种心有两种含义:一是所有题目都测的是同一种心理特质,二是所有题目得分之间都具有较高的理特质,二是所有题目得分之间都具
11、有较高的正相关。同质性信度就是一个测验所测内容或正相关。同质性信度就是一个测验所测内容或特质的相同程度。特质的相同程度。2024/5/22 周三13135.5.评分者信度评分者信度(Scorer reliabilityScorer reliability)含义含义与计算与计算评分者信度指的是多个评分者给同一批人的答卷进行评评分者信度指的是多个评分者给同一批人的答卷进行评分的一致性程度。对于主观试题,不同的评分者给出的分的一致性程度。对于主观试题,不同的评分者给出的分数是不等的,这样会造成误差,如何降低评分者信度分数是不等的,这样会造成误差,如何降低评分者信度是心理测量的重要任务之一。是心理测量
12、的重要任务之一。2024/5/22 周三1414二、效度二、效度(validityvalidity)(一)含义效度是指所测量的与所所要要测量的测量的心理特点之间符合的程度,或者简单地说是指一个心理测验的准确性。测量的效度既受随机误差的影响,同时也受系统误差的影响。效度是随机误差和系统误差的综合反映。效度是随机误差和系统误差的综合反映。判断一个测量是否有效要从多方面收集证据。判断一个测量是否有效要从多方面收集证据。例如:一个小学数学测验的成绩若同时受到数学能力和语文能力(读懂题例如:一个小学数学测验的成绩若同时受到数学能力和语文能力(读懂题意的能力)的影响,测试结果成绩低,就不能认为实际所要测的
13、数学能力意的能力)的影响,测试结果成绩低,就不能认为实际所要测的数学能力这一心理特质水平不高。这一心理特质水平不高。2024/5/22 周三1515效度的数学定义效度的数学定义测验分数测验分数 =有效分数有效分数 +系统误差系统误差 +随机误差随机误差测验分数的方差测验分数的方差=有效有效分数的方差分数的方差+系统误差的方差系统误差的方差+随机误差的方差随机误差的方差效度为有效分数的方差与测验分数方差的比效度为有效分数的方差与测验分数方差的比返回返回2024/5/22 周三1616信度信度是指测试方法不受是指测试方法不受随机误差随机误差干扰的程度,反映干扰的程度,反映测试结果测试结果的一致性和
14、的一致性和稳定性稳定性(consistency,and stability(consistency,and stability)。效度效度反映反映测试的测试的准确性准确性(accuracyaccuracy),即在多大程度上测量了,即在多大程度上测量了想要测的内容想要测的内容。信度和效度的共同点都是以相关系数来表示其大小的。都是整个运用问卷调查技术进行科研工作的可靠性保证。信度和效度的不同点涉及的误差不同 信度仅考虑随机误差占测验总变异的比例;效度则还包括与测验无关但稳定的测量误差。研究的角度不同 信度:测量的质量 效度:问卷的质量2024/5/22 周三1717总而言之,信度和效度相互排斥又相
15、互依存;没有信度就不可能有效度;没有效度,信度就毫无意义;高信度可能带来低效度;高效度也可能带来低信度。举例来说举例来说2024/5/22 周三1818三、效度的种类1.1.内容效度内容效度2.2.效标关联效度效标关联效度3.3.结构效度结构效度返回返回2024/5/22 周三19191.1.内容效度内容效度(content validitycontent validity)(1)(1)内容效度内容效度的的含义含义 测验项目测验项目对所要测量的内容范围的代表性对所要测量的内容范围的代表性程度程度。估计估计一个测验的内容效度就是确定该测验在多大程度上一个测验的内容效度就是确定该测验在多大程度上代
16、表了所要测量的心理特质。代表了所要测量的心理特质。或者说内容效度就是或者说内容效度就是测验的测题测验的测题对对测验内容测验内容范围范围的代表的代表程度。程度。2024/5/22 周三2020(2 2)验证验证测验内容效度的一般测验内容效度的一般程序程序以教育测验为以教育测验为例例-专家判断的方法专家判断的方法内容效度的确定方法主要是逻辑分析的方法。其工作思路是请专内容效度的确定方法主要是逻辑分析的方法。其工作思路是请专家对测验题目与原定内容范围的吻合程度作出判断。步骤如下家对测验题目与原定内容范围的吻合程度作出判断。步骤如下:1 1)明确明确测验目的及测验内容的测验目的及测验内容的范围。范围。
17、2 2)编制编制双向细目双向细目表表,确定每个题目所测的内容,并与测验编制者确定每个题目所测的内容,并与测验编制者所列的双向细目表对照所列的双向细目表对照3 3)确定确定每一小格中的测题每一小格中的测题数量。数量。4 4)写出鉴定报告,写出鉴定报告,考察题目对所定义的内容范围的覆盖率、判断考察题目对所定义的内容范围的覆盖率、判断题目难度与能力要求之间的差异等。题目难度与能力要求之间的差异等。2024/5/22 周三2121双向细目表举例识记识记理解理解应用应用分析分析综合综合评价评价合计合计第一章第一章8210第二章第二章10621028第三章第三章3624722第四章第四章296125640
18、合计合计13271418226100上页上页2222(3 3)内容效度)内容效度的应用的应用内容效度适合于测验所要测量的内容总体能够明确界定的内容效度适合于测验所要测量的内容总体能够明确界定的情况:情况:标准参照测验标准参照测验 知识测验、技能测验等教育测验知识测验、技能测验等教育测验 工作表现可以界定的职业心理测验工作表现可以界定的职业心理测验不适合:智力测验,不适合:智力测验,人格测验人格测验2024/5/22 周三2323内容效度的局限性:内容效度的局限性:1)1)内容效度缺乏可靠的统计指标,妨碍了测验间的可比性。内容效度缺乏可靠的统计指标,妨碍了测验间的可比性。2 2)内容效度由专家判
19、断,带有主观性。)内容效度由专家判断,带有主观性。3 3)双向细目表难以编制。)双向细目表难以编制。2024/5/22 周三24242.2.效标关联效度效标关联效度(实证效度)(实证效度)(1 1)含义)含义衡量衡量测验有效性测验有效性的一个很重要的方法是看根据的一个很重要的方法是看根据测验测验所作出的所作出的预测预测能能否被否被证实证实,如果一个测验的,如果一个测验的预测结果预测结果与将来与将来实际发生的事情实际发生的事情非常接非常接近,那么这个测验就是一个好测验。近,那么这个测验就是一个好测验。效标关联效度:效标关联效度:指指测验分数测验分数与与效度标准效度标准(被假设被假设或定义为有效的
20、某种外在标准或定义为有效的某种外在标准)之间之间的的相关。相关。又又称称准则关联效度准则关联效度。即即根据测验所作出的根据测验所作出的预测预测能否能否被实际的结果所证实被实际的结果所证实。效标效标即效度即效度标准标准:指独立于测验结果,反映指独立于测验结果,反映测验目的测验目的的行为参照。的行为参照。2024/5/22 周三2525(2 2)效标关联效度)效标关联效度的类型的类型同时效度同时效度(concurrent validityconcurrent validity)测验分数与几乎同时获得的效标分数之间的相关测验分数与几乎同时获得的效标分数之间的相关。例如:在招聘应届毕业生时,可将应聘大
21、学生的面试和笔试综合分数与其在校综合测评成绩(效标)进行相关性分析。预测效度预测效度(predictive validitypredictive validity)测验分数与随后获得的效标分数之间的相关测验分数与随后获得的效标分数之间的相关。例如:对于被录用者,可以将招聘测试分数与一段时间(半年或一年)之后的工作业绩考核结果进行比较。若这些人的工作绩效和招聘测试分数呈现密切相关关系时,说明招聘方法是有效的,可以推广到人员甄选与选拔中去。同时效度同时效度主要用于诊断现状主要用于诊断现状,预测效度在于,预测效度在于预测个体将来的行为预测个体将来的行为。返回返回2024/5/22 周三2626例如,
22、用大学例如,用大学入学考试入学考试来预测被试来预测被试入学后的学习入学后的学习,如果入学考试成绩好的同学,入学后的学校能力强,如果入学考试成绩好的同学,入学后的学校能力强,取得了好的成绩,那么说明大学入学考试是一个好取得了好的成绩,那么说明大学入学考试是一个好测验。这里,测验。这里,被预测的行为,如被试入学后的学习,被预测的行为,如被试入学后的学习,我们称为效标我们称为效标。所谓效标关联效度,是指所谓效标关联效度,是指测验分数测验分数与与某一外部效标某一外部效标间的一致性程度,即测验结果能够间的一致性程度,即测验结果能够代表或预测效标行为的有效性和准确性程度。因为代表或预测效标行为的有效性和准
23、确性程度。因为效标效度需要有实际证据,所以又称为实证效度。效标效度需要有实际证据,所以又称为实证效度。如上例,若大学入学考试能较好地预测大学入学后如上例,若大学入学考试能较好地预测大学入学后的学习成绩,那测验就具有较高的效标关联效度。的学习成绩,那测验就具有较高的效标关联效度。2024/5/22 周三2727分析效标关联效度的通常作法是对问卷(量表)测量结果与有效标准进行相关分析,相关系数越大表示问卷(量表)的效标关联效度越好,一般认为相关系数在0.40.8 比较理想。若为连续型变量,计算Pearson 或Fisher相关系数,若为分类变量,则计算Kendall 或Spearman 等级相关系
24、数。一般而言,相关系数在0.40.8 比较理想。2024/5/22 周三2828效标与效标测量效标与效标测量估计测验效标关联效度首要条件是必须具有估计测验效标关联效度首要条件是必须具有效标效标(准则)。(准则)。观念效标:概念观念效标:概念阿斯汀阿斯汀(A.W.AstinA.W.Astin)将)将效标效标 量化量化 效标测量效标测量 如如对于大对于大学入学考试这个测验来说,学入学考试这个测验来说,观念效标观念效标是是“大学学习成功大学学习成功”,而大学学习成绩是,而大学学习成绩是效标测量效标测量。2024/5/22 周三29291效标的测量有效性:有效性:高效度高效度 可靠性:可靠性:高信度高
25、信度 客观性:客观性:实用性实用性:方便方便,经济经济 2024/5/22 周三30302常用的效标学术成就学术成就(智力测验、标准化成就测验的效标)(智力测验、标准化成就测验的效标)实际工作表现实际工作表现(特殊能力测验、部分智力测验和人(特殊能力测验、部分智力测验和人格测验的效标)格测验的效标)团体差异团体差异(测验分数能将已经知道的团体差异区分(测验分数能将已经知道的团体差异区分开来)开来)临床诊断临床诊断(人格测验的效标)(人格测验的效标)特殊训练的成绩特殊训练的成绩(特殊能力测验的效标)(特殊能力测验的效标)等级评定等级评定(人格测验中其他人的评定)(人格测验中其他人的评定)现有的测
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 特殊 儿童教育 评估 第三 心理 计量 基本知识
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【a199****6536】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【a199****6536】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。