心理测量学测验的信度.ppt

《心理测量学测验的信度.ppt》由会员分享，可在线阅读，更多相关《心理测量学测验的信度.ppt（45页珍藏版）》请在得力文库 - 分享文档赚钱的网站上搜索。

1、心理测量学测验的信度现在学习的是第1页，共45页补：测量的量的误差及其来源差及其来源 误差的定差的定义误差的种差的种类误差的来源差的来源现在学习的是第2页，共45页测量结果测量因素1、误差的定义、误差的定义与测量目的无关与测量目的无关不准确或不一致或不一致考研题考研题误差误差:与测验目的无关的因素所导致的测验结果不一致或不准确的现象与测验目的无关的因素所导致的测验结果不一致或不准确的现象.现在学习的是第3页，共45页2、误差的种类、误差的种类 系统误差随机误差现在学习的是第4页，共45页随机误差与系统误差的比较随机误差与系统误差的比较类型产生原因特点效能指标随机误差不易控制的偶然因素方向和大小

2、上完全随机影响准确性影响一致性信度系统误差恒定、有规律的因素稳定地存在于每次测量中 不影响一致性效度现在学习的是第5页，共45页经典测验理论经典测验理论信度概念信度概念信度的评估方法信度的评估方法信度系数的应用信度系数的应用影响信度的因素影响信度的因素现在学习的是第6页，共45页成熟成熟标志标志20世纪世纪50年代年代Gulliksen心理测验理论心理测验理论三大三大支柱支柱基本假设基本假设信度信度效度效度一、经典测验理论一、经典测验理论ClassicalTestTheory（CTT）考研题考研题现在学习的是第7页，共45页基本假设与真分数基本假设与真分数1、真分数、真分数观测分数误差分数真分

3、数测验所得未加工理论定义理论定义真正特质水平真正特质水平操作定义操作定义无数次测量结果的均值无数次测量结果的均值现在学习的是第8页，共45页经典测验理论（经典测验理论（CTT）假定）假定：观察分数（察分数（X）与真分数（）与真分数（T）之）之间是一种是一种线性关系，并只相差一个随机性关系，并只相差一个随机误差（差（E）。）。即：即：X=TE现在学习的是第9页，共45页（1）如如果果对一一个个人人测量量无无数数次次，其其误差差之之和和为0，平平均均误差差为0。（2）误差与真分数相互独立，相关差与真分数相互独立，相关为0。（3）一一个个团体体的的平平均均真真分分数数等等于于该团体体中中所所有有被被

4、试实得得分分数数的平均的平均值。（4）对于于一一个个团体体来来说，实得得分分数数、真真分分数数、和和测量量误差差之之间有有如下关系：如下关系：关于关于测量量误差差还有如下假有如下假设：随机误差现在学习的是第10页，共45页 在一次在一次测验中，一个中，一个团体的体的实测分数的分数的变异数是异数是由与由与测量目的有关的量目的有关的变异数、异数、稳定但出自无关来源定但出自无关来源的的变异数和偶然但出自无关来源的异数和偶然但出自无关来源的变异数所决定的。异数所决定的。现在学习的是第11页，共45页二、信度的定义二、信度的定义真分数方差与观测分数方差的比值信度指的是测量结果的稳定性程度（或一致性程度）

5、。信度指的是测量结果的稳定性程度（或一致性程度）。信度是反映测量中随机误差大小的指标。信度是反映测量中随机误差大小的指标。现在学习的是第12页，共45页三、三、信度评估的方法信度评估的方法信度信度重测信度重测信度复本信度复本信度内部一致性内部一致性信度信度评分者信度评分者信度分半信度分半信度 同质性信度同质性信度现在学习的是第13页，共45页（一）重测信度（一）重测信度（Test-retestreliability）含义同一测验同一测验同组对象同组对象前后测前后测2次次相关系数相关系数稳定性稳定性程序误差时间太短练习效应记忆效应A卷卷一一定定时时距距A卷卷太长身心变化现在学习的是第14页，共4

6、5页第一，所第一，所测的心理特性必的心理特性必须是是稳定的。定的。第二，第二，遗忘和忘和练习的效果基本上相互抵消。的效果基本上相互抵消。第三，所第三，所测心理特心理特质在两次施在两次施测的的间隔隔时间内没内没有有获得更多的学得更多的学习和和训练。第四第四,报告告结果果时要要报告两次告两次测验的的间隔及有关隔及有关经历.使用条件使用条件现在学习的是第15页，共45页 优点优点省力、省时省力、省时测量属性相同测量属性相同提供随时间变化的资料提供随时间变化的资料 不足不足时间间隔长短评价时间间隔越长，重测信度越低；时间间隔越长，重测信度越低；时间间隔视测验目的、性质、被试时间间隔视测验目的、性质、被

7、试特点而定；特点而定；年幼儿童，间隔要小；年长成人，间隔可长；年幼儿童，间隔要小；年长成人，间隔可长；智力测验间隔不能太短，成就测验不能太长；智力测验间隔不能太短，成就测验不能太长；一般以一般以2-4周为宜，智力测验的间隔时间一般在周为宜，智力测验的间隔时间一般在6个月左右。个月左右。现在学习的是第16页，共45页（二）复本信度（二）复本信度（Alternate-formraliability）含义两等值测验两等值测验最短时间内最短时间内对同组对象对同组对象施测结果施测结果r等值性等值性程序误差内容取样A卷卷最最短短时时距距B卷卷现在学习的是第17页，共45页复本等值的条件复本等值的条件各测验

8、测量的是同一种心理特质；各测验测量的是同一种心理特质；各测验具有相同的内容和形式；各测验具有相同的内容和形式；各测验的题目不应重复；各测验的题目不应重复；各测验题目数量相等；各测验难度和区分度大体相同；各测验题目数量相等；各测验难度和区分度大体相同；各测验的分数分布（标准差和平均数）大体相同；各测验的分数分布（标准差和平均数）大体相同；复本编制好后，应再测一次，以确保等值。复本编制好后，应再测一次，以确保等值。现在学习的是第18页，共45页第一，前提是有复本第一，前提是有复本测验。第二，被第二，被试有条件接受两个有条件接受两个测验(时间和和经费等等)。第三第三,报告告结果果时要要报告两次告两次

9、测验的的间隔及有关隔及有关经历.使用条件使用条件现在学习的是第19页，共45页 优点优点代表性增强，信度更准代表性增强，信度更准一定程度避免练习、记忆效应一定程度避免练习、记忆效应 不足不足编制复本难影响积极性触类旁通评价现在学习的是第20页，共45页重测信度与复本信度有何异同？现在学习的是第21页，共45页小结与问题重重测测信信度度复复本本信信度度内内部部一一致致性性跨时间跨时间一致性一致性跨形式跨形式一致性一致性试题之间试题之间有何关系？有何关系？现在学习的是第22页，共45页（三）内部一致性信度（三）内部一致性信度含义测验测验各题间各题间一致性一致性题目题目一致性一致性分半信度类型同质性

10、同质性信度信度现在学习的是第23页，共45页1、分半信度、分半信度（Split-halfraliablity）分半方法奇偶题分半分析程序两半相关：rhh校校 正：正：rnn难易：低高分半条件两半相似：两半相似：M、S项目组间相关项目组间相关分布常态分布常态现在学习的是第24页，共45页校正方法校正方法斯皮尔曼-布朗公式方差相等时方差相等时弗拉南根公式卢尤公式方差不等时现在学习的是第25页，共45页使用条件测验只能施测一次或没有复本的情况下使用测验只能施测一次或没有复本的情况下使用.当一个测验无法分成对等的两半时不宜使用当一个测验无法分成对等的两半时不宜使用.现在学习的是第26页，共45页2、同

11、质信度、同质信度（Homogeneityraliability）同质性同质性题目间的内部一致性题目间的内部一致性类型库-理信度克龙巴赫 系数各类题型二值二值记分记分现在学习的是第27页，共45页（四）评分者信度（四）评分者信度（Scorerraliability）含义评分者评分的一致性方法2评分者2个以上者rXY肯德尔和谐系数现在学习的是第28页，共45页附：确定信度的可接受水平附：确定信度的可接受水平测验类型最低标准标准化测验人格测验 非标准化测验0.900.80-0.850.60-0.85典型测验的一般标准典型测验的一般标准现在学习的是第29页，共45页典型测验的信度高低水平典型测验的信度

12、高低水平测验类型 低 中 高成套成就测验 学术能力测验 成套倾向性测验 客观人格测验 兴趣问卷 态度量表.66 .92 .98.56 .90 .97.26 .88 .96.46 .85 .97.42 .84 .93.47 .79 .98现在学习的是第30页，共45页各种信度系数相应误差变异的来源各种信度系数相应误差变异的来源信度系数的类型误差变异的来源再测信度复本信度（连续施测）复本信度（间隔施测）分半信度同质性信度评分者信度时间取样内容取样时间与内容取样内容取样内容的一致性评分者间的差异现在学习的是第31页，共45页友情提示友情提示实际上，有多少种上，有多少种误差的来源，就有多少差的来源，就

13、有多少种信度估种信度估计的方法。一般来的方法。一般来说，一个，一个测验哪种哪种误差大，就差大，就应该用哪种用哪种误差估差估计。有。有时一个一个测验需要几种信度估需要几种信度估计。现在学习的是第32页，共45页操作演操作演练假假设对100个六年个六年级学生以两个月的学生以两个月的时间间隔先后施隔先后施测一个一个创造力造力测验的的A/B两个复本，所得的等两个复本，所得的等值与与稳定性定性系数系数为0.70。我我们还根据被根据被试对每个复本的反每个复本的反应计算出分半信度算出分半信度为0.80.同同时,我我们将另一个将另一个评分者随机抽取分者随机抽取50份卷子另外份卷子另外评分，分，得到得到评分者信

14、度分者信度为0.92。然后，我然后，我们对这这三种方法所三种方法所产生的生的误差差变异异进行行分析。分析。现在学习的是第33页，共45页一个假想测验的变异数分析一个假想测验的变异数分析信度类型误差变异数误差变异来源复本信度(间隔)1-0.70=0.30时间和内容取样分半信度1-0.80=0.20内容取样上述两者差异0.30-0.20=0.10 时间取样评分者信度1-0.92=0.08评分者差异误差变异总和0.20+0.10+0.08=0.38真实变异1-0.38=0.62现在学习的是第34页，共45页四、信度系数的应用四、信度系数的应用1、评价价测验2、解、解释分数分数（1）个人）个人测验分数

15、的分数的误差差（X-1.96SE）T（X+1.96SE）现在学习的是第35页，共45页（2）两种测验分数的比较）两种测验分数的比较(差异的标准误差异的标准误)所得结果与所得结果与1.96SE(0.05水平水平)进行比较进行比较,即可得出两个测验的差异是否显著即可得出两个测验的差异是否显著.现在学习的是第36页，共45页五、影响信度的因素五、影响信度的因素测验长度测验长度样本特征样本特征测验难度测验难度时间间隔时间间隔 考研题考研题现在学习的是第37页，共45页（一）测验长度（一）测验长度含义含义测验试题的数量测验试题的数量特点特点测验越长，试题取样越具有代表性。测验越长，试题取样越具有代表性。

16、测验越长，猜测因素影响就越小。测验越长，猜测因素影响就越小。增加测验长度的效果应遵循报酬递减率原则。增加测验长度的效果应遵循报酬递减率原则。现在学习的是第38页，共45页长度与信度的关系长度与信度的关系 RXX为原原测验的信度的信度.RNN为测验长度增加后度增加后测验的信度的信度.K为改改变后的后的测验长度与原来度与原来长度之比度之比.现在学习的是第39页，共45页例例2-16：某测验有：某测验有40题，信度题，信度0.65，若增至若增至120题，信度会是多少？题，信度会是多少？例例2-17：某测验有：某测验有30题，信度题，信度0.75，试问要达到多少题才能使信度达到试问要达到多少题才能使信

17、度达到0.90？现在学习的是第40页，共45页特点特点样本越异质，分数分布越广，有可能高估信度。样本越异质，分数分布越广，有可能高估信度。样本不同，信度就有可能不同样本不同，信度就有可能不同。（二）样本特征（二）样本特征1、样本团体、样本团体异质性异质性的影响的影响现在学习的是第41页，共45页2、样本团体、样本团体平均能力水平平均能力水平的影响的影响特点特点:团体平均水平太高或太低，分布体平均水平太高或太低，分布变窄，可能低估信度窄，可能低估信度.选择测验时应注意注意取取样团体的体的变异性和能力水平异性和能力水平建立信度的建立信度的团体与欲体与欲测团体是否一致体是否一致现在学习的是第42页，

18、共45页一般趋势一般趋势测验太难或太易测验太难或太易,分数范围缩小分数范围缩小,降低信度降低信度.难度与题型难度与题型简答题：简答题：P=0.5时，时，X为为0100，信度最高。，信度最高。学绩测验选择题的理想平均难度（洛德）学绩测验选择题的理想平均难度（洛德）五择一：五择一：0.70四择一：四择一：0.74三择一：三择一：0.77是非题：是非题：0.85（三）测验难度（三）测验难度现在学习的是第43页，共45页智力的时间变化智力的时间变化 间隔期 信度系数同日或次日 0.900.95 1年 0.85 22.5年 0.80 5年 0.750.80 9年 0.78（四）时间间隔（四）时间间隔现在学习的是第44页，共45页 间隔六年，间隔六年，rXX的变化的变化年龄的时间变化年龄的时间变化年龄越低，信度越低 第一次 第二次 rXX 4 10 0.73 9 15 0.87 11 17 0.92现在学习的是第45页，共45页