《素质测评概述与测评理论.ppt》由会员分享,可在线阅读,更多相关《素质测评概述与测评理论.ppt(115页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、 人人 员员 素质测素质测 评评王青王青中国人民大学中国人民大学劳动人事学院劳动人事学院1 问题:下面这个图形是用砖堆起来的,还问题:下面这个图形是用砖堆起来的,还需要几块砖,才能使它成为一个三角锥?需要几块砖,才能使它成为一个三角锥?2 最大多数人的答案:最大多数人的答案:53 另一种答案:04 引导案例引导案例请思考并回答下面的问题:请思考并回答下面的问题:1 你对你的工作满意吗?表现在哪些你对你的工作满意吗?表现在哪些方面?请具体说明。方面?请具体说明。2 一个合格的人力资源部经理应具备一个合格的人力资源部经理应具备什么条件(请列出什么条件(请列出5条最重要的)?条最重要的)?5 讨论题
2、讨论题1 这两个问题的回答难度一样吗?为这两个问题的回答难度一样吗?为什么?什么?2 如何测量一个概念?如何测量一个概念?3 测评要解决什么问题?测评要解决什么问题?6 第一章第一章 素质测评概述素质测评概述一一 为什么要测评?为什么要测评?二二 测评什么?测评什么?三三 测评的含义与特性及其原理测评的含义与特性及其原理四四 测评的一般原则测评的一般原则五五 测评的主要类型测评的主要类型六六 测评的基本方法测评的基本方法七七 测评方法的标准测评方法的标准7 一一 为什么要测评为什么要测评工作特性工作特性个人特点(个别差异)个人特点(个别差异)“面目仅半尺,竟无一人肖面目仅半尺,竟无一人肖”;“
3、人心不同,恰如其面人心不同,恰如其面”人与工作的匹配(人适其事,事宜其人)人与工作的匹配(人适其事,事宜其人)是否需要测评(效用)?是否需要测评(效用)?8 国内的调查报告:国内的调查报告:对对6000名经理人的调查:名经理人的调查:认为公司吸引了有才能的人:认为公司吸引了有才能的人:23 认为认为 公司留住了有才能的人:公司留住了有才能的人:10 认为公司明白哪些是有才能的人:认为公司明白哪些是有才能的人:16 认为公司有效地开发了员工的潜能的人:认为公司有效地开发了员工的潜能的人:3 9 二二 测评什么测评的内容测评什么测评的内容素质素质行为行为10 素质分析素质分析素质:个体完成一定活动
4、(工作)和任务所具素质:个体完成一定活动(工作)和任务所具备的基本条件和基本特点。备的基本条件和基本特点。身体素质身体素质知识技能素质知识技能素质个性素质(个性倾向性和个性特征)个性素质(个性倾向性和个性特征)综合素质综合素质11 知识(知识(knowledge)经学习获得的对事实经学习获得的对事实 的认识的认识 技能(技能(Skills)经学习获得的完成活动的经学习获得的完成活动的 操作方式操作方式v 动作操作技能动作操作技能v 心智操作技能心智操作技能12 心理现象心理现象心理过程心理过程个性心理个性心理认识过程(记忆、思维、想象、语认识过程(记忆、思维、想象、语言等)言等)情感过程(情绪
5、、情感和情操)情感过程(情绪、情感和情操)意志过程(克服困难、完成任务)意志过程(克服困难、完成任务)个性倾向性个性倾向性需要、动机、兴需要、动机、兴趣、理想、信念、价值趣、理想、信念、价值观、世界观观、世界观个性心理特征个性心理特征 能力、气质能力、气质和性格和性格13 个性:个性:个人所具有的区别于他人的独特个人所具有的区别于他人的独特而稳定的思维方式和行为风格。而稳定的思维方式和行为风格。v 影响人在工作中对事物的理解影响人在工作中对事物的理解v 影响人处理事物的方式影响人处理事物的方式v 影响人和他人沟通的方式影响人和他人沟通的方式v 影响工作绩效(任务绩效和关系影响工作绩效(任务绩效
6、和关系绩效)绩效)14 行为分析行为分析行为的特点行为的特点行为分析的维度行为分析的维度15 行为的特点行为的特点人的行为是动态的人的行为是动态的人的行为是可控制的、可改变的人的行为是可控制的、可改变的人的行为是多样的人的行为是多样的人的行为是有原因(动机)的人的行为是有原因(动机)的人的行为受环境的制约人的行为受环境的制约 B=F(P,E)16 三三 测评的含义与特性测评的含义与特性测评是测量与评价的简称测评是测量与评价的简称测量测量 用数字或符号对人的特点进行用数字或符号对人的特点进行描描述述,而不论其价值的大小而不论其价值的大小评价评价是依据定量描述或直觉经验来确定是依据定量描述或直觉经
7、验来确定某种特点的某种特点的价值价值。测量和评价都要依赖某种法则测量和评价都要依赖某种法则17 测量测量测量:测量:根据一定的法则对事物用数字加以确定。根据一定的法则对事物用数字加以确定。测量的三个元素:测量的三个元素:法则;法则;数字或符号;数字或符号;事物事物 测量的两个要素:参照点与单位测量的两个要素:参照点与单位18 素质测量:素质测量:用数字或符号按照一定法则对人的特用数字或符号按照一定法则对人的特点进行点进行描述描述,是一种间接的测量。用,是一种间接的测量。用定量分定量分析描述个体差异的方法。析描述个体差异的方法。“权,然后知轻重;度,然后知长短。物皆然,心为权,然后知轻重;度,然
8、后知长短。物皆然,心为甚。甚。”19 物理测量物理测量 心理测量(对抽象概念的测量)心理测量(对抽象概念的测量)直接测量直接测量 间接测量(借助测量另一事物间接测量(借助测量另一事物来推知所要测量事物的属性)来推知所要测量事物的属性)20 测量与测验:测量与测验:心理测验心理测验:是测量的一种工具和手段。通过观察、调查人的少数有代表性的行为,对于贯穿在人的行为活动中的心理特征,依据确定的原则进行推论和数量化分析的一种科学手段。行为样本的客观的和标准化的测量。安娜斯塔西21 评价(评定)评价(评定)评价是一种价值判断评价是一种价值判断评价的三个要素:评价的三个要素:搜集信息并定量描述;加权;搜集
9、信息并定量描述;加权;价值判断价值判断22 测评的原理测评的原理人的素质是有差异的人的素质是有差异的 人的素质是稳定的人的素质是稳定的 人的素质是可以测量的人的素质是可以测量的 人的素质会影响工作绩效人的素质会影响工作绩效 23 刺激反应刺激反应 心理反应心理反应 行为反应行为反应 情境反应情境反应惯常反应惯常反应 投射投射24 四四 测评的一般原则测评的一般原则普遍性与特殊性相结合普遍性与特殊性相结合测量和评定相结合测量和评定相结合主观与客观相结合主观与客观相结合精确与模糊结合精确与模糊结合静态与动态结合静态与动态结合25 测评的一般原则(续)测评的一般原则(续)科学性和实用性结合科学性和实
10、用性结合公正,标准化(方法、程序、公正,标准化(方法、程序、评分,解释)评分,解释)测评与开发结合测评与开发结合26 有待解决的几个问题有待解决的几个问题全时空与有限性全时空与有限性精确与模糊精确与模糊量化的必要性与困难性量化的必要性与困难性主观与客观主观与客观描述与预测描述与预测经验与科学经验与科学真实与虚假真实与虚假27 五五 测评的主要类型测评的主要类型选拔性测评(差异性)选拔性测评(差异性)预测性测评(有效性)预测性测评(有效性)配置性测评(合适性)配置性测评(合适性)诊断性测评(准确性)诊断性测评(准确性)开发性测评(实用性)开发性测评(实用性)考核性测评(公正性)考核性测评(公正性
11、)28 选拔性测评选拔性测评:选拔优秀人员为目的。:选拔优秀人员为目的。特点:特点:强调测评的区分功能强调测评的区分功能 测评标准刚性最强测评标准刚性最强 强调客观性(公平,公正)强调客观性(公平,公正)测评指标具有可选择性测评指标具有可选择性 测评结果或是分数或是等级测评结果或是分数或是等级预测性测评预测性测评:以预测为目的,强调测评指标具有预测性以预测为目的,强调测评指标具有预测性29 配置性测评:以人事合理配置为目的。针对性:以事择人针对性:以事择人 客观性:测评以职位的客观要求为标准客观性:测评以职位的客观要求为标准 严格性:严格性:诊断性测评诊断性测评:了解素质现状或者素质开发中的问
12、题为目的了解素质现状或者素质开发中的问题为目的 测评内容或者精细,或者全面测评内容或者精细,或者全面 诊断过程寻根究底诊断过程寻根究底 测评结果不公开测评结果不公开 具有较强的系统性具有较强的系统性30 开发性测评开发性测评:以开发人员素质为目的。以开发人员素质为目的。勘探性勘探性 配合性配合性 促进性促进性考核性测评考核性测评(鉴定性测评):以鉴定与验证某种(某些)素质是否具备或者具备程度大小为目的。结合选拔性测评和配置性测评。全面性全面性 充足性:评介结论有充足证据充足性:评介结论有充足证据 可信性可信性 权威性或者公众性权威性或者公众性31 六六 测评的基本方法测评的基本方法 心理测验(
13、能力测验,人格测验,职业兴心理测验(能力测验,人格测验,职业兴趣测验,动机测验等)趣测验,动机测验等)面试(结构化面试和非结构化面试等)面试(结构化面试和非结构化面试等)评价中心(无领导小组讨论,角色扮演,评价中心(无领导小组讨论,角色扮演,公文筐测验,演讲,面谈等)公文筐测验,演讲,面谈等)32 七 测评方法的标准 信度信度 效度效度 普遍适用性普遍适用性 效用效用 合法性合法性33 第二章第二章 测评的基本理论测评的基本理论测量水平测量水平误差误差信度与效度信度与效度项目分析项目分析 常模与常模参照常模与常模参照 效标参照效标参照34 测量的水平与量表分类测量的水平与量表分类命名量表命名量
14、表(Nominal scale)顺序量表顺序量表(Ordinal scale)等距量表(等距量表(Interval scale)比率量表比率量表(Ratio scale)35 命名(名义)量表命名(名义)量表归类时用归类时用要求:一个集合中所有成员都应要求:一个集合中所有成员都应分派到相同的数字,且没有两个分派到相同的数字,且没有两个集合被分派给相同的数字;标准集合被分派给相同的数字;标准必须明确。必须明确。适用的统计方法:分布次数检验;适用的统计方法:分布次数检验;百分比;点二列相关;百分比;点二列相关;X 检验检验36 顺序(等级)量表顺序(等级)量表对一个集合中的成员排列顺序对一个集合中
15、的成员排列顺序没有相等的单位,没有绝对零点没有相等的单位,没有绝对零点不提供等级间的距离或差距不提供等级间的距离或差距 原则上不能进行加减乘除,但是有原则上不能进行加减乘除,但是有时为了方便,假定等级数据近似于时为了方便,假定等级数据近似于等距数据等距数据统计分析:中位数;百分位数;等统计分析:中位数;百分位数;等级相关系数级相关系数37 等距尺度等距尺度有相等的单位,但无绝对零点有相等的单位,但无绝对零点只能做加减运算,不能做乘除运算只能做加减运算,不能做乘除运算统计分析:平均数、标准差、积差统计分析:平均数、标准差、积差相关、相关、F检验;检验;T检验;方差分析等检验;方差分析等38 比率
16、(等比)尺度比率(等比)尺度有绝对零点,是最高级别的测量有绝对零点,是最高级别的测量尺度尺度具有所有其他尺度的功能具有所有其他尺度的功能 可以加减,也可以乘除可以加减,也可以乘除统计分析:全部适用统计分析:全部适用39 什么是误差什么是误差误差是在测量中与目的无关的变误差是在测量中与目的无关的变量(原因)所产生的不准确或不量(原因)所产生的不准确或不一致效应。一致效应。任何测量都不是绝对准确的,不任何测量都不是绝对准确的,不准确的数据就有误差。准确的数据就有误差。40 误差的两层含义误差的两层含义由与测量目的无关的变因引起由与测量目的无关的变因引起 系统误差、随机误差和过失误差系统误差、随机误
17、差和过失误差会导致不准确或不一致的测量结会导致不准确或不一致的测量结果果41 准确性与一致性的关系准确性与一致性的关系不准,不一致不准,不一致 不准,一致不准,一致 准,一致准,一致42 随机误差(可变误差)随机误差(可变误差)由与测量目的无关的偶然因素引起,由与测量目的无关的偶然因素引起,不易控制,使多次测量产生了不一不易控制,使多次测量产生了不一致的结果。致的结果。例如:称重量的时候,不同人对秤杆高例如:称重量的时候,不同人对秤杆高度的掌握不同。度的掌握不同。43 系统误差(恒定误差)系统误差(恒定误差)由与测量无关的变量引起的一种恒由与测量无关的变量引起的一种恒定而有规律的误差,稳定地存
18、在于定而有规律的误差,稳定地存在于每一次测量中,测值一致,但不准。每一次测量中,测值一致,但不准。在秤砣上搞鬼,就形成了系统误差在秤砣上搞鬼,就形成了系统误差。44 过失误差过失误差 不正确使用测量工具、记录错误、仪器不正确使用测量工具、记录错误、仪器失灵等失误造成的误差称为过失误差。失灵等失误造成的误差称为过失误差。收集资料时,避免过失误差;收集资料时,避免过失误差;处理数据时,必须把包含过失误差的数处理数据时,必须把包含过失误差的数据去除。据去除。45 不同误差的影响不同误差的影响系统误差只影响测值的准确性,系统误差只影响测值的准确性,与效度有关与效度有关随机误差既影响准确性,又影响随机误
19、差既影响准确性,又影响一致性。与效度和信度都有关。一致性。与效度和信度都有关。46 误差的来源误差的来源测验内部(测量工具本身)引起测验内部(测量工具本身)引起的误差的误差施测过程引起的误差施测过程引起的误差被试本身引起的误差被试本身引起的误差 主试本身引起的误差主试本身引起的误差 主被试交互作用引起的误差主被试交互作用引起的误差47 被试本身引起的误差被试本身引起的误差 测验的技巧与练习因素测验的技巧与练习因素 焦虑和动机因素:焦虑和动机因素:焦虑:状态焦虑和特质焦虑焦虑:状态焦虑和特质焦虑 48 反应定式反应定式(独立于测验内容的反应倾向)求求“快快”和求和求“精确精确”的反应定式的反应定
20、式 偏好正面描述的反应定式偏好正面描述的反应定式 偏好特殊位置的反应定式偏好特殊位置的反应定式 偏好较长选项的反应定式偏好较长选项的反应定式 猜测的反应定式猜测的反应定式49 主试对测验结果的影响 主试的态度主试的态度 主试的动机主试的动机 主试的人格主试的人格 主试的期望主试的期望 罗森塔尔效应罗森塔尔效应50 协调关系协调关系:指主试和被试之间一种友好、合作、指主试和被试之间一种友好、合作、能促使被试最大限度的做好测验的能促使被试最大限度的做好测验的一种关系一种关系51 真分数真分数定义:一个测量工具在测量没有误定义:一个测量工具在测量没有误差时所得到的值。差时所得到的值。操作定义:经过无
21、数次测量所得到操作定义:经过无数次测量所得到的平均值。的平均值。真分数是构想出来的一个概念,实真分数是构想出来的一个概念,实际上得不到。际上得不到。52 真分数的意义真分数的意义一个人在某测验上的分数,是其一个人在某测验上的分数,是其真分数和误差之和。真分数和误差之和。X=T+E这里的误差指随机误差,因为系这里的误差指随机误差,因为系统误差不影响分数的改变。统误差不影响分数的改变。53 关于偶然误差的假设关于偶然误差的假设如果对一个人接受无数次测量,如果对一个人接受无数次测量,其平均误差为零。其平均误差为零。许多人的一次测验分数加以平均,许多人的一次测验分数加以平均,平均误差为零。平均误差为零
22、。真分数和测量误差是相互独立的。真分数和测量误差是相互独立的。54 信度的含义信度的含义测量结果的一致性程度测量结果的一致性程度能够回答:测量工具是否稳定;能够回答:测量工具是否稳定;测量结果是否可以推论(概化测量结果是否可以推论(概化能力),即从一次测量来推论能力),即从一次测量来推论总体的正确程度。总体的正确程度。信度只受随机误差的影响信度只受随机误差的影响55 操作定义操作定义在测量理论中,信度是指一组测验分数的真在测量理论中,信度是指一组测验分数的真变异数与总变异数的比率。变异数与总变异数的比率。rXX=rXT2=ST2/SX2 1SE2/SX2 rXT 也称为信度指数也称为信度指数在
23、实际应用中,通常以同一样本所得的两组在实际应用中,通常以同一样本所得的两组资料的相关作为测量一致性的指标资料的相关作为测量一致性的指标56 信度的作用信度的作用 解释真实分数与实得分数的相关(信解释真实分数与实得分数的相关(信度系数)度系数)比较信度可以接受的水准(信度系数)比较信度可以接受的水准(信度系数)解释个人分数的意义(测量标准误)解释个人分数的意义(测量标准误)57 信度系数信度系数同一样本所得的两组资料的相关同一样本所得的两组资料的相关信度系数(信度系数(rXX)表示真分数与实)表示真分数与实得分数之间的决定系数,可以解得分数之间的决定系数,可以解释为在实得分数的变异数中有多释为在
24、实得分数的变异数中有多大比例是由真分数的变异引起的。大比例是由真分数的变异引起的。58 信度系数的意义信度系数的意义一般能力和学绩测验一般能力和学绩测验 0.9个性、价值观个性、价值观 .75-.85.75时,可用于团体间的比较。时,可用于团体间的比较。.85时,可用于鉴别个人。时,可用于鉴别个人。59 测量标准误测量标准误 误差分数分布的标准差误差分数分布的标准差 估计真实分数的范围,了解实得分数估计真实分数的范围,了解实得分数再测时可能的变化情形。再测时可能的变化情形。SE SX(1-rxx)1/2 X1.96SE XT X+1.96SE 真实分数是在其分数附近变化的一段真实分数是在其分数
25、附近变化的一段数值数值。60 信度的种类信度的种类重测信度重测信度(稳定性系数)(稳定性系数)复本信度复本信度(等值性系数)(等值性系数)分半信度分半信度(内部一致性系数)(内部一致性系数)同质性信度同质性信度(同质性系数)(同质性系数)评分者信度评分者信度(肯德尔和谐系数)(肯德尔和谐系数)61 重测信度重测信度:对同一测验,在不同时间对同一群体对同一测验,在不同时间对同一群体施测两次,施测两次,两次测验分数的相关系数两次测验分数的相关系数(采用积差相关系数)(采用积差相关系数)就是重测系数,就是重测系数,又称稳定性系数。又称稳定性系数。重测间隔重测间隔62 复本信度(等值性系数)复本信度(
26、等值性系数):以两个测验以两个测验复本复本(功能等值但题目内(功能等值但题目内容不同)容不同)来测量同一群体,然后求应试来测量同一群体,然后求应试者在这两个测验上得分的相关系数。者在这两个测验上得分的相关系数。63 分半信度(内部一致性系数)分半信度(内部一致性系数):通过将测验分成等值的两半,计算这两通过将测验分成等值的两半,计算这两半测验之间的相关性而获得的信度系数。半测验之间的相关性而获得的信度系数。分半信度的矫正分半信度的矫正:斯皮尔曼布朗公式:斯皮尔曼布朗公式:rtt=2rhh /1+rhh 卢伦公式卢伦公式:rxx1Sd2 /Sx264 同质性信度同质性信度(库德理查逊信度):库德
27、理查逊信度):测验内部的各个题目在多大程度上考察测验内部的各个题目在多大程度上考察了同一内容。了同一内容。同质性:指所有测验题目测量的只是同质性:指所有测验题目测量的只是单一内容或者特质,表现为所有测验题目单一内容或者特质,表现为所有测验题目得分的一致性。得分的一致性。65 Note:所有测验都应该保证只测量一种特质或所有测验都应该保证只测量一种特质或内容;如果需要在一个测验中测量不同内容;如果需要在一个测验中测量不同的内容,就应该将测验分成几个分测验,的内容,就应该将测验分成几个分测验,每个分测验测量一种内容。每个分测验测量一种内容。66 评分者信度评分者信度:指对不同评分者对同样对象进行评
28、指对不同评分者对同样对象进行评定时的一致性。定时的一致性。可以用积差相关,也可以用斯皮尔可以用积差相关,也可以用斯皮尔曼等级相关曼等级相关 评分者三人以上,又采用等级计分,评分者三人以上,又采用等级计分,需要用肯德尔和谐系数需要用肯德尔和谐系数67 各种信度系数相应的误差来源各种信度系数相应的误差来源信度系数类型信度系数类型误差方差来源误差方差来源重测信度重测信度时间取样时间取样复本信度复本信度内容取样内容取样分半信度分半信度内容取样内容取样同质性信度同质性信度内容的异质性内容的异质性评分者信度评分者信度评分者之间的差异评分者之间的差异68 影响信度的因素影响信度的因素q 样本团体的性质样本团
29、体的性质 相关系数受到团体中分数分布(个体差相关系数受到团体中分数分布(个体差异范围)的影响异范围)的影响 信度系数受到团体异质性的影响(异质,信度系数受到团体异质性的影响(异质,高估信度)高估信度)不同团体间能力水平的影响不同团体间能力水平的影响 69 q测验的长度测验的长度 测验越长,则试题取样或内容取测验越长,则试题取样或内容取样越恰当样越恰当 测验越长,测验结果越不易受测验越长,测验结果越不易受猜测的影响猜测的影响q 测验的难度测验的难度70 效度效度效度的含义效度的含义效度的特性效度的特性效度的种类效度的种类71 效度的含义效度的含义效度是指测量的正确性,即一个效度是指测量的正确性,
30、即一个测量能够测出所要测的东西的程测量能够测出所要测的东西的程度。度。能够回答:一个工具测评什么东能够回答:一个工具测评什么东西?对于所要测评的东西测得有西?对于所要测评的东西测得有多准?多准?72 效度的操作定义效度的操作定义在一系列测量中,与测量目的有关的真实变异在一系列测量中,与测量目的有关的真实变异数(与测量目的有关的有效变异)与总变异数数(与测量目的有关的有效变异)与总变异数(实得变异数)的比率(实得变异数)的比率。rXY=rXT2=SV2/SX2 一组测验分数的总变异包括:真实的、与测量一组测验分数的总变异包括:真实的、与测量目的有关的变异;真实的、出自无关来源的变目的有关的变异;
31、真实的、出自无关来源的变异;随机误差的变异异;随机误差的变异 SX2=ST2+SE2=SV2+SI2+SE2 73 效度的特性效度的特性效度具有相对性效度具有相对性效度都是针对特定用途而言的,效度效度都是针对特定用途而言的,效度并没有普遍意义上泛指的效度值。并没有普遍意义上泛指的效度值。效度具有连续性效度具有连续性 效度不是效度不是“全全”或或“无无”的离散变的离散变量,它只是一个连续变量,测验的有量,它只是一个连续变量,测验的有效性只有程度上的差别效性只有程度上的差别。74 效度的类型效度的类型内容效度内容效度构想效度构想效度效标关联效度效标关联效度聚合效度聚合效度辨别效度辨别效度75 内容
32、效度内容效度(专家效度和逻辑效度专家效度和逻辑效度):系统检查测验的内容,从而确定测验系统检查测验的内容,从而确定测验是否是所预测量的行为领域的代表性取样。是否是所预测量的行为领域的代表性取样。主要是用于成就测验。主要是用于成就测验。回答两个问题:回答两个问题:该测验是否包括某种技能知识的代表该测验是否包括某种技能知识的代表性性 样本样本 测验的成绩是否受无关因素的影响测验的成绩是否受无关因素的影响76 内容效度的确定方法内容效度的确定方法专家判断;专家判断;确定测验内容的总体范围;确定测验内容的总体范围;编制双向细目表,确定内容的具体细节各编制双向细目表,确定内容的具体细节各自所占的比例;自
33、所占的比例;制定评定量表,由专家在评定表上作出判制定评定量表,由专家在评定表上作出判断,来测量测验的整个效度。断,来测量测验的整个效度。统计分析法:统计分析法:评分者信度、复本信度评分者信度、复本信度评分者信度、复本信度评分者信度、复本信度 经验的方法经验的方法经验的方法经验的方法77 行为目标行为目标内容内容准备准备 编制编制 实施实施 计分计分 概念知识概念知识工作分工作分析析简答题简答题晕轮效晕轮效应应计分键计分键具体事实具体事实知识知识理解理解应用应用78 表面效度表面效度:并非真正的测验效度,而是外行人对并非真正的测验效度,而是外行人对测量对象的臆断,可用来操作施测对象的测量对象的臆
34、断,可用来操作施测对象的测验动机。测验动机。最高作为测量,表面效度越高越好最高作为测量,表面效度越高越好 典型作为测量,表面效度越低越好典型作为测量,表面效度越低越好79 构想效度:构想效度:它主要涉及的是心理学的理论概念它主要涉及的是心理学的理论概念问题,指心理测验对某一理论概念或特问题,指心理测验对某一理论概念或特质测量的程度。质测量的程度。80 确定构想效度的确定构想效度的步骤步骤:建立理论框架,以解释被试在测验建立理论框架,以解释被试在测验上的表现上的表现 依据理论框架,推演出各种有关测依据理论框架,推演出各种有关测验成绩的假设验成绩的假设 以逻辑和实证的方法来验证假设以逻辑和实证的方
35、法来验证假设81 常用指标:常用指标:v 发展变化发展变化v 与其它测验的相关与其它测验的相关 相容效度:一个新测验与相似的旧相容效度:一个新测验与相似的旧 测验之间的相关。测验之间的相关。82 v 因素分析因素分析v 内部一致性内部一致性v 会聚效度(会聚效度(convergent validity)和区分效度()和区分效度(discriminant validity)83 会聚效度与区分效度会聚效度与区分效度相同的特质用不同的方法施测所相同的特质用不同的方法施测所得结果的相关程度。得结果的相关程度。不同特质用相同方法施测所得结不同特质用相同方法施测所得结果的相关程度。果的相关程度。MTMM
36、(Multi-trait-multi-methods)84 方法一 方法二 方法三特质 A1 B1 C1 A2 B2 C2 A3 B3 C3 方法一A1 B1 C1 方法二方法三A2 B2 C2A3 B3 C385 效标效度效标效度指测验总分与外在标准(效标)的相关指测验总分与外在标准(效标)的相关程度,程度,一个测验对处于特定情境中的个一个测验对处于特定情境中的个体行为进行预测时的有效性(准确性)。体行为进行预测时的有效性(准确性)。衡量衡量测测量有效性的参照量有效性的参照标准,就是效标。标准,就是效标。被预测的行为是检验测验效度的标准,被预测的行为是检验测验效度的标准,就是效标。就是效标。
37、86 实证(效标)效度强调的是效标行实证(效标)效度强调的是效标行为,因此,测验内容是次要的,测验为,因此,测验内容是次要的,测验题目不需要与效标有明显关系,只要题目不需要与效标有明显关系,只要测验分数能预测效标行为。测验分数能预测效标行为。87 效标与效标测量效标与效标测量 效标:观念效标和效标测量效标:观念效标和效标测量 观念效标是效标的理论定义观念效标是效标的理论定义 效标测量是效标的操作定义效标测量是效标的操作定义 效标测量要求能准确测量观念效标,还效标测量要求能准确测量观念效标,还要具有很高的信度。要具有很高的信度。88 效标测量的客观性:效标测量的客观性:避免偏见避免偏见 防止效标
38、污染防止效标污染效标污染:效标污染:指个人的效标成绩由于评定者知指个人的效标成绩由于评定者知道测验分数而受到影响的情形道测验分数而受到影响的情形89 同时效度与预测效度同时效度与预测效度同时效度同时效度:效标材料和测验分数差不多同时收集。效标材料和测验分数差不多同时收集。预测效度:效标材料在一段时间后搜集到预测效度:效标材料在一段时间后搜集到区分的标准不是时间,而是区分的标准不是时间,而是测验目的测验目的 同时效度多用于诊断现状:同时效度多用于诊断现状:“某人成功了吗?某人成功了吗?”预测效度多预测未来:预测效度多预测未来:“某人会成功吗?某人会成功吗?”90 常见效标常见效标 学术成就学术成
39、就 特殊训练成绩特殊训练成绩 实际工作表现实际工作表现 等级评定等级评定 团体对照团体对照 先前有效的测验先前有效的测验91 确定实证效度的方法确定实证效度的方法相关法(积差相关)。问题:相相关法(积差相关)。问题:相关系数的平方表示什么?关系数的平方表示什么?区分度:预测源分数是否能区分区分度:预测源分数是否能区分由效标测量所定义的群体。由效标测量所定义的群体。命中率:根据测验所做的正确决命中率:根据测验所做的正确决定的比率。定的比率。92 效度系数效度系数:是最常用的效度指标,尤是最常用的效度指标,尤其是效标关联效度。它是以皮尔逊积其是效标关联效度。它是以皮尔逊积差相关系数来表示的。差相关
40、系数来表示的。决定性系数决定性系数:效度系数的平方就:效度系数的平方就是决定性系数,它表示测验正确预是决定性系数,它表示测验正确预测或解释的效标的方差占总方差的测或解释的效标的方差占总方差的比例。比例。估计的标准误估计的标准误:93 命中率的含义命中率的含义 效标成绩效标成绩 失败失败 成功成功测验预测测验预测 成功成功 失误失误A 命中命中B 失败失败 命中命中C 失误失误D94 命中率种类命中率种类总命中率总命中率 B+C A+B+C+D B正命中率正命中率 A+B95 测验效果分析测验效果分析 录取线录取线工工作作 错误拒绝错误拒绝 正确录取正确录取 成成成成 功功绩绩 合格线合格线 正
41、确拒绝正确拒绝 错误录取错误录取 失败失败 测测 验验 分分 数数96 影响效度的因素影响效度的因素qq 测验本身的因素:测验本身的因素:测验题目的质量测验题目的质量测验的长度测验的长度测验施测中的干扰测验施测中的干扰被试的因素等。被试的因素等。97 q 样本的性质样本的性质 不同的团体对同一测验的反应可不同的团体对同一测验的反应可能会不一样。能会不一样。同一个测验,效度团体的性质不同一个测验,效度团体的性质不同,效度也会有很大差别。同,效度也会有很大差别。样本团体的异质性。样本团体的异质性。98 q效标的性质效标的性质 所测量的行为或心理特质与效标所测量的行为或心理特质与效标越相似,效度系数
42、就越高;越相似,效度系数就越高;效标与测验分数之间是否线性关效标与测验分数之间是否线性关系也是很重要的一个因素;系也是很重要的一个因素;效标测量本身的可靠性如何亦是效标测量本身的可靠性如何亦是值得考虑的一个问题值得考虑的一个问题。99 信度与效度的关系信度与效度的关系 信度是效度的必要条件,但非充分条件信度是效度的必要条件,但非充分条件 测量的信度只受随机误差因素的影响,测量的信度只受随机误差因素的影响,不受系统误差因素的影响不受系统误差因素的影响 测量的效度既受随机误差因素的影响,测量的效度既受随机误差因素的影响,又受系统误差因素的影响又受系统误差因素的影响 因此,测量的效度总低于信度因此,
43、测量的效度总低于信度100 项目分析项目分析难度难度:通过(答对)某个题目的人数占总人数的百通过(答对)某个题目的人数占总人数的百分比。分比。高分组和低分组的通过率的平均值。高分组和低分组的通过率的平均值。区分度区分度:测验项目对于所测查的心理特测验项目对于所测查的心理特性的鉴别能力和区分程度性的鉴别能力和区分程度101 项目效度分析项目效度分析:以效标为依据,考察被试在每个试题上的反应与其在效标上表现的相关情形。v 相关系数:点二列或者二列相关v 鉴别度指数:比较效标得分高和得分低的两组被试在该项目通过率的差别内部一致性分析内部一致性分析:项目与总分的相关项目与总分的相关102 项目效度和内
44、部一致性的比较项目效度和内部一致性的比较 项目效度代表的是题目与外在效标的项目效度代表的是题目与外在效标的关系,内部一致性代表的是题目与总分关系,内部一致性代表的是题目与总分的关系。的关系。预测性测验:多采用项目效度较高的预测性测验:多采用项目效度较高的题目;题目;测验要求同质,选择内部一致性较高测验要求同质,选择内部一致性较高的题目。的题目。103 测验分数的解释测验分数的解释原始分数:原始分数:测验中直接获得的分数测验中直接获得的分数导出分数导出分数 由统计方法推导出的分数由统计方法推导出的分数 104 参照常模的解释:被试分数与常模团体比较而进行解释。常模表就是原始分数的转换表,它为常模
45、表就是原始分数的转换表,它为测验使用者提供了一种方便易行的由原始测验使用者提供了一种方便易行的由原始分数向导出分数转化的方法分数向导出分数转化的方法。参照效标的解释:参照效标方法解释测验结果。105 常模与常模参照常模与常模参照常模群体常模群体 抽样方法抽样方法 常模解释的类型常模解释的类型106 常模群体常模群体群体的构成必须明确界定群体的构成必须明确界定常模群体必须是所要测量的群体常模群体必须是所要测量的群体的一个代表性取样的一个代表性取样取样的过程必须详尽地描述取样的过程必须详尽地描述样本的大小要适当样本的大小要适当注意常模的时间性注意常模的时间性将一般常模与特殊常模结合起来将一般常模与
46、特殊常模结合起来107 抽样方法抽样方法 简单随机抽样简单随机抽样:每个人或者每个抽样单位都有同样机会作为常模的一部分。系统抽样:系统抽样:总体数目为N,若要选择K分之一的被试作为样本,可以在抽样范围中选择每个第K分子作为样本。108 分组抽样分组抽样:总体数目大,无法编号,群体又具有多样性,先将群体分组 分层抽样分层抽样:依据某变量分成若干层次。分层比例抽样 分层非比例抽样109 常模的类型 发展常模发展常模:个人在按正常途径发展的心理特征处于什么样的发展水平 百分位常模百分位常模 百分等级:常模团体中低于这个百分数的人数百分比。百分位数 四分位数和十分位数 110 标准分数常模标准分数常模
47、 Z分数,z分数,离差智商,标准九分 z(XX)/SDZ=A+Bz111 标准九分 1 2 3 4 5 6 7 8 9百分比 4 7 12 17 20 17 12 7 4 标准九分把原始分数分成标准九分把原始分数分成9部分。部分。除除1分和分和9分之外,其余每个分数均包分之外,其余每个分数均包括半个标准差的范围。括半个标准差的范围。112 参照效标解释 强调被试是否达到某种标准或者效标 分为内容参照分数和结果参照分数113 内容参照:参照测验所包括的内容解释分数 掌握分数和正确百分数 结果参照:把效标材料结合到测验结果的解释过程中 期望表:说明一个给定的原是分数或者分数等级获得不同效标分数或者等级的可能性有多大。114 原始分数 人数 效标行为(百分比)D C B A30及以下2029101910以下 22 104 71 14 5 0 36 59 9 21 43 27 37 37 24 3 43 36 14 7115