资源预览内容
第1页 / 共23页
第2页 / 共23页
第3页 / 共23页
第4页 / 共23页
第5页 / 共23页
第6页 / 共23页
第7页 / 共23页
第8页 / 共23页
第9页 / 共23页
第10页 / 共23页
亲,该文档总共23页,到这儿已超出免费预览范围,如果喜欢就下载吧!
资源描述
调查问卷的信度效度分析方法 问卷调查法是教育研究中广泛采用的一种调查方法,根据调查目的设 计的调查问卷是问卷调查法获取讯息的工具,其质量高低对调查结果 的真实性、适用性等具有决定性的作用。为了保证问卷具有较高的可 靠性和有效性,在形成正式问卷之前,应当对问卷进行试测,并对试 测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷 架构,从而提升问卷的信度和效度。信度和效度分析的方法包括逻辑 分析和统计分析,本文主要讨论后者.一、信度分析信度(Reliability )即可靠性,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度.信度指标多以相关 系数来表示:大致可分为三类:稳定系数(跨时间的一致性)、等值 系数(跨形式的一致性)和内在一致性系数(跨项目的一致性)。 若以信度系数来表示信度的大小。信度系数越大,表示测量的可信程 度越大。究竟信度系数要多少才算有高的信度.学者DeVellis(1991)认 为,0.600。65(最好不要);0。650.70 (最小可接受值);0。700。 80(相当好); 0.800.90(非常好) .由此,一份信度系数好的量表或 问卷,最好在0。 80以上, 0.70 至0。 80之间还算是可以接受的范围; 分量表最好在0。 70 以上, 0.60 至0.70之间可以接受。若分量表的 内部一致性系数在0。 60 以下或者总量表的信度系数在0。 80 以下, 应考虑重新修订量表或增删题项.信度分析的方法主要有以下四种:1、 重测信度法这一方法是用同样的问卷对同一组被调查者间隔 一定时间重复施测,计算两次施测结果的相关系数。显然,重测信度 属于稳定系数。重测信度法特别适用于事实式问卷,如性别、出生年 月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、 习惯等在短时间内也不会有十分明显的变化。如果没有突发事件导致 被调查者的态度、意见突变,这种方法也适用于态度、意见式问卷。 由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事 件、活动和他人的影响,而且间隔时间长短也有一定限制,因此在实 施中有一定困难。2、 复本信度法复本信度法是让同一组被调查者一次填答两份问 卷复本,计算两个复本的相关系数。复本信度属于等值系数。复本信 度法要求两个复本除表述模式不同外,在内容、格式、难度和对应题 项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷 达到这种要求,因此采用这种方法者较少。3、 折半信度法 折半信度法是将调查项目分为两半,计算两半得 分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性 系数,测量的是两半题项得分间的一致性.这种方法一般不适用于事实 式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度 分析。在问卷调查中,态度测量最常见的形式是5级李克特(Likert) 量表。进行折半信度分析时,如果量表中含有反意题项,应先将反意 题项的得分作逆向处理,以确保各题项得分方向的一致性,然后将全 部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(rhh,即半个量表的信度系数),最后用斯皮尔曼-布朗(SpearmanBrown)公式:ru=2rhh/(l+rhh)求出整个量表的信度系数 (ru)。4、a信度系数法Cronbach a信度系数是目前最常用的信度系数,其公式为:a= (n/n-l)*(l- (Si2)/ST2)其中,n为量表中题项的总数返2为第i题得分的题内方差,St2为全 部题项总得分的方差。从公式中可以看出,a系数评价的是量表中各 题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、 意见式问卷(量表)的信度分析.二、效度分析 效度(Validity)即有效性,它是指测量工具或手段 能够准确测出所需测量的事物的程度。效度分为三种类型:内容效度(Face Validity) 准则效度(Criterion Validity)和架构效度ConstructValidity) .效度分析有多种方法,其测量结果反映效度的不同方面。常用于调查问卷效度分析的方法主要有以下几种。1、单项与总和相关效度分析这种方法用于测量量表的内容效度。内容效度又称表面效度或逻辑效度,它是指所设计的题项能否代表所 要测量的内容或主题。对内容效度常采用逻辑分析与统计分析相结合 的方法进行评价。逻辑分析一般由研究者或专家评判所选题项是否 “看上去”符合测量的目的和要求。统计分析主要采用单项与总和相 关分析法获得评价结果,即计算每个题项得分与题项总分的相关系 数,根据相关是否显著判断是否有效.若量表中有反意题项,应将其 逆向处理后再计算总分。2、准则效度分析准则效度又称为效标效度或预测效度.准则效度分析是根据已经得到确定的某种理论,选择一种指标或测量工具作为 准则(效标),分析问卷题项与准则的联系,若二者相关显著,或者问卷 题项对准则的不同取值、特性表现出显著差异,则为有效的题项。评 价准则效度的方法是相关分析或差异显著性检验.在调查问卷的效度 分析中,选择一个合适的准则往往十分困难,使这种方法的应用受到 一定限制。3、结构效度分析结构效度是指测量结果体现出来的某种结构与测值之间的对应程度。架构效度分析所采用的方法是因子分析。有的 学者认为,效度分析最理想的方法是利用因子分析测量量表或整个问 卷的架构效度。因子分析的主要功能是从量表全部变量(题项)中提 取一些公因子,各公因子分别与某一群特定变量高度关联,这些公因 子即代表了量表的基本架构。透过因子分析可以考察问卷是否能够测 量出研究者设计问卷时假设的某种架构.在因子分析的结果中,用于 评价架构效度的主要指标有累积贡献率、共同度和因子负荷.累积贡 献率反映公因子对量表或问卷的累积有效程度,共同度反映由公因子 解释原变量的有效程度,因子负荷反映原变量与某个公因子的相关程 度.为了提升调查问卷的质量,进而提升整个研究的价值,问卷的信度 和效度分析绝非赘疣蛇足,而是研究过程中必不可少的重要环节.Cronbach a系数柯隆巴哈(Cronbach 1951 )提出计算一个测量系统(问卷或测验)的信 度称为Cronbach a系数(简称a系数),是目前社会科会研究最常使 用的信度。当一个研究主题(或构面)由很多项目组合,每个问项都 与主题相关,由总分的变异数与问项的变异数做为评量信度的指标即 为a系数。01. Cronbach a系数的定义利用各问项变异数之和与整份量表分数的变异数的比值,可用来估计 一份量表的信度,柯隆巴哈(Cronbach)提出a系数为:此式为最常作为信度指标,其中S2i表示第i个问项X|的变异数,S2h表 所有问项总和(H= x1+x2+ .。+xn)的变异数(即整份测验分数的变异数),n是问项个数.02。Cronbach a系数的实施技巧要做信度分析需先检查每个问项是否都是同方向的(即都是正面问 法,也就是题间的相关系数都是正的),如有一题与其它题相关系数 都是负的,应考虑将此题先“变号”或“删除”后再进行计算a系数。如有受测者乱答,可将它的数据删除后再算a值。对问卷调查当有题目与其它题目是负相关时须注意是否反向问法。如 是,则应先将得分反向,再计算a信度或是删除该题。若为测验,则 不能做反向处理,只能做删除题目。03.标准化Cronbach a系数的定义若一份量表有n题,题间的平均相关系数为r,则此量表的标准化a系 数为nrn 1 + ( - l)r04。利用SPSS进行信度分析在SPSS中,专门用来进行测验信度分析的模块为Scale下的Reliability Analysis;使用 Data Reduction 之下的 Factor 模块.Reliability Analysis模块主要功能是检验测验的信度,主要用来检验 折半信度、库李及a系数以及Hoyt信度系数值。至于重测信度和复 本信度,只需将样本在二次(份)测验的分数的数据合并到同一数据 文件之后,利用Correlate之下的Bivariate求其相关系数,即为重测 或复本信度;而评分者信度则使用的Spearman等级相关及Kendall 和谐系数.表 1 Reliability Analysis 模块的 Model 选项的参数术语关键词功能AlphaCronbach a 系数Split-half折半信度,n是第二份量表的题数GuttmanGuttman最低下限真实信度法Parallel各题目变异数冋质时的最大概率(maximum-likelihood) 信度Strict parallel各题目平均数与变异数均冋质时的最大概率信度表 2 Reliability Analysis 模块的 Statistics 部分选项的参数术语关键词功能F testHoyt信度系数Friedman ChiFriedman等级变异数分析及Kendall和谐系数Cochran ChiCochrans Q检验,适用于答案为二分(如是非题) 的量表Hotellings THotellings T2 检验TukeysTukey的可加性检验Intraclass量表内各题目平均数相关系数建议进行因素分析之样本数宜大于 330 份。论文: A first course in factor analysis出处: New York: Academic Press, 1973.作者: Comrey, A。 L.在因素分析前先以KMO抽样适合性衡量(Kaiser Meyer Olkin) 和巴列特球型检定( Bartletts Test of Sphericity) ,当 KMO 值愈 大时,表示变项间的共同因素愈多,愈适合进行因素分析,根据学者Kaiser(1974)观点,如果KMO的值小于0.5时,较不宜进行因素分析Kaiser, H。 F. “An Index of Factorial Simplicity, ” Psychometrika (39),1974, pp. 31-36.KMO 是做主成分分析的效度检验指标之一,以前的文献中写说, KMO 在 0。9 以上,非常适合做因子分析;在 0.8-0。9 之间,很适合;在0。70。8 之间,适合;在 0.60.7 之间,尚可;在 0.5-0.6 之间,表示很 差;在 0。5 以下应该放弃.量表题之处理 量表题的运用,通常是因为用一题无法完整测量某一个变量,因而需 要使用数道题目来表示一个变量,然而这些题目真的能有效并一致地 指涉同一个变项吗?这时我们便需要透过因素分析与信度分析来检 视量表的信、效度。因素分析 量表题组是否具有效度,这组题目是否测量同一面向(或同一因素), 其能解释的变异量又有多高,便需要靠因素分析来检验.1.选择分析、数据缩减下之因子。2. 将量表题组(请注意,只能同时放一组量表,如同侪关系量表,切 勿将多组量表或所有的题目一起点选进去)点选至右边之窗格.3.按下描述性统计量,勾选KMO与Bartlett球形检定。4.萃取选择主成分分析,并选择陡坡图。5.至选项内勾选依据因素负荷排序。全都选完后,即可按下确定。1. KMO 与 Bartlett 检定,是在检定量表题组之间的相关。(1) Bartlett:量表题组是用来测量一个变项,因此应具有一定的相关 程度,当Bartlett检定达显著(显著性=。000),即表示此题组 具有共同之因素(一或数个因素)。(2) KMO:然而题组间的相关程度若太高,则会造成多重共线性的 问题,也就是说
网站客服QQ:2055934822
金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号