问卷信度和效度分析

一:什么叫信度分析和效度分析? 20分

问卷调查法是教育研究中广泛采用的一种调查方法,根据调查目的设计的调查问卷是问卷调查法获取信息的工具,其质量高低对调查结果的真实性、适用性等具有决定性的作用。为了保证问卷具有较高的可靠性和有效性,在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷结构,从而提高问卷的信度和效度。信度和效度分析的方法包括逻辑分析和统计分析,本文主要讨论后者。

一、信度分析

信度(Reliability)即可靠性,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度。信度指标多以相关系数表示,大致可分为三类:稳定系数(跨时间的一致性),等值系数(跨形式的一致性)和内在一致性系数(跨项目的一致性)。信度分析的方法主要有以下四种:

1、重测信度法

这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算两次施测结果的相关系数。显然,重测信度属于稳定系数。重测信度法特别适用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。如果没有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式问卷。由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事件、活动和他人的影响,而且间隔时间长短也有一定限制,因此在实施中有一定困难。

2、复本信度法

复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的相关系数。复本信度属于等值系数。复本信度法要求两个复本除表述方式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少。

3、折半信度法

折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度分析。在问卷调查中,态度测量最常见的形式是5级李克特(Likert)量表。进行折半信度分析时,如果量表中含有反意题项,应先将反意题项的得分作逆向处理,以保证各题项得分方向的一致性,然后将全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(rhh,即半个量表的信度系数),最后用斯皮尔曼-布朗(Spearman-Brown)公式:

求出整个量表的信度系数(ru)。

4、α信度系数法

Cronbach α信度系数是目前最常用的信度系数,其公式为:

其中,K为量表中题项的总数, 为第i题得分的题内方差, 为全部题项总得分的方差。从公式中可以看出,α系数评价的是量表中各题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、意见式问卷(量表)的信度分析。

二、效度分析

效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度分为三种类型:内容效度、准则效度和结构效度。效度分析有多种方法,其测量结果反映效度的不同方面。常用于调查问卷效度分析的方法主要有以下几种。

1、单项与总和相关效度分析

这种方法用于测量量表的内容效度。内容效度又称表面效度或逻辑效度,它是指所设计的题项能否代表所要测量的内容或主题。对内容效度常采用逻辑分析与统计分析相结合的方法进行评价。逻辑分析一般由研究者或专家评判所选题项是否“看上去”符合测量的目的和要求。统计分析主要采用单项与总和相关分析法获得评价结果,即计算每个题项得分与题项总分的相关系数,根据相关是否显著......余下全文>>

二:如何对调查问卷进行效度和信度分析

一、问卷的信度。 信度即可靠性,是指采用同一方法对同一对象进行调查时,问卷调查结果的稳定性和一致性,即测量工具(问卷或量表)能否稳定地测量所测的事物或变量。具体评价方法有: 1、重复检验法。同样的问卷,对同一组访问对象在尽可能相同的情况下,在不同时间进行两次测量。两次测量相距一般在两到四周之内。用两次测量结果间的相关分析或差异的显著性检验方法,评价量表信度的高低。 2、交错法。用两个不同形式的等价问卷,对同一组受访者在不同的时间(通常间隔两到四周)进行测量。两次测量结果间的相关性被用来评价问卷的信度。 3、折半法。折半法是将上述两份问卷合成一份问卷(通常要求这两份问卷的问题数目相等),每一份作为一部分,然后考察这两个部分的测量结果之间的相关性。 二、问卷的效度 效度是指问卷正确测量研究者所要测量的变量的程度。检验效度的主要指标和方法有:表面效度、准则效度、架构效度。 1、表面效度(Face Validity)。也称为内容效度或逻辑效度,指的是测量的内容与测量目标之间是否适合,也可以说是指测量所选择的项目是否“看起来”符合测量的目的和要求。主要依据调查设计人员的主观判断。 2、准则效度(Criterion Validity)。准则效度是指量表所得到的数据和其他被选择的变量(准则变量)的值相比是否有意义。根据时间跨度的不同,准则效度可分为同时效度和预测效度。 同质效度是指量表测量同一特征的其他测量方法相互关联的程度。异质效度是指量表和测不同特征的测量方法不同但理论上有关特征的测量方法之间相互关联的程度。建构效度指测量工具所能测量到的理论概念的程度,也就是说若将测量工具所得的结果与相同理论下的其他概念相比较,当二者有某种预期的相关性时,就表示这种测量工具具有某种程度的架构效度。 一般来说,问卷调查容易产生误差的原因,来自研究者的因素包括:测量内容不当、情景以及研究者本身的疏忽。来自受访者的因素则可能是由于其年龄、性格、教育程度、社会阶层等,而影响其答题的正确性。研究者透过信度与效度的检验,可以了解问卷本身是否优良,以作为改变修正的根据,避免做出错误的判断。 问题意识形成的首要条件是你要对一切的现象充满着好奇感和浓厚的兴趣,具有较强的观察能力。比如当你下到相关的实践场所时,观察到一定的现象和问题,如:课堂上教师为什么会像是在表演一样?为什么教师在上面兴趣盎然,而下面总有某些学生兴趣索然?就要积极展开一定的思考,多问几个为什么,并结合自己所学的相关教育教学理论,追问一下怎么才会更好? 其次是要具有强调的信息意识。信息资源是得以形成有价值问题的依据,除了实践观察中获得鲜活的感性信息之外,丰富的理论资源也是形成问题的关键。对于确定领域的古今中外所有的研究成果,包括最新的一些提法等都要积累到脑子中,并按照优化的结构将其组织起来,内化于心。对于已有的问题,要学会换一个角度去多多思考,另外也要善于发掘新的尚未研究或还未足够清楚的问题,并及时将这样一些问题作以记录。 再就是要学会思考,包括思考的方法、角度等等。只有能思考并善于思考的人才会一语中的地提出有意义的问题,并能够给出有效解决问题的清晰思路。 在做科研的过程中,随时随处遇到问题及时作以深入思考,相信会有大收获的。 基本的抽样方法主要有两大类:一类是在目标总体中,有意识地选择若干有代表性的单位为样本进行调查研究。这种抽样叫做目标抽样或主观抽样。 目标抽样的方法适用于典型调查或研究。它的特点是作为样本的各单位的代表性,都是由与该研究课题有关的专家来判断和决定的。其结果的可靠性和精确度叶必须依靠这方面的专家来判断和评......余下全文>>

三:到底先做信度分析还是效度分析

spss? 一般这两个是问卷分析的第一步,也是检验该问卷是否合格的标准之一。信度侧重于一种标准重复测量的稳定性和可靠性,或者多个标准重复测量的一致性;效度侧重于有效性,就是说是否能达到希望能了解的特征的程度。

信度是效度的必要条件,但不是充分条件,懂?就是说信度低,效度不可能高;效度高,信度必然高;信度高,效度未必高;效度低,信度也可能很高。通俗一点,一把尺子刻度标准了测出来的才有可能准确,但不一定测的准。

四:信度和效度分析是在调查完成之后做吗?如果信度和效度不高那问卷是不是白做了?

如果你是用别人的问卷,那信效度应该是已经被证明过的,你在你的调查研究中通常只需要报告一下该问卷在你的研究中的信度,这个要求不是很高,最低标准0.6以上还是可以接受。如果实在不好,还可以酌情去掉一些使信度变差的题目。

如果是你自编的问卷,最好的做法是先做一下问卷的测量学研究,证明其信效度良好,然后再拿去做其他调查研究

信效度太低那肯定不行的,因为这表明你的问卷不可靠,用不可靠的测量工具做研究得到的结论当然也不可靠。当然你可以将异常的被试数据处理掉,或者删掉不好的题目,保证剩余的数据信效度良好,那还是可以继续把调查做下去的

五:调查问卷的信度和效度分析应该何时做

通常使用克朗巴哈 信度系数法(Cronbach α)来测量此种问卷的信度。 克朗巴哈 信度系数是目前最常用的信度系数。一般认为 在0.7以上问卷的可信度较高。 如果用SPSS,菜单Analyze->Scale->Reliability analysis 效度没有公认的一个指标,可用专家法和因子分析。

六:谁会SPSS分析问卷的信度和效度? 10分

信度分析:SPSS经常做的是内部一致性系数和分半系数。在Analyze——Sca恭e——Reliability Analysis

效度分析:SPSS可以检测结构效度。在Analyze——Data Reduction——Factor Analysis

七:谁知道调查问卷的信度和效度是怎么回事?

测试信度(test reliability)也叫测试的可靠性,指的是测试结果是否稳定可靠。也就是说,测试的成绩是不是反映了受试者的实际语言水平。例如,如果同一套测试在对同一测试对象(即受试者本身没有变化)进行的数次测试中,受试者的分数忽高忽低的话,则说明该测试缺乏信度。测试的信度与测试的效度有着密切的关系。一般说来,只有信度较高的测试才能有较高的效度,但效度较高不能保证信度也一定较高。测试的信度主要涉及到试题本身的可靠性和评分的可靠性这两个方面。试题本身是否可靠主要取决于试题的范围、数量、试题的区分度等因素;评分是否可靠则要看评分标准是否客观和准确。

测试的信度通常用一种相关系数(即两个数之间的比例关系)来表示,相关系数越大,信度则越高。当系数为1.00时,说明测试的可靠性达到最高程度;而系数是0.00时,则测试的可靠性降到最低程度。在一般情况下,系数不会高到1.00,也不会降到0.00,而是在两者之间。对信度指数的要求因测试类别的不同而不同,人们通常对标准化测试的信度系数要求在0.90以上,例如“托福”的信度大致为0.95,而课堂测试的信度系数则以0.70-0.80之间为可接受性系数。测试信度的计算方法有很多种,以下仅介绍三种易于操作的方法:

1)重测法(the retesting method)。用同一套试卷在两个不同时间内来测试同一批受试者,这样便获得两组分数,然后计算出两组分数的相关系数。当然,在两次测试中,学生第二次的测试成绩理应比第一次的要高,因为在第二次测试时学生已经有了进步而且临场经验也更丰富了。但是若该试题是比较可靠的,每个学生在两次测试中的排名次序应该是基本不变的。

2)交替形式法(the alternative method)。对同一批受试者使用试题类型完全相同,难易程度相当,但具体题目不同的两套对等试卷先后进行两次测试,然后计算出两次得分的相关系数。

3)对半法(the split-half method)。测试只进行一次,但将整份试卷的题目按单、双数分成两组来分别计分,算出两组分数的相关系数,然后再用Spearman-Brown的公式计算整份试卷的信度系数。具体计算步骤是:将两组分数的相关系数乘以2,再除以1加两组分数的相关系数。

baike.baidu.com/view/698674.htm

测试效度(test validity)亦称测试的有效性,指一套测试对应该测试的内容所测的程度。也就是说,一套测试是否达到了它预定的目的以及是否测量了它要测量的内容。例如:“Is photography an art orscience?Discuss.”这种题目以摄影的知识为前提和主要内容,用来考语言能力,就不具有效性。又如用听写来测量学生的听觉能力,其效度也是不理想的,因为书面记录有声语言不仅涉及学生的听弧能力,而且还与他们的书写速度、拼写能力、语法知识、记忆能力和对全文的理解能力等有关。

测试的效度一般可分为以下几类:

1)表面效度(face validity)。指测试应达到的卷面标准,即一套测试题从表面看来是否是合适的。例如,若一次阅读理解力的测试包括许多受试者没有学过的方言词汇,则可认为这次测试缺乏表面效度。表面效度是测试出受试者正常水平的一种保证因素。

2)内容......余下全文>>

八:做问卷调查一定要做信度与效度分析吗

对,必需的! 问卷调查往往只是整个项目的一个环节,在正确项目的目标下,一定会另有调查的可信度,有效分析来支持调查结果;

九:是否所有的调查问卷都要进行信度和效度分析

如果想得到逼近实际的数据的话当然要进行信度和效度分析,否则无法证明问卷的可信度和有效性。然而在操作的时候,嫌麻烦或者怕信度和效度不满要求,更多人选择不严谨地一带而过。

十:问卷调查 都要信度 效度 检验吗

一般问卷都是需要做信效度检验的,表明你的研究工具可靠、可信。 多数问卷是以likert5级形式呈现的 多选题的话,是不能做信效度了。

扫一扫手机访问

发表评论