validity and reliability in research2009 11 12

研究中的效度与信度问题研究中的效度与信度问题

吴凯东北财经大学旅游与酒店管理学院

School of Tourism and Hotel Management

Validity and Reliability in Research 2

吴凯吴凯 [email protected] http://kaiwu2007.spaces.live.com/

研究方向：旅游者选择建模 Tourist Choice Modelling

旅游体验 Tourist Experience

旅游需求预测与建模 Tourism Demand Forecasting and Modelling



报告的结构报告的结构1.1. 操作层面的效度与信度操作层面的效度与信度

一般性讨论一般性讨论 TriangulationTriangulation 论文开题与写作思考论文开题与写作思考

2.2. 理论层面的效度与信度理论层面的效度与信度



1.1. 操作层面的效度与信度操作层面的效度与信度



1.1 1.1 一般性讨论一般性讨论

1.1.1 1.1.1 效度与信度的关系效度与信度的关系1.1.2 1.1.2 效度分析效度分析1.1.3 1.1.3 信度分析信度分析



1.1.1.1.11 信度与效度关系信度与效度关系

低效度、无信度无效度、高信度高效度、高信度

1.1 1.2 1.3



一般情况下，可靠性与有效性之间有一个均衡问题。

一个有效的研究一定是可靠的，但是一个可靠的研究不一定有效。

取得可靠性相对于有效性而言要容易一些。

1.1

1.2

1.3



1.1.1.1.2 2 效度效度 1.1 1.2 1.3

效度指概念定义（ conceptual definition ）及操作化定义（ operational definition ）间是否契合

注重测量工具本身是否正确反映现象的属性 ?

是否可以测出研究者想要了解的某种特质？效度可分为四类：

表面效度 (Face Validity) 内容效度 (Content Validity) 关联效度 (Criterion-related Validity) 结构效度 (Construct Validity)



表面效度由评估人根据自己对所要测量的概念的理解，根据自身的判断来断定工具是否适当。

表面效度（表面效度（ face face validityvalidity ））

1.1

1.2

1.3



内容效度（内容效度（ content content validityvalidity ））

内容效度根据理论基础及实际经验来对工具是否包括足够的项目而且有恰当的内容分配比例所作出的判断

资源有限，欲望无穷问题的选择

与主题相关程度能否反应问题重点是否具代表性

主观判断

1.1

1.2

1.3



关联效度关联效度 (criterion-related (criterion-related validity)validity)

关联效度用来比对测量结果与效标间之关连性。

效标不一定要是测验，也可把专家之评断当作效标。

衡量之目标愈复杂，愈难找到有效之效标。

1.1 1.2 1.3



结构效度结构效度 (construct (construct validity)validity)

结构效度指的是一些无法直接量测到的指标（态度、情绪等）通常必须通过一些外在特征或行为表现来推估。

相对于内容效度与关联效度，结构效度比较具争议性。

1.1 1.2 1.3



信度是指可靠性或一致性。信度好的指标在信度是指可靠性或一致性。信度好的指标在同样或类似的条件下重复操作，可以得到一同样或类似的条件下重复操作，可以得到一致或稳定的结果。致或稳定的结果。

信度既包括“个人分数的正确性（信度既包括“个人分数的正确性（ Accuracy Accuracy of one person’s scoreof one person’s score ）”，也包括“体测验）”，也包括“体测验分数的一致性（分数的一致性（ Consistency of scores of a Consistency of scores of a group of peoplegroup of people ）”。）”。

信度可以分为四类：信度可以分为四类：内部一致性（内部一致性（ internal consistencyinternal consistency ））稳定性（稳定性（ stability stability ））代表性（代表性（ representativerepresentative ））等值性（等值性（ equivalenceequivalence ））

1.11.1..33 信度信度 1.1 1.2 1.3



内在一致性（内在一致性（ internal internal consistencyconsistency ））

内在一致性指组成研究工具的各项目之间的内在一致性指组成研究工具的各项目之间的同质性或内在相关性。同质性或内在相关性。

衡量单一次测验或调查之信度。衡量单一次测验或调查之信度。分半信度（分半信度（ Split halfSplit half ）：将测验项目分成两部分，）：将测验项目分成两部分，

计算两者间的相关系数。计算两者间的相关系数。 Cronbach’αCronbach’α 相关系数相关系数理想的信度值一般要求新的测量工具信度值在理想的信度值一般要求新的测量工具信度值在 0.70.7

以上，已经发展的比较成熟的工具要在以上，已经发展的比较成熟的工具要在 0 .80 .8 以上，以上，内在一致性信度一般要求在内在一致性信度一般要求在 0 .80 .8 以上。以上。

1.1

1.2

1.3



稳定性（稳定性（ stabilitstabilityy ））

稳定性（ stability reliability ）：指标在不同时间做测量时，可以得到同样的结果。通常我们是用测试与再测试方法（ test-retest method ）来度量一个指标的稳定程度，也就是将同样的指标重新测量同一群体，如果得到同样（或非常接近）的结果，则此指标具有稳定性。

1.1

1.2

1.3



代表性（代表性（ representativenessrepresentativeness ））

代表性信度指横跨次级群组的信度。也代表性信度指横跨次级群组的信度。也就是把指标用于不同次级群组（如年龄、就是把指标用于不同次级群组（如年龄、性别）时，可以得到同样的结果。性别）时，可以得到同样的结果。

1.1

1.2

1.3



等值性（等值性（ equivalencequivalencee ））

等值性指使用两种不同版本的测量工具，在等值性指使用两种不同版本的测量工具，在短时间内对相同群体进行两次测验或调查，短时间内对相同群体进行两次测验或调查，通过比较二者之间的一致性来推断信度。通过比较二者之间的一致性来推断信度。

1.1 1.2 1.3



提高信度的方法提高信度的方法明确的概念化：当我们只测量单一构念或构念的一个明确的概念化：当我们只测量单一构念或构念的一个

面向（面向（ subdimensionsubdimension ），并有清楚的理论定义时，），并有清楚的理论定义时，信度就会增加；信度就会增加；

提升测量尺度的精确性；提升测量尺度的精确性；使用多重指标：多重指标能使研究者测量一个构念的使用多重指标：多重指标能使研究者测量一个构念的

广泛定义内容。这就好像是从概念领域中做抽样广泛定义内容。这就好像是从概念领域中做抽样（（ sampling from the conceptual domaisampling from the conceptual domainn ），使研究者能测量到一个构念的不同层面；），使研究者能测量到一个构念的不同层面；

使用预试（使用预试（ pretestspretests ）、前导研究（）、前导研究（ pilot pilot studiesstudies ）及重复测试（）及重复测试（ replicationreplication ））

1.1 1.2 1.3



资料资料研究者研究者理论理论方法方法

1.2 Triangulation1.2 Triangulation

1.1 1.2 1.3



关于论文选题关于开题报告关于研究设计关于调查关于访谈关于数据分析关于论文写作

1.3 1.3 论文开题与写作思考论文开题与写作思考1.1

1.2

1.3



关于论文选题关于论文选题

题目的新与旧题目的大与小题目的表达

1.1

1.2

1.3



关于开题报告关于开题报告

研究的意义研究的方法研究的可行性

1.1

1.2

1.3



关于研究设计关于研究设计量的研究：调查实验准实验质性研究的设计访谈参与性观察文本分析

1.1 1.2 1.3



关于调查关于调查明确研究问题形成研究假设设计问卷调查实施数据录入数据分析报告写作

1.1 1.2 1.3



关于访谈关于访谈访谈对象访谈形式资料整理编码概念模型

1.1 1.2 1.3



关于数据分析关于数据分析数据的预处理软件的选择方法的正确使用图表的编排

1.1 1.2 1.3



论文写作论文写作

报告与论文的差别标准化与个性化表达的弹性引用与抄袭的区别



2.2. 理论层面的效度与信度理论层面的效度与信度



1.1 1.1 哲学立场哲学立场

唯物主义与唯心主义英美哲学与欧陆哲学现代主义与后现代主义



2.2 2.2 关于知识和学科关于知识和学科研究是知识的系统有组织的积累；知识在于共享与传播；学科是人造物；学科有权力和暴力问题；研究的范围和意义



2.3 2.3 关于范式关于范式

理论与范式的关系范式间的关系专注与超越关于谦逊



参考资源参考资源

validity and reliability in research2009 11 12

Education