measurement 第七章 測量. measurement 測量 definition :...

Measurement

第七章 測量

Measurement 測量 Definition :

測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait) 數字 法則為將物體分派到不同集合的方法

測量的四種基本原則 Classification 分類 Order 次序 Distance 距離 Origin 原點

四種基本測量尺度 Nominal 名目

classification

Ordinal 順序 Order

Interval 等距 / 區間 Distance (Equal interval)

Ratio 等比 / 比率 Origin (Absolute zero)

類型 特性 驗證法 例子

名目 無次序、距離或唯一原點

相等的判定 性別

順序 具次序但無距離或原點

較大較小 牛排熟度

等距 具次序距離但無原點 區間或等差 溫度

等比 具次序距離及唯一原點

比率相等 年齡

造成誤差 ( 信度差 ) 的原因隨機誤差 random error

系統性誤差 systematic error

系統性誤差 受測者誤差 respondent error

不願流露其真正感受或想法 對議題不了解 回答問題時之身心狀況干擾其回答

情境誤差 situational error 外界因素 : 噪音 / 環境 第三者干擾

測量者誤差 measurer error 最常發生在面對面訪談中 訪問員扭曲題意 / 誤導回答方向 資料不完整 / 輸入錯誤

工具誤差 instrument error 問項混淆模糊，題意艱澀難懂 選項不足 問卷印刷不良 作答空間不足

測量工具評估準則 Validity 效度

測量工具能正確測出其所預測良的性質 Reliability 信度

測量程序的正確性與精密性 Practicality 實用度

測量工具的經濟性、方便性、與可解釋性

Reliability and Validity on Target

Old Rifle New Rifle New Rifle

Low Reliability High Reliability Reliable but Not Valid

(Target A) (Target B) (Target C)

信度 Reliability

測量結果是否具有一致性或穩定的程度 信度為效度之必要條件但非充分條件 信度

測量結果穩定性，即可信賴度 測量工具所隱含的誤差

信度衡量的三種類型

信度

穩定性 等值性

TEST RETEST 複本

內部一致性

折半法

穩定性 stability 等值性 equivalence 內部一致性 internal consistency

信度類型 穩定性 Stability

重複測量結果相互一致 優 : 顯示出“時間”對測驗的影響 缺 : 再測一次，記憶和練習均會干擾測量結果 間隔時間 : at least two weeks

方法 : test-retest 同一工具，同一受測人，不同時間點

信度類型 等值性 Equivalence

考慮不同受測人員對同一測量工具所得結果是否相近 ( 或等值 )

考慮同一組受測人員對不同版本所得結果是否相近 ( 或等值 )**

方法 複本測試 : 將測量問題分成兩個內容相當的版本，施測於

同一組人員，比較其兩個版本的結果是否旗鼓相當

信度類型 內部一致性 Internal Consistency

測量項目之間的內部一致性或同質性 (Homogeneity)

internal consistency coefficient

方法 : 折半法 同一測量工具，同一受測人員，同一時間進行測量。將結果依

測量題目隨機分成兩套 data ，並比較這兩套 data 的相關程度，若高度相關，則內部一致性高，信度佳 ! KR 20

Cronbach’s alpha

信度類型 檢測方法 內容

穩定性 test-retest 同一測量工具，同一受測者，不同時間點，比較結果一致程度

等值性 複本測試法 兩個版本，同一受測者，比較結果一致程度

內部一致性 Cronbach alpha 相似測量項目是否反應出相同構念

影響信度之主要原因 測驗長度

間隔時間的長短

受測環境標準化

THE GOAL OF MEASUREMENT

VALIDITY

效度 Validity

測量工具的正確性 ~ 正確的測量出所預測量的特質

效度高 = 測驗結果愈能突顯出事物的特質 效度 : 內部效度 & 外部效度 內部效度

內容效度 content validity 效標效度 criterion-related validity 構念效度 construct validity

VALIDITY

F A C E O R C O N TE N T

C O N C U R R E N T P R E D IC TIV E

C R ITE R IO N V A L ID ITY C O N S TR U C T V A L ID ITY

V alid ity

Convergent

Discriminant

內容效度 Content Validity

測量工具的適切性 測驗內容代表性 ( 測驗內容是否能涵蓋所預測良的構念及變

數 ?) 測量內容是否能充分反映研究的內容 ?

Example: 考試試題內容必須能切合教材內容，教學目標

Face validity 方法 :

專家學者鑑定

效標關聯效度Criterion-related Validity

效標 = 所要測量的行為特徵 測驗 ( 問卷 ) 分數與所欲測量的行為的相關性，高相關 有效 !

大學聯考成績 vs. 入學後學業表現 預測效度 predictive validity

測驗分數與未來效標有高度相關 Example:

selection test scores vs. 未來工作表現 同時效度 concurrent validity

測驗分數與現在的效標有高度相關 Example:

Performance evaluation scores vs. 現在工作表現

構念效度 construct validity

從理論的觀點來檢視測驗工具是否能忠實呈現構念本質，並突顯出該構念與其他構念在理論上的相對關係

符合效度 Convergent validity 用不同的測驗工具衡量同一構念，兩工具所得結果相同

區別效度 Discriminant validity 測量結果可顯示出該構念與其他構念相異之處

Practicality 實用性 經濟性

便利性

可解釋性

發展測量工具四步驟 發展概念 Concept Development

描述概念 Concept Specification

選擇指標 Indicator Selection

形成指標 Formation of Index

發展測量工具流程

Concept Development

Data Collection (I)

Evaluate Scale Reliability

Examine Scale Validity

Item Purification

Generate Item Pool (indicators)

Data Collection (II)

Concept Specification

Formation of Index

Concept Development 發展概念 Emotional labor: 員工對自我情緒操控的程度以符合公司要求

的情緒腳本 文獻探討

Concept Specification 概念具體化 Surface acting (表層 ), deep acting (深層 ), and genuine acti

ng (誠摯 ) Emotive dissonance 情緒斷層 (SA & GA) Emotive effort 情緒努力 (DA)

Generate Item Pool 編製題庫 題庫 size 須為理想試題數之 4-5倍 題庫來源 : focus group, 文獻探討 , 他人相關測驗 5 個 focus group (學生、基層員工、主管 ) 87 items were generated

Data Collection 第一次資料蒐集 目的 : 蒐集初稿量表答案，以進行試題精簡之用 對象 : 具業界工讀經驗之餐旅系學生 200 hospitality students from four universities

Item Purification 試題精簡分析 目的 : 簡化量表題數，剔除不適當的問項 方法 : Factor Analysis 因素分析法 42 items

Data Collection 第二次資料蒐集 目的 : 蒐集 data以再次簡化量表之用 對象 : 旅館員工 112 local hotel employees

Item purification 試題精簡分析 目的 : 簡化量表題數，剔除不適當的問項 方法 : Factor Analysis 因素分析法 26 items

Test for Reliability 信度測試 Internal consistency (cronbach alpha) Emotive dissonance: 0.82 Emotive effort: 0.70

Test for Validity 效度測試 Content validity

Expert feedback 專家回饋 Content adequacy assessment 內容適合度測驗

Construct Validity Discriminant validity

Emotive effort vs. emotive dissonance Convergent validity

每個題目皆可清楚的對召回其所屬的構面

形成指標 Formation of Index 李克特量表 (Likert Scale) 1~7 選項

1: 很少； 7: 時常 量表完成 !!

Hospitality Emotional Labor Scale 20 items

Emotional Labor Emotive Dissonance

The emotion I show to customers match what I truly feel

I put on a mask to express the right emotions for my jobs

Emotive Effort I think of happy things when I am getting ready for

work

有關盜版物品的看法 是否認識任何人曾經有做過下列之活動

拷貝有版權的軟體 拷貝有版權的錄音帶或 CD 拷貝有版權的錄影帶 VCD 或 DVD 從網路上抓歌 拷貝具有版權的書籍

你認為上述的行為會持續發生或減少 ?

Survey Error

Total Error

Random sampling error

Systematic error

Respondent error

Administrative error

Nonresponse error

Response bias

Data processing error

Sample selection error

Interview error

Interviewer cheating