measurement 第七章 測量. measurement 測量 definition :...

36
Measurement 第第第 第第

Post on 22-Dec-2015

229 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Measurement

第七章 測量

Page 2: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Measurement 測量 Definition :

測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait) 數字 法則為將物體分派到不同集合的方法

Page 3: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

測量的四種基本原則 Classification 分類 Order 次序 Distance 距離 Origin 原點

Page 4: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

四種基本測量尺度 Nominal 名目

classification

Ordinal 順序 Order

Interval 等距 / 區間 Distance (Equal interval)

Ratio 等比 / 比率 Origin (Absolute zero)

Page 5: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

類型 特性 驗證法 例子

名目 無次序、距離或唯一原點

相等的判定 性別

順序 具次序但無距離或原點

較大較小 牛排熟度

等距 具次序距離但無原點 區間或等差 溫度

等比 具次序距離及唯一原點

比率相等 年齡

Page 6: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

造成誤差 ( 信度差 ) 的原因隨機誤差 random error

系統性誤差 systematic error

Page 7: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

系統性誤差 受測者誤差 respondent error

不願流露其真正感受或想法 對議題不了解 回答問題時之身心狀況干擾其回答

情境誤差 situational error 外界因素 : 噪音 / 環境 第三者干擾

測量者誤差 measurer error 最常發生在面對面訪談中 訪問員扭曲題意 / 誤導回答方向 資料不完整 / 輸入錯誤

工具誤差 instrument error 問項混淆模糊,題意艱澀難懂 選項不足 問卷印刷不良 作答空間不足

Page 8: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

測量工具評估準則 Validity 效度

測量工具能正確測出其所預測良的性質 Reliability 信度

測量程序的正確性與精密性 Practicality 實用度

測量工具的經濟性、方便性、與可解釋性

Page 9: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Reliability and Validity on Target

Old Rifle New Rifle New Rifle

Low Reliability High Reliability Reliable but Not Valid

(Target A) (Target B) (Target C)

Page 10: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度 Reliability

測量結果是否具有一致性或穩定的程度 信度為效度之必要條件但非充分條件 信度

測量結果穩定性,即可信賴度 測量工具所隱含的誤差

Page 11: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度衡量的三種類型

信度

穩定性 等值性

TEST RETEST 複本

內部一致性

折半法

穩定性 stability 等值性 equivalence 內部一致性 internal consistency

Page 12: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度類型 穩定性 Stability

重複測量結果相互一致 優 : 顯示出“時間”對測驗的影響 缺 : 再測一次,記憶和練習均會干擾測量結果 間隔時間 : at least two weeks

方法 : test-retest 同一工具,同一受測人,不同時間點

Page 13: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度類型 等值性 Equivalence

考慮不同受測人員對同一測量工具所得結果是否相近 ( 或等值 )

考慮同一組受測人員對不同版本所得結果是否相近 ( 或等值 )**

方法 複本測試 : 將測量問題分成兩個內容相當的版本,施測於

同一組人員,比較其兩個版本的結果是否旗鼓相當

Page 14: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度類型 內部一致性 Internal Consistency

測量項目之間的內部一致性或同質性 (Homogeneity)

internal consistency coefficient

方法 : 折半法 同一測量工具,同一受測人員,同一時間進行測量。將結果依

測量題目隨機分成兩套 data ,並比較這兩套 data 的相關程度,若高度相關,則內部一致性高,信度佳 ! KR 20

Cronbach’s alpha

Page 15: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

信度類型 檢測方法 內容

穩定性 test-retest 同一測量工具,同一受測者,不同時間點,比較結果一致程度

等值性 複本測試法 兩個版本,同一受測者,比較結果一致程度

內部一致性 Cronbach alpha 相似測量項目是否反應出相同構念

Page 16: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

影響信度之主要原因 測驗長度

間隔時間的長短

受測環境標準化

Page 17: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

THE GOAL OF MEASUREMENT

VALIDITY

Page 18: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

效度 Validity

測量工具的正確性 ~ 正確的測量出所預測量的特質

效度高 = 測驗結果愈能突顯出事物的特質 效度 : 內部效度 & 外部效度 內部效度

內容效度 content validity 效標效度 criterion-related validity 構念效度 construct validity

Page 19: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

VALIDITY

F A C E O R C O N TE N T

C O N C U R R E N T P R E D IC TIV E

C R ITE R IO N V A L ID ITY C O N S TR U C T V A L ID ITY

V alid ity

Convergent

Discriminant

Page 20: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

內容效度 Content Validity

測量工具的適切性 測驗內容代表性 ( 測驗內容是否能涵蓋所預測良的構念及變

數 ?) 測量內容是否能充分反映研究的內容 ?

Example: 考試試題內容必須能切合教材內容,教學目標

Face validity 方法 :

專家學者鑑定

Page 21: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

效標關聯效度Criterion-related Validity

效標 = 所要測量的行為特徵 測驗 ( 問卷 ) 分數與所欲測量的行為的相關性,高相關 有效 !

大學聯考成績 vs. 入學後學業表現 預測效度 predictive validity

測驗分數與未來效標有高度相關 Example:

selection test scores vs. 未來工作表現 同時效度 concurrent validity

測驗分數與現在的效標有高度相關 Example:

Performance evaluation scores vs. 現在工作表現

Page 22: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

構念效度 construct validity

從理論的觀點來檢視測驗工具是否能忠實呈現構念本質,並突顯出該構念與其他構念在理論上的相對關係

符合效度 Convergent validity 用不同的測驗工具衡量同一構念,兩工具所得結果相同

區別效度 Discriminant validity 測量結果可顯示出該構念與其他構念相異之處

Page 23: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Practicality 實用性 經濟性

便利性

可解釋性

Page 24: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

發展測量工具四步驟 發展概念 Concept Development

描述概念 Concept Specification

選擇指標 Indicator Selection

形成指標 Formation of Index

Page 25: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

發展測量工具流程

Concept Development

Data Collection (I)

Evaluate Scale Reliability

Examine Scale Validity

Item Purification

Generate Item Pool (indicators)

Data Collection (II)

Concept Specification

Formation of Index

Page 26: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Concept Development 發展概念 Emotional labor: 員工對自我情緒操控的程度以符合公司要求

的情緒腳本 文獻探討

Concept Specification 概念具體化 Surface acting (表層 ), deep acting (深層 ), and genuine acti

ng (誠摯 ) Emotive dissonance 情緒斷層 (SA & GA) Emotive effort 情緒努力 (DA)

Generate Item Pool 編製題庫 題庫 size 須為理想試題數之 4-5倍 題庫來源 : focus group, 文獻探討 , 他人相關測驗 5 個 focus group (學生、基層員工、主管 ) 87 items were generated

Page 27: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Data Collection 第一次資料蒐集 目的 : 蒐集初稿量表答案,以進行試題精簡之用 對象 : 具業界工讀經驗之餐旅系學生 200 hospitality students from four universities

Item Purification 試題精簡分析 目的 : 簡化量表題數,剔除不適當的問項 方法 : Factor Analysis 因素分析法 42 items

Data Collection 第二次資料蒐集 目的 : 蒐集 data以再次簡化量表之用 對象 : 旅館員工 112 local hotel employees

Item purification 試題精簡分析 目的 : 簡化量表題數,剔除不適當的問項 方法 : Factor Analysis 因素分析法 26 items

Page 28: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Test for Reliability 信度測試 Internal consistency (cronbach alpha) Emotive dissonance: 0.82 Emotive effort: 0.70

Test for Validity 效度測試 Content validity

Expert feedback 專家回饋 Content adequacy assessment 內容適合度測驗

Construct Validity Discriminant validity

Emotive effort vs. emotive dissonance Convergent validity

每個題目皆可清楚的對召回其所屬的構面

Page 29: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

形成指標 Formation of Index 李克特量表 (Likert Scale) 1~7 選項

1: 很少; 7: 時常 量表完成 !!

Hospitality Emotional Labor Scale 20 items

Page 30: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Emotional Labor Emotive Dissonance

The emotion I show to customers match what I truly feel

I put on a mask to express the right emotions for my jobs

Emotive Effort I think of happy things when I am getting ready for

work

Page 31: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)
Page 32: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)
Page 33: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)
Page 34: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)
Page 35: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

有關盜版物品的看法 是否認識任何人曾經有做過下列之活動

拷貝有版權的軟體 拷貝有版權的錄音帶或 CD 拷貝有版權的錄影帶 VCD 或 DVD 從網路上抓歌 拷貝具有版權的書籍

你認為上述的行為會持續發生或減少 ?

Page 36: Measurement 第七章 測量. Measurement 測量 Definition : 測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait)

Survey Error

Total Error

Random sampling error

Systematic error

Respondent error

Administrative error

Nonresponse error

Response bias

Data processing error

Sample selection error

Interview error

Interviewer cheating