measurement 第七章 測量. measurement 測量 definition :...
Post on 22-Dec-2015
229 views
TRANSCRIPT
Measurement
第七章 測量
Measurement 測量 Definition :
測量系根據法則而分派數字於物體或事件之上 物體或事件所具備之具體特徵 / 特質 (trait) 數字 法則為將物體分派到不同集合的方法
測量的四種基本原則 Classification 分類 Order 次序 Distance 距離 Origin 原點
四種基本測量尺度 Nominal 名目
classification
Ordinal 順序 Order
Interval 等距 / 區間 Distance (Equal interval)
Ratio 等比 / 比率 Origin (Absolute zero)
類型 特性 驗證法 例子
名目 無次序、距離或唯一原點
相等的判定 性別
順序 具次序但無距離或原點
較大較小 牛排熟度
等距 具次序距離但無原點 區間或等差 溫度
等比 具次序距離及唯一原點
比率相等 年齡
造成誤差 ( 信度差 ) 的原因隨機誤差 random error
系統性誤差 systematic error
系統性誤差 受測者誤差 respondent error
不願流露其真正感受或想法 對議題不了解 回答問題時之身心狀況干擾其回答
情境誤差 situational error 外界因素 : 噪音 / 環境 第三者干擾
測量者誤差 measurer error 最常發生在面對面訪談中 訪問員扭曲題意 / 誤導回答方向 資料不完整 / 輸入錯誤
工具誤差 instrument error 問項混淆模糊,題意艱澀難懂 選項不足 問卷印刷不良 作答空間不足
測量工具評估準則 Validity 效度
測量工具能正確測出其所預測良的性質 Reliability 信度
測量程序的正確性與精密性 Practicality 實用度
測量工具的經濟性、方便性、與可解釋性
Reliability and Validity on Target
Old Rifle New Rifle New Rifle
Low Reliability High Reliability Reliable but Not Valid
(Target A) (Target B) (Target C)
信度 Reliability
測量結果是否具有一致性或穩定的程度 信度為效度之必要條件但非充分條件 信度
測量結果穩定性,即可信賴度 測量工具所隱含的誤差
信度衡量的三種類型
信度
穩定性 等值性
TEST RETEST 複本
內部一致性
折半法
穩定性 stability 等值性 equivalence 內部一致性 internal consistency
信度類型 穩定性 Stability
重複測量結果相互一致 優 : 顯示出“時間”對測驗的影響 缺 : 再測一次,記憶和練習均會干擾測量結果 間隔時間 : at least two weeks
方法 : test-retest 同一工具,同一受測人,不同時間點
信度類型 等值性 Equivalence
考慮不同受測人員對同一測量工具所得結果是否相近 ( 或等值 )
考慮同一組受測人員對不同版本所得結果是否相近 ( 或等值 )**
方法 複本測試 : 將測量問題分成兩個內容相當的版本,施測於
同一組人員,比較其兩個版本的結果是否旗鼓相當
信度類型 內部一致性 Internal Consistency
測量項目之間的內部一致性或同質性 (Homogeneity)
internal consistency coefficient
方法 : 折半法 同一測量工具,同一受測人員,同一時間進行測量。將結果依
測量題目隨機分成兩套 data ,並比較這兩套 data 的相關程度,若高度相關,則內部一致性高,信度佳 ! KR 20
Cronbach’s alpha
信度類型 檢測方法 內容
穩定性 test-retest 同一測量工具,同一受測者,不同時間點,比較結果一致程度
等值性 複本測試法 兩個版本,同一受測者,比較結果一致程度
內部一致性 Cronbach alpha 相似測量項目是否反應出相同構念
影響信度之主要原因 測驗長度
間隔時間的長短
受測環境標準化
THE GOAL OF MEASUREMENT
VALIDITY
效度 Validity
測量工具的正確性 ~ 正確的測量出所預測量的特質
效度高 = 測驗結果愈能突顯出事物的特質 效度 : 內部效度 & 外部效度 內部效度
內容效度 content validity 效標效度 criterion-related validity 構念效度 construct validity
VALIDITY
F A C E O R C O N TE N T
C O N C U R R E N T P R E D IC TIV E
C R ITE R IO N V A L ID ITY C O N S TR U C T V A L ID ITY
V alid ity
Convergent
Discriminant
內容效度 Content Validity
測量工具的適切性 測驗內容代表性 ( 測驗內容是否能涵蓋所預測良的構念及變
數 ?) 測量內容是否能充分反映研究的內容 ?
Example: 考試試題內容必須能切合教材內容,教學目標
Face validity 方法 :
專家學者鑑定
效標關聯效度Criterion-related Validity
效標 = 所要測量的行為特徵 測驗 ( 問卷 ) 分數與所欲測量的行為的相關性,高相關 有效 !
大學聯考成績 vs. 入學後學業表現 預測效度 predictive validity
測驗分數與未來效標有高度相關 Example:
selection test scores vs. 未來工作表現 同時效度 concurrent validity
測驗分數與現在的效標有高度相關 Example:
Performance evaluation scores vs. 現在工作表現
構念效度 construct validity
從理論的觀點來檢視測驗工具是否能忠實呈現構念本質,並突顯出該構念與其他構念在理論上的相對關係
符合效度 Convergent validity 用不同的測驗工具衡量同一構念,兩工具所得結果相同
區別效度 Discriminant validity 測量結果可顯示出該構念與其他構念相異之處
Practicality 實用性 經濟性
便利性
可解釋性
發展測量工具四步驟 發展概念 Concept Development
描述概念 Concept Specification
選擇指標 Indicator Selection
形成指標 Formation of Index
發展測量工具流程
Concept Development
Data Collection (I)
Evaluate Scale Reliability
Examine Scale Validity
Item Purification
Generate Item Pool (indicators)
Data Collection (II)
Concept Specification
Formation of Index
Concept Development 發展概念 Emotional labor: 員工對自我情緒操控的程度以符合公司要求
的情緒腳本 文獻探討
Concept Specification 概念具體化 Surface acting (表層 ), deep acting (深層 ), and genuine acti
ng (誠摯 ) Emotive dissonance 情緒斷層 (SA & GA) Emotive effort 情緒努力 (DA)
Generate Item Pool 編製題庫 題庫 size 須為理想試題數之 4-5倍 題庫來源 : focus group, 文獻探討 , 他人相關測驗 5 個 focus group (學生、基層員工、主管 ) 87 items were generated
Data Collection 第一次資料蒐集 目的 : 蒐集初稿量表答案,以進行試題精簡之用 對象 : 具業界工讀經驗之餐旅系學生 200 hospitality students from four universities
Item Purification 試題精簡分析 目的 : 簡化量表題數,剔除不適當的問項 方法 : Factor Analysis 因素分析法 42 items
Data Collection 第二次資料蒐集 目的 : 蒐集 data以再次簡化量表之用 對象 : 旅館員工 112 local hotel employees
Item purification 試題精簡分析 目的 : 簡化量表題數,剔除不適當的問項 方法 : Factor Analysis 因素分析法 26 items
Test for Reliability 信度測試 Internal consistency (cronbach alpha) Emotive dissonance: 0.82 Emotive effort: 0.70
Test for Validity 效度測試 Content validity
Expert feedback 專家回饋 Content adequacy assessment 內容適合度測驗
Construct Validity Discriminant validity
Emotive effort vs. emotive dissonance Convergent validity
每個題目皆可清楚的對召回其所屬的構面
形成指標 Formation of Index 李克特量表 (Likert Scale) 1~7 選項
1: 很少; 7: 時常 量表完成 !!
Hospitality Emotional Labor Scale 20 items
Emotional Labor Emotive Dissonance
The emotion I show to customers match what I truly feel
I put on a mask to express the right emotions for my jobs
Emotive Effort I think of happy things when I am getting ready for
work
有關盜版物品的看法 是否認識任何人曾經有做過下列之活動
拷貝有版權的軟體 拷貝有版權的錄音帶或 CD 拷貝有版權的錄影帶 VCD 或 DVD 從網路上抓歌 拷貝具有版權的書籍
你認為上述的行為會持續發生或減少 ?
Survey Error
Total Error
Random sampling error
Systematic error
Respondent error
Administrative error
Nonresponse error
Response bias
Data processing error
Sample selection error
Interview error
Interviewer cheating