2001/3/15 台北科大 技職所 曾淑惠 1

評鑑概論─ II

歷史演進評鑑工作的各種角色評鑑與研究方案評鑑教育方案評鑑問題討論

2001/3/15 台北科大 技職所 曾淑惠 2

歷史演進前泰勒期 (1800-1930)泰勒期 (1930-1945)成長期 (1945-1957)擴展期 (1958-1972)專業期 (1973- )

2001/3/15 台北科大 技職所 曾淑惠 3

歷史演進 前泰勒期

•評鑑的概念正如中國實施的文官考試制度，在西元前五世紀， Socrates及其他希臘教師已用鑑的發問技巧做為其教學方法的一部分。

•在十九世紀，英國運用皇家委員會以評鑑公共服務。• 1845年，美國 Horace Mann依據實作測驗從事評鑑，以評估 Boston 的學校是否成功的教育其學生。

• 1887-1898年間， Joseph Rice的研究，此一研究通常認為是美國首次實施的正式教育方案的評鑑。

• 1900年代早期發展的另一項評鑑途徑乃是標準化的測驗。

2001/3/15 台北科大 技職所 曾淑惠 4

歷史演進泰勒期

Tyler將評鑑界定為目標是否達成的確定。 在 1942年代， Ralph Tyler在美國對中等教育所作的八年研究計畫

John Dewey及其他學者企圖協助教育，期使教育成為一種動態、革新的及自我更新的制度。

2001/3/15 台北科大 技職所 曾淑惠 5

歷史演進成長期

此一時期教育的提供、人員及設備等的擴展較大。

教育評鑑主要是地方學區的權限。 聯邦和州政府機構尚未深入參與方案的評鑑。 評鑑基金來自地方的財源、各種基金會或各種專業組織。

2001/3/15 台北科大 技職所 曾淑惠 6

歷史演進擴展期

1960年代後期 -1970年代前期，熱列描述、討論和爭論有關評鑑的概念。

Cronbach(1963)的一篇文章中，他嚴厲批評評鑑的主導概念缺乏適切性和實用性，並且勸告評鑑人員避開其所喜好的事後歸因的評鑑，亦即依據實驗組與控制組參照常模測驗成績的比較的評鑑。

參議員 Robert Kennedy及其在國會的同事響應此一關切的事情，修正了 1965年的『初等及中等教育法案』，以包括明確的評鑑要求。

2001/3/15 台北科大 技職所 曾淑惠 7

歷史演進擴展期

Glaser(1963) 、 Tyler(1967)，以及Popham(1971)等指出參照效標測驗為參照常模測驗的另外一種選擇途徑。

Cook(1966)要求使用系統分析途徑以評鑑各種方案。

Phi Delta Kappa設立了全國評鑑研究委員會（ Stufflebeam et al.,1971)。此一委員會的結論是，教育評鑑『罹患重病』，因而要求發展評鑑的新理論和新方法。

2001/3/15 台北科大 技職所 曾淑惠 8

歷史演進專業期

教育評鑑人員在 1970年代將其領域專業化所做的進步實在相當顯著。

有許多的期刊、書籍和論文專門探討評鑑，以供專業資料的交換。

許多大學已開始提供至少一個課程的評鑑方法論。

評鑑有關的研究和發展的中心設立。 Dick Johnson(1980)出版第一本評鑑人員和評鑑機構指南。

2001/3/15 台北科大 技職所 曾淑惠 9

歷史演進 (續 )

第一代評鑑 ----以測驗為內容第二代評鑑 ----陳述客觀事實第三代評鑑 ----以判斷為取向第四代評鑑 ----以協商與溝通為核心

2001/3/15 台北科大 技職所 曾淑惠 10

評鑑工作的各種角色評鑑的當事人 (client)

評鑑的設計者 (designer)

評鑑的協調者 (coordinator)

評鑑的回答者 (respondents)

評鑑的訓練者 (trainer)

評鑑的研究者 (researcher)

2001/3/15 台北科大 技職所 曾淑惠 11

評鑑工作的各種角色 (續 )

評鑑的發展者 (designer)評鑑的個案工作者 (caseworkers)資訊專家 (information specialists)技術支援專家 (technical support

specialists)溝通專家 (communication specialists)

後設評鑑者 (metaevaluator)

2001/3/15 台北科大 技職所 曾淑惠 12

評鑑與研究研究是一種科學，基礎研究用來產生新知識，應用研究則在幫助瞭解事情的現象；評鑑則是一種專業的方法論，運用工具去回答有關品質的特定問題

研究與評鑑最主要的區別在於被研究現象的型態與詢問問題的目的

2001/3/15 台北科大 技職所 曾淑惠 13

評鑑與研究評鑑與研究的不同點 (Worthen& Sanders,

1987) 探詢者的動機 (研究是好奇；評鑑是關切 ) 探詢者的自主權 (研究是獨立的；評鑑代表客戶工作 )

詢問的目的 (研就是尋求結論；評鑑是引導決策 )

詢問的嚴格性 (研究較為強調對預測的控制 )

2001/3/15 台北科大 技職所 曾淑惠 14

評鑑與研究評鑑與研究的不同點 (續 )

解釋的角色 (研究用來回答〝為什麼〞的問題；評鑑用來探索〝有什麼〞問題 )

被研究現象的屬性 (研究產生科學知識；評鑑評估事情的價值 )

被研究現象的一般性 (研究的目標在透過時間將知識加以一般化，以導出可以解釋變數間關係的規則；評鑑則一次就評定一件事情的價值，陳述一件將被評定價值的工作 )

2001/3/15 台北科大 技職所 曾淑惠 15

方案評鑑Evaluation is the systematic collection and

analysis of data needed to make decisions, a process in which most well-run programs engage from the outset.

Program evaluation is carefully collecting information about a program or some aspect of a program in order to make necessary decisions about the program

2001/3/15 台北科大 技職所 曾淑惠 16

方案評鑑Why conduct program evaluation

For project management For staying on track For project efficiency For project accountability For program development and dissemination

2001/3/15 台北科大 技職所 曾淑惠 17

方案評鑑Where program evaluation is helpful

Understand, verify or increase the impact of products or services on customers or clients

Improve delivery mechanisms to be more efficient and less costly

Verify that you’re doing what you think you’re doing

促進方案的管理 增進對社區的服務與公共關係

www.mapnp.org/library/evaluatn/fn1_eval.htm

2001/3/15 台北科大 技職所 曾淑惠 18

方案評鑑Where program evaluation is helpful(cont.)

符合資格認可的需求 說明經費的使用情形 蒐集相關資料並反應事實 做為選擇方案的依據 改進方案 瞭解方案所附帶產生的問題

Posavac& Carey, 1989

2001/3/15 台北科大 技職所 曾淑惠 19

方案評鑑Types of program evaluation

Needs assessmentsAccreditationCost/benefit analysisEffectivenessEfficiencyFormativeSummative

2001/3/15 台北科大 技職所 曾淑惠 20

方案評鑑Types of program evaluation

Goal-baseGoal-freeContextInputProcessProductOutcomeImpact

2001/3/15 台北科大 技職所 曾淑惠 21

方案評鑑Challenge of program

evaluation 政策的轉變衝擊方案的發展 方案評鑑時間的適合性 相關文獻的欠缺 公布方案評鑑項目的訂定不易 受評單位的抱怨與抗議

2001/3/15 台北科大 技職所 曾淑惠 22

教育方案評鑑教育方案：係指對特定教育層面的缺失、或特定教育對象的需求、或特定教育問題的衝擊，謀求改進與解決之道的教育活動，而形成一種發展性教育活動。

教育評鑑：是一個有系統蒐集並解釋證據，藉以判斷教育活動的價值，作為進一步行動參考的過程。

2001/3/15 台北科大 技職所 曾淑惠 23

教育方案評鑑教育方案評鑑的四要素：

系統化蒐集教育方案的相關證據。 審慎地解釋各項證據。 判斷教育方案的價值。 提示改進的行動。

2001/3/15 台北科大 技職所 曾淑惠 24

教育方案評鑑學校需要教育方案評鑑的教育活動有二類：

基礎性活動：是主流教育中已經制度化的例行性教育活動。

發展性活動：是學校為求發展與進步，在基礎活動之外，規畫辦理的特殊性教育活動。

2001/3/15 台北科大 技職所 曾淑惠 25

問題討論為什麼評鑑在發展成為一專業領域花了這麼多的時間 ?

現階段評鑑的主要困境為何 ?