2001/3/1 台北科大 技職所 曾淑惠 1 評鑑概論 前言 何謂評鑑 ? 評鑑的範疇 評鑑的倫理考量 哲學的考量 對評鑑的誤解 問題討論

2001/3/1 台北科大 技職所 曾淑惠 2 前言 評鑑是一項生存的技能，也是一項競爭的優勢 Evaluation is something we do all the time, several times a day, and have done since before language development. No practical activity proceeds without evaluation Sources:

2001/3/1 台北科大 技職所 曾淑惠 3 何謂評鑑 對不同人來說，評鑑有不同的意義 有許多途徑來概念化評鑑這個名詞： 從哲學、目的、功能或方法，大多 數的評鑑定義包含兩種以上的向度， 但卻沒有一個定義以全方位的向度， 涵蓋整體的概念。

2001/3/1 台北科大 技職所 曾淑惠 4 何謂評鑑 從評鑑的本質而言  評鑑是一個比較應然面 ( 如參考準則 ) 與實然 面 ( 現況資料 ) ，以評定受評者的優點或價值 (Steele, 1991)  評鑑是包含定義、說明、可辨證的參考準則 等，以決定評鑑標的物的價值、品質、有效 性或重要性 (Worthen, Sanders &Fitzpatrick, 1997)  評鑑是由外部評鑑人員依契約作系統性的檢 驗，以確定方案的成果 ----EHR

2001/3/1 台北科大 技職所 曾淑惠 5 何謂評鑑 從評鑑的目的而言  評鑑是決定優點、價值、或重要性的程序 (Michael Scriven, 1991)  評鑑是評估一些事物的優點或價值 (Stufflebeam, 1985)  評鑑是一個用來決定方案的設計與實施是否 有效能，及與運作結果是否相符的過程 (Caffarella, 1994)  評鑑是提供決策者關於方案運作或效能的可 信、有效、相關且有用的資訊 (McLaughlin, 1990)  Not to prove, but to improve(Stufflebeam, et. al., 1979)

2001/3/1 台北科大 技職所 曾淑惠 6 何謂評鑑 從評鑑的功能而言  評鑑在決定方案的目標是否達成  評鑑用來證明方案的效能  評鑑在判斷方案的優缺點  評鑑在提供訊息以幫助重要決策  評鑑的價值在作為改進方案的指引 有人視評鑑為 “go through the mission’ 因為方案的決策不是來自評鑑的原理 ，而是來自於政治經驗的考量

2001/3/1 台北科大 技職所 曾淑惠 7 何謂評鑑 評鑑是一個持續的詢問過程  詢問有關社會、經濟、環境條件與方案內部 發展環境的過程 ( 如背景評鑑或計畫評鑑 )  詢問有關方案如何設計、及方案傳遞給觀眾 的意圖等問題 ( 如投入評鑑或過程評鑑 )  詢問有關方案欲產生成果相關的問題 ( 如 outcome 評鑑、 product 評鑑或 impact 評鑑 ) 評鑑是涉及系統化地蒐集、分析、及報告一些 可以用來改變態度或改進方案運作資料等的活 動，其中系統化是指評鑑必須經過規劃 (Alkin, 1990)

2001/3/1 台北科大 技職所 曾淑惠 8 探討範圍 Program evaluation Project evaluation School evaluation Personnel evaluation Policy evaluation Stuff evaluation Performance evaluation Curriculum evaluation ………… What is the difference!

2001/3/1 台北科大 技職所 曾淑惠 9 相關名詞 評鑑 訪視 評量 視導 評鑑研究 ( 成效 ) 評估 What is the difference!

2001/3/1 台北科大 技職所 曾淑惠 10 評鑑的倫理考量 受評者必需出於自願，受評者必須瞭解 他們在評鑑中自由參與，可以隨時抽離， 而不用在現在或將來交付違約金，或損 失方案的服務與利益 必需給與將要受評者有關評鑑的資訊， 包含目的、受評時間長短、程序、利益、 可能的危機或不便，讓他們自由選擇要 不要參與

2001/3/1 台北科大 技職所 曾淑惠 11 評鑑的倫理考量 不會因為參與評鑑而有物質上、情感上、 精神上的傷害 要保護全部有關受評者的敏感資訊，包 括：以匿名方式呈現資訊；當無法匿名 時，以數字或編碼的方式，從評鑑資料 中隔離個人的識別資訊 有關個人隱私的主題，更進一步受到不 要蒐集或報導的保護，避免資料被評鑑 委員以外的任何人，識別這些個人資訊

2001/3/1 台北科大 技職所 曾淑惠 12 評鑑的倫理考量 必須確保受評對象的觀點與看法、好惡、 建議與意見，可以受到祕密的對待，而 且只有與評鑑最密切的人可以得到此資 訊

2001/3/1 台北科大 技職所 曾淑惠 13 哲學的觀點 評鑑的政策、倫理與個人觀點 (Michale Patton, 1995)  不管評鑑結果顯示方案執行的真實性 如何，都不是絕對且單一向度的，而 是相對且可作多重解釋的  方案評鑑受到執行評鑑者的哲學信念 極大的影響，而執行評鑑者所作的決 策包括：評鑑什麼、如何評鑑、誰參 與評鑑、以及反應其關切信仰的評鑑 問題

2001/3/1 台北科大 技職所 曾淑惠 14 哲學的觀點 執行評鑑者、受評對象、財務支援者等， 在方案的理念、評鑑執行程序、蒐集的 資訊、量測的方法等看法上，或許會有 所不同 不論你的哲學為何，最好能與受評 對象仔細地討論並作反省，而且要 在評鑑的過程中不斷地修正

2001/3/1 台北科大 技職所 曾淑惠 15 哲學的觀點 方案評鑑應有的態度與觀念  接受「評鑑是整體方案中的一部份， 是有用的活動」的觀念  要做些什麼事才能反應組織的要求  相信評鑑是一個可以幫助個人發展與 專業化的過程，特別是在滿足公眾對 績效責任的要求時

2001/3/1 台北科大 技職所 曾淑惠 16 對評鑑的誤解 評鑑產生一些無用的結論資料 評鑑只在證明方案的成功或失敗 評鑑是發生在特定時間，採用特定的方 式，且絕大部份需要外部評鑑人員

2001/3/1 台北科大 技職所 曾淑惠 17 問題討論 Evaluation vs. research What is the difference!