1、2001/3/1,台北科大 技職所 曾淑惠,1,評鑑概論,前言何謂評鑑?評鑑的範疇評鑑的倫理考量哲學的考量對評鑑的誤解問題討論,2001/3/1,台北科大 技職所 曾淑惠,2,前言,評鑑是一項生存的技能,也是一項競爭的優勢Evaluation is something we do all the time, several times a day, and have done since before language development.No practical activity proceeds without evaluationSources: http:/eval.cgu.edu
2、/lectures/intro,2001/3/1,台北科大 技職所 曾淑惠,3,何謂評鑑,對不同人來說,評鑑有不同的意義有許多途徑來概念化評鑑這個名詞:從哲學、目的、功能或方法,大多數的評鑑定義包含兩種以上的向度,但卻沒有一個定義以全方位的向度,涵蓋整體的概念。,2001/3/1,台北科大 技職所 曾淑惠,4,何謂評鑑,從評鑑的本質而言評鑑是一個比較應然面(如參考準則)與實然面(現況資料),以評定受評者的優點或價值(Steele, 1991)評鑑是包含定義、說明、可辨證的參考準則等,以決定評鑑標的物的價值、品質、有效性或重要性(Worthen, Sanders &Fitzpatrick, 19
3、97)評鑑是由外部評鑑人員依契約作系統性的檢驗,以確定方案的成果-EHR,2001/3/1,台北科大 技職所 曾淑惠,5,何謂評鑑,從評鑑的目的而言評鑑是決定優點、價值、或重要性的程序(Michael Scriven, 1991)評鑑是評估一些事物的優點或價值(Stufflebeam, 1985)評鑑是一個用來決定方案的設計與實施是否有效能,及與運作結果是否相符的過程(Caffarella, 1994)評鑑是提供決策者關於方案運作或效能的可信、有效、相關且有用的資訊(McLaughlin, 1990)Not to prove, but to improve(Stufflebeam, et. a
4、l., 1979),2001/3/1,台北科大 技職所 曾淑惠,6,何謂評鑑,從評鑑的功能而言評鑑在決定方案的目標是否達成評鑑用來證明方案的效能評鑑在判斷方案的優缺點評鑑在提供訊息以幫助重要決策評鑑的價值在作為改進方案的指引,有人視評鑑為“go through the mission因為方案的決策不是來自評鑑的原理,而是來自於政治經驗的考量,2001/3/1,台北科大 技職所 曾淑惠,7,何謂評鑑,評鑑是一個持續的詢問過程詢問有關社會、經濟、環境條件與方案內部發展環境的過程(如背景評鑑或計畫評鑑)詢問有關方案如何設計、及方案傳遞給觀眾的意圖等問題(如投入評鑑或過程評鑑)詢問有關方案欲產生成果相
5、關的問題(如outcome評鑑、product評鑑或impact評鑑)評鑑是涉及系統化地蒐集、分析、及報告一些可以用來改變態度或改進方案運作資料等的活動,其中系統化是指評鑑必須經過規劃(Alkin, 1990),2001/3/1,台北科大 技職所 曾淑惠,8,探討範圍,Program evaluationProject evaluationSchool evaluationPersonnel evaluationPolicy evaluationStuff evaluationPerformance evaluationCurriculum evaluation,What is the dif
6、ference!,2001/3/1,台北科大 技職所 曾淑惠,9,相關名詞,評鑑訪視評量視導評鑑研究(成效)評估,What is the difference!,2001/3/1,台北科大 技職所 曾淑惠,10,評鑑的倫理考量,受評者必需出於自願,受評者必須瞭解他們在評鑑中自由參與,可以隨時抽離,而不用在現在或將來交付違約金,或損失方案的服務與利益必需給與將要受評者有關評鑑的資訊,包含目的、受評時間長短、程序、利益、可能的危機或不便,讓他們自由選擇要不要參與,2001/3/1,台北科大 技職所 曾淑惠,11,評鑑的倫理考量,不會因為參與評鑑而有物質上、情感上、精神上的傷害要保護全部有關受評者的
7、敏感資訊,包括:以匿名方式呈現資訊;當無法匿名時,以數字或編碼的方式,從評鑑資料中隔離個人的識別資訊有關個人隱私的主題,更進一步受到不要蒐集或報導的保護,避免資料被評鑑委員以外的任何人,識別這些個人資訊,2001/3/1,台北科大 技職所 曾淑惠,12,評鑑的倫理考量,必須確保受評對象的觀點與看法、好惡、建議與意見,可以受到祕密的對待,而且只有與評鑑最密切的人可以得到此資訊,2001/3/1,台北科大 技職所 曾淑惠,13,哲學的觀點,評鑑的政策、倫理與個人觀點(Michale Patton, 1995)不管評鑑結果顯示方案執行的真實性如何,都不是絕對且單一向度的,而是相對且可作多重解釋的方案
8、評鑑受到執行評鑑者的哲學信念極大的影響,而執行評鑑者所作的決策包括:評鑑什麼、如何評鑑、誰參與評鑑、以及反應其關切信仰的評鑑問題,2001/3/1,台北科大 技職所 曾淑惠,14,哲學的觀點,執行評鑑者、受評對象、財務支援者等,在方案的理念、評鑑執行程序、蒐集的資訊、量測的方法等看法上,或許會有所不同,不論你的哲學為何,最好能與受評對象仔細地討論並作反省,而且要在評鑑的過程中不斷地修正,2001/3/1,台北科大 技職所 曾淑惠,15,哲學的觀點,方案評鑑應有的態度與觀念接受評鑑是整體方案中的一部份,是有用的活動的觀念要做些什麼事才能反應組織的要求相信評鑑是一個可以幫助個人發展與專業化的過程,特別是在滿足公眾對績效責任的要求時,2001/3/1,台北科大 技職所 曾淑惠,16,對評鑑的誤解,評鑑產生一些無用的結論資料評鑑只在證明方案的成功或失敗評鑑是發生在特定時間,採用特定的方式,且絕大部份需要外部評鑑人員,2001/3/1,台北科大 技職所 曾淑惠,17,問題討論,Evaluation vs. research,What is the difference!,