方案評估
方案評估 (program evaluation)的定義是運用系統性、質性研究、定量研究等方法來分析資料、蒐集證據,以客觀判斷社區方案或其他服務之成效與影響[1][2]。因此,方案評估兼具責信(accountability)與學習的重要功能[3]。
方案評估的發展演進
- 方案評估最早發展於第一次世界大戰前的教育與公共衛生領域。[5][6]
- 1930年代,社會科學專家開始使用嚴謹的研究方法去評估一些領域的社會方案。[6]
- 1960年代,方案評估的專業領域發展出檢驗方案過程與成果的科學概念與方法。[1]
- 1963年,美國國會通過的「社區心理衛生中心法案」中,即訂有方案評估之相關要求。
- 1975年,「Evaluation Review」專業期刊問世。[6]
- 1975年,「社區心理衛生中心修正案」更特別要求各中心應評估服務方案的需求與實施成效。從此,方案評估就開始成為社區心理衛生中心的重要工作之一。
- 1980與1990年代,方案評估已包含服務提供的成本效果分析(cost-effectiveness analysis)。[5]
- 美國評估學會(American Evaluation Association)隨後創立,目前有將近3500位來自不同州郡、國家與專業的成員。[6]
方案評估的重要概念
過程評估
過程評估(process evaluation)與形成性評估(formative evaluation)、監測與評估(monitoring and evaluation)的概念近似,其主要目的皆在透過即時追蹤或檢視方案執行的過程與相關產出,以確保依照先前方案所設定的計畫目標與期望效益,並循著在具監測功能系統的架構中持續進行下去與完成。因此,方案過程的監測與評估是非常重要的,這攸關一個方案的成敗。過程評估的量化與質化的方式,包括服務人數或人次統計、使用率、問題或資源分析、會議或團體的記錄、個案晤談記錄、成本分析、工作日誌等。[7][8][9][3]
結果評估
結果評估(outcome evaluation)與總結性評估(summative evaluation)、績效評估(performance evaluation)的概念接近,通常指在方案執行完畢之後(也可能是期程之中某個階段完成)的時間點,透過量化或質化的方法來評價方案是否已達到原先設定的計畫目標與期望效果。結果評估的測量方法有實驗設計與準實驗設計兩種類型,包括人員訪談、自我報告、滿意度、前後測比較、個案研究、行動研究、隨機對照驗證(randomized controlled trials, RCTs)等。[7][10][3]
影響評估
影響評估(impact evaluation)是最具耗時費力與技術難度的評估工作,其指在方案結束一段時間之後,再來評估原先方案設定的最終正向結果或長期的影響程度。例如方案標的對象的快樂幸福感是否持續惡化或有具體提昇,另外發生率(incidence)或盛行率(prevalence)也是常用來評估各類初級預防方案長期影響的客觀指標,其他非量化的資料亦可提供影響評估佐證,如醫療記錄、健康檢查報告、學校成績單、考試榜單等。為了確認標的對象的正向改變與相關影響是受到方案介入所致,最好能使用實驗設計的方式(實驗組與對照組)來證明,受試樣本數不能太少且需隨機的抽樣過程。目前,有因果推論(causal inference)的新策略,包含因果歸因(causal attribution)與因果貢獻(causal contribution)兩種。[7][6][3]
方案評估的不同類型
參與或合作評估
參與或合作評估(participatory or collaborative evaluation)是評估者與利害關係人(stakeholders)代表組成評估團隊,共同合作以進行評估計畫、實施與分析,但評估者在團隊中只是領導與諮詢者。[6] [4]
相關條目
维基共享资源中相关的多媒体资源:方案評估 |
- 需求評估 (need assessment)
- 賦權評估 (empowerment evaluation)
- 成本效果分析 (cost-effectiveness analysis, CEA)
- 成本效益分析 (cost-benefit analysis, CBA)
- 專案管理 (project management)
- 全面品質管理 (total quality management, TQM)
- 政策分析 (policy analysis)
- 地理資訊系統 (geographic information system, GIS)
- 社區心理學 (community psychology)
- 社區諮商 (community counseling)
- 初級預防 (primary prevention)
- 社區心理衛生中心 (community mental health center)
參考文獻
- Dalton, James H.; Maurice J. Elias, Abraham Wandersman. . Wadsworth/Thomson Learning. 2007. ISBN 0-534-63454-0.
- Lewis, Judith A.; Michael D. Lewis, Judy A. Daniels, Michael J. D’Andrea. . Brooks/Cole-Thomson Learning]. 2003. ISBN 0-534-50626-7.
- Cyrus Samii. (PDF). 2010年8月8日 [2021-02-12查閱].
- 許耕榮; 陳嘉鳳、王榮春、韓明榮與林柏煌. . . 2004年.
- Scileppi, John A.; Elizabeth Lee Teed, Robin Diller Torres. . Prentice-Hall. 2000. ISBN 0-13-083341-X.
- Rossi, Peter H.; Mark W. Lipsey, Howard E. Freeman. . Sage Publications. 2004. ISBN 0-7619-0894-3.
- Lewis, Judith A.; Michael D. Lewis, Judy A. Daniels, Michael J. D’Andrea. . Brooks/Cole-Thomson Learning]. 2003. ISBN 0-534-50626-7.
- Rudkin, Jennifer Kofkin. . Prentice Hall]. 2003. ISBN 0-13-089903-8.
- Gladding, Samuel T.; Deborah W. Newsome. . Pearson Education]. 2004. ISBN 0-13-093312-0.
- Dalton, James H.; Maurice J. Elias, Abraham Wandersman. . Wadsworth/Thomson Learning]. 2007. ISBN 0-534-63454-0.
- Fetterman, David M. . Thousand Oaks, CA: Sage Publications]. 2001. ISBN 0-803-95669-X.
- Fetterman, David M.; Abraham Wandersman. . New York, NY: Guilford Publications]. 2005. ISBN 1-593-85114-6.
- Fetterman, David M.; Shakeh Kaftarian & Abraham Wandersman. . Thousand Oaks, CA: Sage Publications]. 1996. ISBN 0-761-90025-X.
延伸閱讀
- Chelimsky, Eleanor; William R. Shadish. . Sage Publications. 1997. ISBN 0-7619-0619-X 请检查
|isbn=
值 (帮助). - Speer, David C. . Academic Press. 1998. ISBN 0-12-656575-9.
- Patton, Michael Q. . Sage Publications. 1997. ISBN 0-8039-5265-1.
- Fitzpatrick, Jody L.; James R. Sanders, Blaine R. Worthen. . Allyn and Bacon. 2004. ISBN 0-321-07706-7.
- Mordock, John B. . CWLA Press. 2002. ISBN 0-87868-814-5.
- Lewis, Judith A.; Michael D. Lewis, Thomas Packaedd, Federico Souflée, JR. . Wadsworth Publishing. 2001. ISBN 0-534-36886-7.
- Schalock, Robert L. . Kluwer Academic/Plenum Publishers. 2001. ISBN 0-306-46458-6.
- Cone, John D. . American Psychological Association. 2001. ISBN 1-55798-723-8.
- Getting To Outcomes™ 2004:Promoting Accountability Through Methods and Tools for Planning, Implementation, and Evaluation (RAND)
- Clay, Rebecca A. . Monitor on Psychology. 2009, 40(8): 46. 外部链接存在于
|title=
(帮助) - United Nations Development Programme. . 2009年 [2021-02-12查閱]. (原始内容存档于2010-08-18).
- United Nations Evaluation. . [2021-02-12查閱]. (原始内容存档于2010-03-28).
- United Nations office for the Coordination of Humanitarian Affair. . [2021-02-12查閱].
- United Nations Office of Inspection and Oversight Services. (PDF). [2021-02-12查閱].
- World Bank Group. . [2021-02-12查閱].
外部連結
- 台灣社區心理學資訊網
- 美國評估學會 页面存档备份,存于(American Evaluation Association, AEA)
- 美國聯合勸募組織-方案評估資源網站(United Way of America: Outcome Measurement Resource Network)
- 美國哥倫比亞大學-政經發展策略研究中心(Center for the Study of Development Strategies
, Columbia University)
- 美國疾病管制局-評估工作小組(CDC Evaluation Working Group)
- 加拿大評估協會(Canadian Evaluation Society, CES)
- 賦權評估部落格(Empowerment Evaluation Blog)
- 世界衛生組織:「心理衛生實證與研究」主題專頁 页面存档备份,存于(World Health Organization: Mental Health Evidence and Research)