"方案評估" 修訂間的差異

出自 Caseru Social Work Encyclopedia
前往： 導覽、 搜尋
(→‎'''方案評估之類型''')
(→‎'''方案評估之類型''')
行 69： 行 69：
 
=='''方案評估之類型'''==
 
=='''方案評估之類型'''==
 
*「Program evaluation is often divided into types of evaluation.
 
*「Program evaluation is often divided into types of evaluation.
−
 
 
#Formative Evaluation occurs early in the program. The results are used to decide how the program is delivered, or what form the program will take. For example, an exercise program for elderly adults would seek to learn what activities are motivating and interesting to this group. These activities would then be included in the program.
 
#Formative Evaluation occurs early in the program. The results are used to decide how the program is delivered, or what form the program will take. For example, an exercise program for elderly adults would seek to learn what activities are motivating and interesting to this group. These activities would then be included in the program.
−
 
 
#Process Evaluation is concerned with how the program is delivered. It deals with things such as when the program activities occur, where they occur, and who delivers them. In other words, it asks the question: Is the program being delivered as intended? An effective program may not yield desired results if it is not delivered properly.
 
#Process Evaluation is concerned with how the program is delivered. It deals with things such as when the program activities occur, where they occur, and who delivers them. In other words, it asks the question: Is the program being delivered as intended? An effective program may not yield desired results if it is not delivered properly.
−
 
 
#Outcome Evaluation addresses the question of what are the results. It is common to speak of short-term outcomes and long-term outcomes. For example, in an exercise program, a short-term outcome could be a change knowledge about the health effects of exercise, or it could be a change in exercise behavior. A long-term outcome could be less likelihood of dying from heart disease.」
 
#Outcome Evaluation addresses the question of what are the results. It is common to speak of short-term outcomes and long-term outcomes. For example, in an exercise program, a short-term outcome could be a change knowledge about the health effects of exercise, or it could be a change in exercise behavior. A long-term outcome could be less likelihood of dying from heart disease.」
  

於 2007年1月17日 (三) 08:00 的修訂

4 

定義需要再精簡，其餘的內容可以挪至下文
請嘗試著用自己的話說明這個概念，文字重覆太多會有抄襲的嫌疑
參考文獻格式不正確
文獻引用格式不正確


方案評估的定義

「方案評估(programme evaluation)介於社會工作實務和研究之間，基本的目的在於運用科學的思考、方法、測量和分析，以提昇社會方案的效率與效益，以及社會工作服務的品質」 (黃源協著.【民88】，p251)

方案評估的目的

當方案計畫者致力於準備執行評估考核之際，他們試圖達成兩個目的：(1)衡量方案在符合先前所陳述之服務目標的相對成功率；以及(2)確認在目前的方案執行中仍有可能做改變之處。

  • Kathleen Mclnnis-Dittrich認為評估方案的目的有：
  1. 透過評估幫助機構做未來的計劃，以及機構的管理(Portney，1986)
  2. 對於捐款者維持債信
  3. 確定方案是否出現未曾預期的效果
  4. 獲得政策執行和成果的量化實證的敘述資料

(Kathleen Mclnnis-Dittrich原著；胡慧嫈等譯.【民86】，P173-175)

  • 萬育維認為評估方案的目的有：
  1. 協助行政資源
  2. 改善服務素質
  3. 確定服務介入和期望成果之因果關係
  4. 證明服務方案目標到達之程度
  5. 向有關政府部門和資助團體提供交代
  6. 建立繼續不斷的支持

(萬育維編著.【民90】，P161)

  • Allen Rubin，Earl Babbie認為評估方案的目的有：
  1. 方案的最終成功
  2. 方案如何實施的問題
  3. 方案計畫和發展所需的資訊

(Allen Rubin，Earl Babbie著；趙碧華，朱美珍編譯.【民89】，P600)

  • 根據以上學者對評估目的的看法，我認為評估方案的目的為以下幾點：
  1. 協助行政資源
  2. 改善服務素質
  3. 確定方案是否出現未曾預期的效果
  4. 確定服務介入和期望成果之因果關係
  5. 證明服務方案目標到達之程度
  6. 向有關政府部門和資助團體提供交代
  7. 建立繼續不斷的支持
  8. 方案如何實施的問題

方案評估的準備工作

  • Kathleen Mclnnis-Dittrich認為評估前的準備工作有以下四點：
  1. 決定由誰來評估
  2. 決定評估重點是在輸出(output)或是影響(impact)，或是兩者都有
  3. 決定如何使用評估資料
  4. 完整的評估方案

(Kathleen Mclnnis-Dittrich原著；胡慧嫈等譯.【民86】，p175-177)

  • Suchman認為好的方案評估，須具以下準備工作：
  1. 明確之問題分析
  2. 確認欲評估之目的
  3. 詳細描述服務活動並將其標準化
  4. 測量產生改變的程度
  5. 確定方案的成本開支，包括與達成結果相關之成本
  6. 判定所觀察到的改變程度是來自服務活動或其他因素

(PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著；高迪理譯.【民88】，p248)

  • 根據以上學者所提出的方案評估的準備工作，我認為方案評估的準備工作須具備下列幾點：
  1. 決定由誰來評估
  2. 決定評估重點是在輸出(output)或是影響(impact)，或是兩者都有
  3. 決定如何使用評估資料
  4. 明確之問題分析
  5. 確認欲評估之目的
  6. 詳細描述服務活動並將其標準化
  7. 測量產生改變的程度
  8. 確定方案的成本開支，包括與達成結果相關之成本
  9. 判定所觀察到的改變程度是來自服務活動或其他因素

方案評估之類型

  • 「Program evaluation is often divided into types of evaluation.
  1. Formative Evaluation occurs early in the program. The results are used to decide how the program is delivered, or what form the program will take. For example, an exercise program for elderly adults would seek to learn what activities are motivating and interesting to this group. These activities would then be included in the program.
  2. Process Evaluation is concerned with how the program is delivered. It deals with things such as when the program activities occur, where they occur, and who delivers them. In other words, it asks the question: Is the program being delivered as intended? An effective program may not yield desired results if it is not delivered properly.
  3. Outcome Evaluation addresses the question of what are the results. It is common to speak of short-term outcomes and long-term outcomes. For example, in an exercise program, a short-term outcome could be a change knowledge about the health effects of exercise, or it could be a change in exercise behavior. A long-term outcome could be less likelihood of dying from heart disease.」

(Wikipedia Program evaluation ， 2006)

  • PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin認為方案評估考核的種類很多，可以藉此用來檢視方案的各種不同層面。若欲進行任何種類的評估考核，則應基於兩項實際上的考量，一為可行性(feasibility),另一為決策者對方案運作相關資訊的需求。一般而言，方案評估有四種類型，分別能夠對方案的作用提供不同資訊，它們是：
  1. 效力之評估(effort evaluation)：效力的評估考核反應出服務提供或運作過程的狀況，對所提供的服務類型與服務量進行說明。再評估效力和運作過程之際，我們並不試圖檢視所提供服務之成果，或解釋為何會產生該種成果。進行效力評估之主要目的，僅在於獲得基本的服務活動資訊，藉以增強獲改善方案的管控
  2. 成果之評估(outcome evaluation)：成果評估的重點工作在於檢視案主所達成的結果，也就是確認方案成果目標達成之程度為何。
  3. 適切性之評估(adequacy of performance evaluation)：整體表現適切性之評估，有時也被稱為影響效應評估。其主要的關注重點在於，檢視方案服務有否滿足計劃過程所認定之社區需求的程度。
  4. 成本─效率(cost-efficiency evaluation)或成本─功效之評估(cost-effectiveness evaluation)：成本─效率評估檢視之重點在於所提供服務之單位成本；而成本─功效評估則偏重達成某種結果之總成本。更具體言之，成本─效率評估檢視時間、事件、物料、輸出等各種不同的單位成本；而成本─功效評估則考核成功結果的支出成本。

(PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著；高迪理譯.【民88】，p252-254)

  • 按照史克里文(Scriven，1967)的分類，評估可分為：
  1. 過程評估(formative)：又稱為執行管制
    1. 方案管制(program monitoring)：是指在計畫進行過程中，定期提供報告。
    2. 經費管制(expenditure monitoring)：好的經費管制是指將預算做最恰當的運用，即不結餘，也不透支，而且按原計畫項目開支。
    3. 時間管制(time monitoring)：好的時間管制是按進度達成預期目標。
  2. 結果評估(summative)：又稱績效評估；在現實的環境中，基於研究倫理的考量不可能有控制組的存在，也不容許評估人員進行前、後側的比較，唯一能做的可能就是影響評估，有就是一般所謂的one-shot evaluation，這種影響性評估的觀點源自於家庭影響分析(family impact nalyysis)，最常用來估計公共政策社會福利計畫對家庭所照成的影響。

(萬育維編著.【民90】，p161-165)

  • 為元呈方案評估的任務與達成其目的，方案評估一般可被區分為下列幾種不同的類型(Gabor, Unrau & Grinnel, 1988；Posavac & Carey, 1997,pp.7-10)，包括：
  1. 需求評估(the evaluation of need)：確認和測量一個組織或社區內尚未滿足需求的程度，或是一個特定社會服務的可行性；簡單的說，需求評估是確認案主群有哪項社會問題，並確保方案可實施的範圍。
  2. 可評估性評估(evaluability assessment)：是一種解決社會問題之特定方案模式的發展，而其所針對的社會問題是經過需求評估證實存在的，也是一種決定方案目標是否可以一種有意義的評估方式加以概念化及操作化。
  3. 過程評估(the evaluation of process)：是服務方案介入後，到目標達成之整個過程的監督和測量。
  4. 結果評估(the evaluation of outcome)：是指判定方案達到其整體方案目標的程度
  5. 效率評估(the evaluation of efficiency)：是一種需要大量投入資源才能成功的方案，若要以另一種投入較少資源所獲得類似的成果代替，則它並不必然是一個好的選擇。

(黃源協著.【民88】，p253-256)

  • 根據以上學者對評估類型做的分類，我認為評估類型有以下幾種：
  1. 需求評估
  2. 可評估性評估
  3. 效力之評估
  4. 成果之評估
  5. 適切性之評估
  6. 成本─效率或成本─功效之評估
  7. 過程評估
  8. 結果評估

方案評估的方式

依時間順序分

  1. 方案執行過程評估：是對正在執行中的方案進行評估，主要評估的目的是在於發現方案的進行是否有偏離原先預定的目標。如果出現不一致，可能需要進一步的了解，看是否要修改方案的執行方式或方案目標，使方案的進行能朝向整體目標而行。
  2. 方案執行結果評估：是對已執行完的方案進行評估，比較方案執行前後的差異並加以檢討，以便作為以後類似方案進行的參考。

依評估者身份分

  1. 內部的評估(internal evaluation)：由方案執行單位的成員所做的評估工作。此種評估對於執行方案的組織結構，以及評估的計畫方案，能有更詳細、更精確的了解，也有助於往後繼續研究和評估工作的進行。
  2. 外來的評估(external evaluation)：由機構以外的專家所做的評估工作。此種評估較容易維持評估工作的客觀性。

(黃源協著.【民88】，p258-261)

方案評估的步驟

  • 萬育維認為方案評估進行程序為：
  1. 宗旨
  2. 目標
  3. 事前評估
  4. 計畫
  5. 執行計畫
  6. 事中(過程)評估
  7. 事後(影響)評估

(萬育維編著.【民90】，P162)

  • 黃源協認為方案評估進行的步驟為：
  1. 確認評估目標
  2. 完成評估前的準備工作
  3. 確認方案目標
  4. 確認評估的變項
  5. 收集與評估(或分析)資料
  6. 方案評估的結果

(黃源協著.【民90】，P262-264)

  • 综合以上學者的觀點，我認為方案評估的步驟為：
  1. 宗旨
  2. 完成評估前的準備工作
  3. 確認方案目標
  4. 確認評估的變項
  5. 事前評估
  6. 計畫
  7. 執行計畫
  8. 事中(過程)評估
  9. 事後(影響)評估

參考文獻

  • Kathleen Mclnnis-Dittrich原著；胡慧嫈等譯. 整合社會福利政策與社會工作實務，臺北市：揚智文化，1997【民86】
  • PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著；高迪理譯. 服務方案之設計與管哩，臺北市：揚智文化，1999【民88】
  • 萬育維編著； 社會工作概論：理論與實務，臺北市：雙葉書廊，2001【民90】
  • Allen Rubin，Earl Babbie著；趙碧華，朱美珍編譯. 研究方法：社會工作暨人文科學領域的運用，臺北市：學富文化，2000【民89】
  • 黃協源著； 社會工作管理，臺北市：揚智文化，1999【民88】
取自 "https://cswe.casehsu.org/index.php?title=方案評估&oldid=17226"