"方案評估" 修訂間的差異

出自 Caseru Social Work Encyclopedia
前往: 導覽搜尋
('''方案評估的目的''')
 
(未顯示由 10 位使用者於中間所作的 101 次修訂)
行 1: 行 1:
4
+
'''方案評估(programme evaluation)'''介於社會工作實務與研究評估之間,目的為運用科學的思考模式與方法,來測量和分析方案執行後的效果,透過評估了解方案的效率與效益,以利維護社會工作服務的品質(黃源協,1999)。
定義需要再精簡,其餘的內容可以挪至下文
+
  5 雖然把眾人之言都放上來很佔篇幅,但有嘗試自己做歸納很好。
請嘗試著用自己的話說明這個概念,文字重覆太多會有抄襲的嫌疑
+
參考文獻格式不正確
+
文獻引用格式不正確
+
 
+
 
+
=='''方案評估的定義'''==
+
*「方案評估意指特別注意方案目標預期或非預期中的效果,批評的和嚴格的檢視方案運作和成果(Rutman , 1977:13)。方案評估是在公部門或是私部門機構中所執行的方法,用以檢視方案的效率,並決定新方案是否針對其服務的族群,達成其預定的目標。在檢視方案執行的各個組成部份後,此機構可以決定此方案是否有達到提供最多的服務,以及最少的浪費與投入努力的目標。在比較方案原初的目標與真正成果或結果後,機構可以瞭解其目標是否被實現了,也可以瞭解方案是否要繼續或是應當要修正。」(Kathleen Mclnnis-Dittrich原著;胡慧嫈等譯. 【民86】,p173)
+
*「當方案計畫者致力於準備執行評估考核之際,他們試圖達成兩個目的:(1)衡量方案在符合先前所陳述之服務目標的相對成功率;以及(2)確認在目前的方案執行中仍有可能做改變之處。進行方案評估的基礎可以說是一種比較或對照(comparison)。方案活動與成果所測得的結果,常被拿來與範定之標準、證實過之測驗結果、既有之知識,或他人之實務工作經驗等,進行相互對照與比較。」(PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著;高迪理譯. 【民88】,p249)
+
  
 
=='''方案評估的目的'''==
 
=='''方案評估的目的'''==
*Kathleen Mclnnis-Dittrich認為評估方案的目的有:
+
方案評估試圖達成衡量方案執行是否符合計畫中服務目標所設定的成功率與確認方案在執行中可能做得改變之處。Kathleen Mclnnis-Dittrich(1997)認為評估方案的目的則有以下幾點:
#透過評估幫助機構做未來的計劃,以及機構的管理(Portney,1986)
+
*透過方案評估來檢視機構未來的方案計劃管理。
#對於捐款者維持債信
+
*方案評估有助於機構對於捐款者的責信。
#確定方案是否出現未曾預期的效果
+
*方案評估可確定方案是否出現未曾預期的效果。
#獲得政策執行和成果的量化實證的敘述資料
+
*方案評估可獲得執行成果的量化的實證資料。
(Kathleen Mclnnis-Dittrich原著;胡慧嫈等譯.【民86】,P173-175)
+
 
*而萬育維認為評估方案的目的有:
+
萬育維(2001)則是認為評估方案的目的為:
#協助行政資源
+
*協助行政資源,將效用最大化。
#改善服務素質
+
*改善服務素質,檢討並提升服務品質。
#確定服務介入和期望成果之因果關係
+
*確定服務介入和期望成果之因果關係,確保執行時的目標。
#證明服務方案目標到達之程度
+
*證明服務方案目標到達之程度,顯示方案是有效的。
#向有關政府部門和資助團體提供交代
+
*向有關政府部門和資助團體提供交代,以利維持機構的[[責信]]。
#建立繼續不斷的支持
+
*建立對機構服務與信任的支持態度。
(萬育維編著.【民90】,P161)
+
#方案的最終成功
+
#方案如何實施的問題
+
#方案計畫和發展所需的資訊
+
(Allen Rubin,Earl Babbie著;趙碧華,朱美珍編譯.【民89】,P600)
+
*根據以上學者對評估目的的看法,我認為評估方案的目的為以下幾點:
+
#協助行政資源
+
#改善服務素質
+
#確定方案是否出現未曾預期的效果
+
#確定服務介入和期望成果之因果關係
+
#證明服務方案目標到達之程度
+
#向有關政府部門和資助團體提供交代
+
#建立繼續不斷的支持
+
#方案如何實施的問題
+
  
 
=='''方案評估的準備工作'''==
 
=='''方案評估的準備工作'''==
*Kathleen Mclnnis-Dittrich認為評估前的準備工作有以下四點:
+
PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin(1999)與Kathleen Mclnnis-Dittrich(1997)認為方案評估須具備下列幾點:
#決定由誰來評估
+
*方案評估由誰決定評估。
#決定評估重點是在輸出(output)或是影響(impact),或是兩者都有
+
*方案評估重點是在於輸出(output)或是影響(impact),或是兩者都有。
#決定如何使用評估資料
+
*如何決定使用的評估資料。
#完整的評估方案
+
*問題分析的明確度。
(Kathleen Mclnnis-Dittrich原著;胡慧嫈等譯.  整合社會福利政策與社會工作實務,臺北市:揚智文化,1997【民86】,p175-177)
+
*確認欲評估之目的。
*Suchman認為好的方案評估,須具以下準備工作:
+
*詳細描述服務活動並將其標準化。
#明確之問題分析
+
*測量方案產生的改變程度。
#確認欲評估之目的
+
*確定方案的成本開支,包括達成結果相關之成本。
#詳細描述服務活動並將其標準化
+
*判定所觀察到的改變程度是來自服務活動或其他因素。
#測量產生改變的程度
+
#確定方案的成本開支,包括與達成結果相關之成本
+
#判定所觀察到的改變程度是來自服務活動或其他因素
+
(PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著;高迪理譯.  服務方案之設計與管哩,臺北市:揚智文化,1999【民88】,p248)
+
*根據以上學者所提出的方案評估的準備工作,我認為方案評估的準備工作須具備下列幾點:
+
#決定由誰來評估
+
#決定評估重點是在輸出(output)或是影響(impact),或是兩者都有
+
#決定如何使用評估資料
+
#明確之問題分析
+
#確認欲評估之目的
+
#詳細描述服務活動並將其標準化
+
#測量產生改變的程度
+
#確定方案的成本開支,包括與達成結果相關之成本
+
#判定所觀察到的改變程度是來自服務活動或其他因素
+
  
 
=='''方案評估之類型'''==
 
=='''方案評估之類型'''==
*PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin認為方案評估考核的種類很多,可以藉此用來檢視方案的各種不同層面。至於欲進行何種類型的評估考核,則應基於兩項實際上的考量,一為可行性(feasibility),另一為決策者對方案運作相關資訊的需求。一般而言,方案評估有四種類型,分別能夠對方案的作用提供不同資訊,它們是:
+
PeterM.Kettne et al(1999)認為方案評估種類很多,藉由不同的方式檢視方案的執行。若欲進行任何種類的評估考核。一般而言,方案評估有四種類型,分別能夠對方案提供不同資訊,分別為幾下幾點:
#效力之評估(effort evaluation):效力評估中欲解答的主要問題是:方案究竟提供了何種且多少的服務?效力的評估考核反應出服務提供或運作過程的狀況,亦即對所提供的服務類型與服務量進行說明。再評估效力和運作過程之際,我們並不試圖檢視所提供服務之成果,或解釋為何會產生該種成果。進行效力評估之主要目的,僅在於獲得基本的服務活動資訊,藉以增強獲改善方案的管控
+
*效力評估(effort evaluation):效力的評估是針對服務提供的過程狀況,對服務類型與服務量進行評估。目的為獲得基本的服務活動資訊,藉以增強獲改善方案品質的管控。
#成果之評估(outcome evaluation):成果評估的重點工作在於檢視案主所達成的結果,也就是確認方案成果目標達成之程度為何。
+
*成果評估(outcome evaluation):成果評估的重點是檢視案主所達成的結果,確認方案成果目標達成之程度為何,是否有達成當初所設立之目標。
#適切性之評估(adequacy of performance evaluation):整體表現適切性之評估,有時也被稱為影響效應評估。其主要的關注重點在於,檢視方案服務有否滿足計劃過程所認定之社區需求的程度。
+
*適切性評估(adequacy of performance evaluation):檢視方案整體是否有達到其適切性,也被稱為影響效應評估。主要的關注重點在於,檢視方案服務有否滿足計劃過程所認定之需求。
#成本─效率(cost-efficiency evaluation)或成本─功效之評估(cost-effectiveness evaluation):成本─效率評估檢視之重點在於所提供服務之單位成本;而成本─功效評估則偏重達成某種結果之總成本。更具體言之,成本─效率評估檢視時間、事件、物料、輸出等各種不同的單位成本;而成本─功效評估則考核成功結果的支出成本。
+
*成本效評估(cost-efficiency evaluation)或成本功效評估(cost-effectiveness evaluation):成本效率評重點在於所提供服務之單位成本;成本功效評估偏重於達成某結果之總成。具體言之,成本效率評估檢視時間、事件、物料、輸出等各種不同的單位成本;成本功效評估則考核成功結果的支出成本。
(PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著;高迪理譯.  服務方案之設計與管哩,臺北市:揚智文化,1999【民88】,p252-254)
+
*按照史克里文(Scriven,1967)的分類,評估可分為:
+
#過程評估(formative):又稱為執行管制
+
##方案管制(program monitoring):是指在計畫進行過程中,定期提供報告。
+
##經費管制(expenditure monitoring):好的經費管制是指將預算做最恰當的運用,即不結餘,也不透支,而且按原計畫項目開支。
+
##時間管制(time monitoring):好的時間管制是按進度達成預期目標。
+
#結果評估(summative):又稱績效評估;在現實的環境中,基於研究倫理的考量不可能有控制組的存在,也不容許評估人員進行前、後側的比較,唯一能做的可能就是影響評估,有就是一般所謂的one-shot evaluation,這種影響性評估的觀點源自於家庭影響分析(family impact nalyysis),最常用來估計公共政策社會福利計畫對家庭所照成的影響。
+
(萬育維編著.  社會工作概論:理論與實務,臺北市:雙葉書廊,2001【民90】,p161-165)
+
*為元呈方案評估的任務與達成其目的,方案評估一般可被區分為下列幾種不同的類型(Gabor, Unrau & Grinnel, 1988;Posavac & Carey, 1997,pp.7-10),包括:
+
#需求評估:
+
#可評估性評估:
+
#過程評估:
+
#結果評估:
+
#效率評估:
+
(黃源協著.  社會工作管理  Social work management,臺北市:揚智文化,1999【民88】,p253-256)
+
*根據以上學者對評估類型做的分類,我認為評估類型有以下幾種:
+
#需求評估
+
#可評估性評估
+
#效力之評估
+
#成果之評估
+
#適切性之評估
+
#成本─效率或成本─功效之評估
+
#過程評估
+
#結果評估
+
  
 
=='''方案評估的方式'''==
 
=='''方案評估的方式'''==
 +
'''依時間順序分'''
 +
*過程評估:對執行中的方案進行評估,評估目的是在於發現方案的進行是否有偏離原先預定的目標。如果出現不一致,需要進一步的了解,檢視是否需要修改方案的執行方式或是目標,使方案的進行能朝向整體目標而行。
 +
*結果評估:針對已執行完成的方案進行評估,比較方案執行前後的差異並檢討,以便作為日後相類似的方案進行參考。
 +
 +
'''依評估者'''
 +
*內部的評估(internal evaluation):由方案執行單位的成員或日相關人員做評估工作。此種評估對於執行方案的組織結構,以及評估的計畫方案,能有更詳細的了解,有助於往後研究和評估工作的進行。
 +
*外來的評估(external evaluation):由機構以外的專家所做的評估工作。此種評估較容易維持評估工作的客觀性(黃協源,1999)。
 +
 
=='''方案評估的步驟'''==
 
=='''方案評估的步驟'''==
 +
根據黃源協(1999)與萬育維(2001)對於方案評估的步驟為以下幾點
 +
*宗旨
 +
*完成評估前的準備工作
 +
*確認方案目標
 +
*確認評估的變項
 +
*事前評估
 +
*計畫
 +
*執行計畫
 +
*事中(過程)評估
 +
*事後(影響)評估
 +
 
=='''規劃方案評估應注意的事項'''==
 
=='''規劃方案評估應注意的事項'''==
 +
評估方案會受到許多因素的影響,專業的評估者會想辦法解決阻礙評估之原因,並加以解決。方案評估需注意下列幾項:
 +
*不應期待方案會有猛然的效果:方案相關工作者會對工作效果充滿信心與熱誠,他們期待著新方案的結果是非常有效果的,但若工作者發現,他們的方案只是稍微優於以前的方案,他們可能會出現挫折,無成就感,特別是新方案被期待的標準更高時。
 +
*不要擔心詢問方案的品質是不專業的:專業的服務必須經過一次又一次的改進與學習,有些工作者會認為問案主有關工作的品質時,會突顯自己的專業能力不夠。但,其實大部分尋求服務的案主,如果知道服務自己的工作者,是一個藉著不斷尋求進步與學習,以提升自己的能力,一定是能滿足案主更高的需求,而且會留下好印象。
 +
*不要擔心方案是否會被終止:一項評估如果發現有某個方法行不通,該方案可能會被縮減或排除,但是當需要排除設計來解決方案時,常常會面對要以什麼方式來替代的問題,因此,一項評估較可能使方案修正,而不是被取消,評估並不會終止方案,而是幫助此方案繼續取得責信的工具。
 +
*不要擔心方案是否會失去控制:不管是內部的或外部的評估,員工以及主管都會擔心評估會影響到他們的決策權,這種擔心是毫無根據,但卻很普遍。或許工作者不能操控方案的訊息,但是可以藉由緊密的參與方案進行,而減少他們的擔心(黃源協,1999)。
 +
 
=='''參考文獻'''==
 
=='''參考文獻'''==
*Kathleen Mclnnis-Dittrich原著;胡慧嫈等譯.  整合社會福利政策與社會工作實務,臺北市:揚智文化,1997【民86】
+
*胡慧嫈等(譯)(民86)。'''整合社會福利政策與社會工作實務'''(原著者:Kathleen Mclnnis-Dittrich)。臺北市:揚智文化。(原著出版年:1997)
*PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin著;高迪理譯.  服務方案之設計與管哩,臺北市:揚智文化,1999【民88】
+
*高迪理(譯)(民88)。'''服務方案之設計與管理'''(原著者PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin)。臺北市:揚智文化。(原著出版年:1999)
*萬育維編著.  社會工作概論:理論與實務,臺北市:雙葉書廊,2001【民90】
+
*萬育維(2001)。'''社會工作概論:理論與實務'''。臺北市:雙葉書廊。
*Allen Rubin,Earl Babbie著;趙碧華,朱美珍編譯.  研究方法:社會工作暨人文科學領域的運用,臺北市:學富文化,2000【民89】
+
*黃協源(1999)。'''社會工作管理'''。臺北市:揚智文化。
 +
*趙碧華,朱美珍(譯)(民89)。'''研究方法:社會工作暨人文科學領域的運用'''(原著者:Allen Rubin,Earl Babbie)。臺北市:學富文化。(原著出版年:2000)
 +
 
 +
{{Rank3}}

於 2012年7月25日 (三) 07:37 的最新修訂

方案評估(programme evaluation)介於社會工作實務與研究評估之間,目的為運用科學的思考模式與方法,來測量和分析方案執行後的效果,透過評估了解方案的效率與效益,以利維護社會工作服務的品質(黃源協,1999)。

5 雖然把眾人之言都放上來很佔篇幅,但有嘗試自己做歸納很好。

方案評估的目的

方案評估試圖達成衡量方案執行是否符合計畫中服務目標所設定的成功率與確認方案在執行中可能做得改變之處。Kathleen Mclnnis-Dittrich(1997)認為評估方案的目的則有以下幾點:

  • 透過方案評估來檢視機構未來的方案計劃管理。
  • 方案評估有助於機構對於捐款者的責信。
  • 方案評估可確定方案是否出現未曾預期的效果。
  • 方案評估可獲得執行成果的量化的實證資料。

萬育維(2001)則是認為評估方案的目的為:

  • 協助行政資源,將效用最大化。
  • 改善服務素質,檢討並提升服務品質。
  • 確定服務介入和期望成果之因果關係,確保執行時的目標。
  • 證明服務方案目標到達之程度,顯示方案是有效的。
  • 向有關政府部門和資助團體提供交代,以利維持機構的責信
  • 建立對機構服務與信任的支持態度。

方案評估的準備工作

PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin(1999)與Kathleen Mclnnis-Dittrich(1997)認為方案評估須具備下列幾點:

  • 方案評估由誰決定評估。
  • 方案評估重點是在於輸出(output)或是影響(impact),或是兩者都有。
  • 如何決定使用的評估資料。
  • 問題分析的明確度。
  • 確認欲評估之目的。
  • 詳細描述服務活動並將其標準化。
  • 測量方案產生的改變程度。
  • 確定方案的成本開支,包括達成結果相關之成本。
  • 判定所觀察到的改變程度是來自服務活動或其他因素。

方案評估之類型

PeterM.Kettne et al(1999)認為方案評估種類很多,藉由不同的方式檢視方案的執行。若欲進行任何種類的評估考核。一般而言,方案評估有四種類型,分別能夠對方案提供不同資訊,分別為幾下幾點:

  • 效力評估(effort evaluation):效力的評估是針對服務提供的過程狀況,對服務類型與服務量進行評估。目的為獲得基本的服務活動資訊,藉以增強獲改善方案品質的管控。
  • 成果評估(outcome evaluation):成果評估的重點是檢視案主所達成的結果,確認方案成果目標達成之程度為何,是否有達成當初所設立之目標。
  • 適切性評估(adequacy of performance evaluation):檢視方案整體是否有達到其適切性,也被稱為影響效應評估。主要的關注重點在於,檢視方案服務有否滿足計劃過程所認定之需求。
  • 成本效評估(cost-efficiency evaluation)或成本功效評估(cost-effectiveness evaluation):成本效率評重點在於所提供服務之單位成本;成本功效評估偏重於達成某結果之總成。具體言之,成本效率評估檢視時間、事件、物料、輸出等各種不同的單位成本;成本功效評估則考核成功結果的支出成本。

方案評估的方式

依時間順序分

  • 過程評估:對執行中的方案進行評估,評估目的是在於發現方案的進行是否有偏離原先預定的目標。如果出現不一致,需要進一步的了解,檢視是否需要修改方案的執行方式或是目標,使方案的進行能朝向整體目標而行。
  • 結果評估:針對已執行完成的方案進行評估,比較方案執行前後的差異並檢討,以便作為日後相類似的方案進行參考。

依評估者

  • 內部的評估(internal evaluation):由方案執行單位的成員或日相關人員做評估工作。此種評估對於執行方案的組織結構,以及評估的計畫方案,能有更詳細的了解,有助於往後研究和評估工作的進行。
  • 外來的評估(external evaluation):由機構以外的專家所做的評估工作。此種評估較容易維持評估工作的客觀性(黃協源,1999)。

方案評估的步驟

根據黃源協(1999)與萬育維(2001)對於方案評估的步驟為以下幾點

  • 宗旨
  • 完成評估前的準備工作
  • 確認方案目標
  • 確認評估的變項
  • 事前評估
  • 計畫
  • 執行計畫
  • 事中(過程)評估
  • 事後(影響)評估

規劃方案評估應注意的事項

評估方案會受到許多因素的影響,專業的評估者會想辦法解決阻礙評估之原因,並加以解決。方案評估需注意下列幾項:

  • 不應期待方案會有猛然的效果:方案相關工作者會對工作效果充滿信心與熱誠,他們期待著新方案的結果是非常有效果的,但若工作者發現,他們的方案只是稍微優於以前的方案,他們可能會出現挫折,無成就感,特別是新方案被期待的標準更高時。
  • 不要擔心詢問方案的品質是不專業的:專業的服務必須經過一次又一次的改進與學習,有些工作者會認為問案主有關工作的品質時,會突顯自己的專業能力不夠。但,其實大部分尋求服務的案主,如果知道服務自己的工作者,是一個藉著不斷尋求進步與學習,以提升自己的能力,一定是能滿足案主更高的需求,而且會留下好印象。
  • 不要擔心方案是否會被終止:一項評估如果發現有某個方法行不通,該方案可能會被縮減或排除,但是當需要排除設計來解決方案時,常常會面對要以什麼方式來替代的問題,因此,一項評估較可能使方案修正,而不是被取消,評估並不會終止方案,而是幫助此方案繼續取得責信的工具。
  • 不要擔心方案是否會失去控制:不管是內部的或外部的評估,員工以及主管都會擔心評估會影響到他們的決策權,這種擔心是毫無根據,但卻很普遍。或許工作者不能操控方案的訊息,但是可以藉由緊密的參與方案進行,而減少他們的擔心(黃源協,1999)。

參考文獻

  • 胡慧嫈等(譯)(民86)。整合社會福利政策與社會工作實務(原著者:Kathleen Mclnnis-Dittrich)。臺北市:揚智文化。(原著出版年:1997)
  • 高迪理(譯)(民88)。服務方案之設計與管理(原著者PeterM.Kettner,RobertM.Moroney,LawrenceL.Martin)。臺北市:揚智文化。(原著出版年:1999)
  • 萬育維(2001)。社會工作概論:理論與實務。臺北市:雙葉書廊。
  • 黃協源(1999)。社會工作管理。臺北市:揚智文化。
  • 趙碧華,朱美珍(譯)(民89)。研究方法:社會工作暨人文科學領域的運用(原著者:Allen Rubin,Earl Babbie)。臺北市:學富文化。(原著出版年:2000)