프로그램 평가

 

산림치유 프로그램 평가의 중요성

1) 산림치유 프로그램에 대한 평가대상 및 기능

① 프로그램 제공 처에서의 대상에 맞는 프로그램 제공여부

② 산림치유 목적 달성을 위한 프로그램 제공여부

③ 효과적이고 효율적인 절차와 과정을 통한 프로그램 제공여부 파악

④ 프로그램 환류기능 제공 즉 계획, 실행과정에서 필요한 정보제공

⑤ 프로그램 담당자가 프로그램 과정에서 행하는 활동에 대한 사회적 책임을 지도록하는 책임성 확보

2) 산림치유 프로그램 평가가 중요한 이유

① 로그램 개발의 마지막 단계로 프로그램 존폐여부를 결정 /수정, 보완을 위한 근거자료를 제시하여 개선방안 모색을 위한 자료로 매우 중요

② 산림치유 프로그램, 산림치유사, 참가자, 관리자들을 연결해 주는 역할

③ 평가결과는 프로그램을 개선하는데 있어 중요 역활을 할뿐 아니라 개선을 통해 참가자들의 활동에 있어서도 영향을 미침

④ 프로그램 진행 현장에도 영향을 미쳐 관리측면에서도 변화와 수정 등을 요구

⑤ 산림치유 진행 현장에서 여러 요소에 영향을 미칠 뿐 아니라 끓임 없는 발전방안을 마련하는 토대

2. 산림치유 프로그램 평가 역할과 목적

① 산림치유 프로그램의 지속 또는 의사결정 자료

② 산림치유 프로그램의 개선을 통한 프로그램 질 향상 및 타당성 확보

③ 산림치유 프로그램의 목표달성 여부를 과학적으로 판단

④ 산림치유 프로그램 참가대상자의 요구 충족여부 파악

⑤ B / C 분석을 통한 예산타당성 근거 및 예산절감 방안

⑥ 산림치유 프로그램 향상을 통한 산림치유 분야의 전문성 향상

3. 산림치유 프로그램 평가 종류

프로그램 평가는 시간, 주체, 그리고 그 방법에 따라 크게 총괄평가와 형성평가, 내부평가와 외부평가, 공식적평가와 비공식적 평가로 분류

※ 프로그램 평가종류

4. 산림치유 프로그램 평가 절차

평가목적 설정 → 평가계획 수립 및 평가도구 작성 ⇒ 평가자료 수집 ⇛자료분석 ⇨ 결과보고 및 활용방안 도출 ⇰ 결과 보고서 작성

4.1. 평가목적 설정 : 성과에 대한 순위, 프로그램 개선, 참가자 만족도, 프로그램 지속 여부 결정 등 평가목적 구체화하는 작업

4.2. 평가계획 수립 및 평가도구 작성

평가목적이설정 되었다면 다음과 같이 구체적인 평가계획을 수립한다

① 프로그램의 목표와 운영방법

② 프로그램의 구조 등에 대한 정보를 사전에 파악하며

③ 무엇을 평가 할 것인가 ? (평가내용)

④ 언제 평가 할 것인가 ? (평가시기)

⑤ 누가 평가 할 것인가 ? (평가주체)

⑥ 어디서 평가 할 것 인가 ? (평가장소)

⑦ 어떻게 평가 하는가 ? (평가방법)

※ 산림치유 프로그램에서 평가내용은 크게 산림치유지도사, 산림치유 효과, 산림치유 프로그램으로 나눌 수 있다 (P377)

① 평가시기

㉮ 프로그램 끝난 직후 :

㉠내용 등에 구체적으로 기억하고 회수율 높음

㉡진행자를 고려해서 공정한 평가를 않는 경우

㉢돌아가고자 하는 마음으로 진지하게 평가에 임하지 않는 경우

㉯일정시간 지난 후

㉠상황에 구애받지 않는 객관적인 평가 가능

㉡프로그램 또는 진행사항 등에 관한 기억이 퇴색되어 올바른 평가 어려움

※ 해결방법 프로그램 직후에 간단하고 짧게, 상황에 영향 미치지 않는 내용으로 평가,

구체적으로 시간이 필요한 내용에 대해서 일정 시간 이후에 평가 진행

② 평가자 설정

㉮프로그램 진행했던 산림치유사

㉯프로그램 참가자

㉰동료 또는 전문가 → 문제점을 해결 할 수 있는 구체적인 대안을 획득 할 수 있는 가능성

③ 평가장소 : 평가자 입장에서는 평가가 진행되는 환경조건 등을 평가하는 경향도 있음

④ 평가방법 : 평가목적, 평가자, 평가내용 등에 따라 달라짐

㉮설문지조사는 맥락을 이해하고 평가에 임할 수 있는 대상에게만 활용

㉯단순만족도 조사

㉰프로그램 수정 위한 조사

㉯ + ㉰ ⇒ 제한된 질문을 포한하고 있는 설문지 또는 선호도 분석이 아닌 인터뷰 등을 통한 구체적인 정보를 획득하도록 해야 함 (P 378)

4.3. 산림치유 프로그램 평가 자료수집

평가자료 수집은 수립된 계획에 따라 진행

평가자들이 자료수집과정에서 외부조건이나 상황에 따라서 평가 내용이 달라지지 않도록

4.4. 산림치유 프로그램 자료분석

산림치유지도사는 통계적 기술분석과 그래프를 해석할 수 있는 기본적인 능력을 가지고 있어야하지만

전문성을요하는 분석 등은 전문가에게 의뢰할 수 도 있음

4.5. 결과보고 및 활용방안 도출

① 자료 분석통한 도출된 결과의 활용방안 모색

② 평가결과를 바탕으로 활용방안 도출

③ 활용방안 도출시 실제로 실행 가능한 대안을 제시

4.6. 평가 결과보고서 작성

① 평가결과 보고서 작성은 프로그램의 진행사항과

② 프로그램 효과를 일목요연하게 설명 할 수 있는 근거자료

③ 프로그램 자체를 개선하는데 활용

④ 프로그램 성과를 홍보자료로 활용 할 수 있음

5. 산림치유 프로그램 평가의 유형

5.1. 프로그램 실행 과정 평가

평가는 평가의 목적, 내용, 방법 등의 단계에 따라 구분 될 수 있다. 프로그램 실행 단계에 따라서 프로그램 계획평가, 프로그램 모니터링 평가, 경제적 효율성 평가, 영향 평가 로 구분 한다

※ 프로그램 실행과정 평가단계

5.2. 산림치유 효과 평가와 프로그램 평가

5.2.1. 산림치유 효과 평가

㉮효과 평가는 프로그램이 설정한 목표를 달성했는가에 대한 여부를 판단하는 것

㉯ 효과평가를 위해서는 프로그램 개발과정서 목표설정을 구체적으로 세울 필요가 있으며 목표달성 정도를 정성화, 정량화 할 수 있도록 하는 기준을 수립, 설정해야 함

㉰ 프로그램 진행 전과후의 참가대상자의 상태를 비교 : 생리적/ 심리적 측정도구 통한 심신상태 기록또는치유지도사와 면담등을 통한 건강상태 체크

㉱장시간이후 효과가 나타나는 경우라면 평가시기 등을 조절할 필요가 있음

㉲ 프로그램 내 산림치유 활동에 국한된 것으로 참가자들에게 생리적/심리적으로 어떤 영향을 미쳤는가를 평가 하는 것으로 영향평가에 해당

※ 심리적, 생리적, 생화학적 측정변인 및 척도 (P382)

5.2.2. 프로그램 평가 (P384)

치유에 대한 전반적인 만족도, 개선점, 보완사항, 등에 대한 내용, 이는 모니터링 평가에 해당

5.2.2.1. 산림치유지도사의 자가평가 방법

㉠즉각적으로 가능하다는 장점

㉡객관적 상황에서 평가

㉢ 성공적이다 그렇지 않다만 평가. 어떤요소가 성공이나 실패를 이끌었는지는 판단할 수 없음 ⇒ 문제점을 파악하거나 해결책 찾아내기 어려움

㉣ 자기평가는 성취하고자 하는 목적과 목표가 무엇이었는지 명확하게 할 필요가 있음. 목적과 목표를 달성 했다면 치유프로그램은 성공이라 볼 수 있음

㉤자가평가의 객관성 확보를 위해 자기평가를 구조화하기 위해 표준화된 체크리스트 활용

㉥자가평가의 객관성 확보를 위해 치유현장을 동영상으로 촬영한 후 영상을 보면서 평가 하는 방법이 있음

5.2.2.2. 전문가 평가

㉠평가를 통해서 문제점을 발견하고 구체적인 대안을 마련하기 위해 전문적인 식견이 필요하며전문가는프로그램 문제를 진단하고 분석하여 해결하기 위한 대안을 제시

㉡전문가는 한정된 정보를 가지고 대안을 제시 하게 됨

㉢ 전문가의 대안은 너무 이상적인 대안으로 현장 적용에 한계가 있을 수 있음.전문가 평가를 효과적으로 평가하기 위해서는 자원, 예산, 인력 등 구체적인 정보제공이 필요함

㉣ 동료들이 문제점에 대한 대안을 제시 할 수 있다면 가장 훌륭한 전문가가 될 수 있음.실현가능한 현실적인 대안을 제시 할 수 있기 때문

5.2.2.3. 참가자에 의한 평가

치유프로그램은 참가자들의 요구반영과 대상에 맞는 목적과 목표를 수립하여 참가자 만족도를 높이는게 중요하므로 참가자의 평가는 의사결정 과정에서 가장중요

㉠ 설문에 의한 방법 : 가장 많이 쓰고있고 구조화된 질문에 응답 하는 방법으로 조사대상, 시기, 방법 등이잘 계획 되어 구조화된 설문조사는 프로그램의 수정 보완, 개선에 도움

㉡ 스티커를 붙이거나 구슬을 넣는 방법 (조사지활용하기 어려운 경우)

㉢정성적 평가방법으로 느낌을 쓰게 하거나 그림을 그리고 분석 하는 방법

㉣참가자 대상 인터뷰는 직접적인 의사소통이 가능하므로 구체적인 평가를 받을 수 있음