[질문 072] 청소년프로그램의 효과를 어떻게 평가하겠습니까
[출제의도]
프로그램 평가의 목적과 방법을 이해하고 실제 프로그램의 목표와 연결할 수 있는지 확인하는 질문이다.
만족도 조사만으로 프로그램의 효과를 판단해서는 안 된다.
프로그램 과정과 결과를 함께 살펴보고 평가결과를 다음 프로그램 개선에 활용할 수 있어야 한다.
[답변 요령]
평가의 기준은 프로그램에서 설정한 목표에서 출발한다고 설명한다.
참여율과 관찰자료, 활동결과물 등 과정자료를 함께 활용한다.
만족도와 자기평가, 사전·사후 변화 등 다양한 방법을 활용할 수 있다고 제시한다.
평가결과를 다음 프로그램의 개선과 의사결정에 반영한다.
[답변 예시]
“프로그램 효과는 처음 설정한 목표가 어느 정도 달성되었는지를 중심으로 평가하겠습니다.
참여율과 활동과정에 대한 관찰, 결과물, 참여자의 만족도와 자기평가 등 여러 자료를 함께 활용하고 필요한 경우 사전·사후 변화를 비교할 수 있습니다.
평가결과는 보고서 작성으로 끝내지 않고 다음 프로그램의 내용과 운영방법을 개선하는 데 활용하겠습니다.”
[후속 질문]
① 만족도가 높으면 성공한 프로그램입니까?
“만족도는 중요한 평가자료이지만 그것만으로 프로그램의 성공을 판단하기는 어렵습니다.
참여자는 즐거웠지만 프로그램에서 목표로 한 변화가 나타나지 않을 수도 있기 때문입니다.”
② 숫자로 평가하기 어려운 변화는 어떻게 평가합니까?
“관찰기록이나 참여자의 소감, 면담, 활동결과물 등 질적인 자료를 활용할 수 있습니다.
프로그램의 특성에 따라 정량적 자료와 정성적 자료를 함께 보는 것이 좋다고 생각합니다.”
③ 평가결과가 좋지 않으면 실패한 프로그램입니까?
“목표를 달성하지 못한 원인을 확인할 수 있다면 그 자체도 중요한 정보가 됩니다.
무엇을 개선해야 하는지 분석하여 다음 프로그램에 반영하는 것이 중요합니다.”
[피해야 할 답변]
마지막 날 만족도 설문을 실시하면 프로그램 평가가 끝난다고 답해서는 안 된다.
좋은 결과를 보여 주기 위해 긍정적인 자료만 선택하는 것도 평가의 목적에 맞지 않는다.