This study stemmed from the belief that evaluation, when designed and implemented in a learning-oriented way, could promote individual, team, and organizational learning. The purpose of this study was to examine what and how evaluation stakeholders learn when they are involved in a learning-oriented evaluation of a HRD program.
This study was designed based on a single case study approach. A hospital organization was chosen as a research site because of its accessibility and convenience. Qualitative methods such as semi structured interviews, participant observations, and document review were used to collect data throughout the evaluation process. Inductive and thematic analysis was the main framework for data analysis.
This study found that when learning-oriented features such as participation, reflection, and dialogue were built in the evaluation process, the evaluation team members were engaged in and aware of their own learning. The evaluation team members learned about the program being evaluated and others’ perspectives. Also, their learning resulted in changes in their thoughts, beliefs, and attitudes (process use). The learning oriented features of the evaluation—participation, dialogue, and reflection—helped the evaluation team members to learn from the process. There were however challenges that hindered the evaluation team members' learning such as limited time, unexpected work situations, and research design.
프로그램 평가는 조직 전체의 학습 시스템과 동떨어져 진행되어 왔으며, 특히 프로그램 이해관계자들과 평가참여자들은 평가 과정에서 배제된 체 단순한 정보 제공자로서의 역할을 수행해왔다. 그러나 평가는 평가담당자뿐만 아니라 이해관계자와 평가참여자의 개인적, 집단적, 그리고 조직적 성장과 발전을 도모하는 학습의 과정일 수 있다. 이와 같은 관점에서 본 연구는 평가참여자들이 학습지향평가(Learning oriented evaluation)에 참여함으로써 무엇을 어떻게 학습하는가를 탐구하는데 그 목적을 두었다.
질적 접근 방법을 사용하여 병원의 간호사 오리엔테이션 프로그램을 사례연구 하였다. 7명의 다양한 병원 조직원들로 평가 팀을 구성하고, 평가 팀이 평가 계획부터 수행, 제안, 평가 보고서 작성 등 일련의 과정에 직접 참여할 뿐 만 아니라 전문평가자가 제공한 여러 학습의 기회를 활용하도록 하였다. 자료를 수집하기 위해서 인터뷰, 참여 관찰, 그리고 문서분석을 실시하였다.
평가 과정에 참여, 반추, 그리고 대화와 같은 학습 요소들을 제공하고, 평가참여자들이 무엇을 어떻게 학습하는지를 탐구한 본 연구의 결과는 다음과 같다.
첫째, 오리엔테이션 프로그램, 다른 조직원의 견해, 팀웍, 평가 및 연구에 관한 평가참여자들의 이해가 높아졌다.
둘째, 평가 참여자들은 평가 후 프로그램 변화 및 발전에 관해 수용적이고 적극적인 태도를 취하였다.
셋째, 참여, 반추 그리고 대화의 기회가 평가 참여자들의 학습에 도움을 주었다.
넷째, 평가 참여자들의 학습에 긍정적인 영향을 미친 것으로는 다양한 팀원구성, 팀분위기, 학습기법 등이었으며, 부정적 영향을 미친 것으로는 시간적 제약, 일의 특수성, 프로젝트설계 등이었다.