평생교육의 중요성이 나날이 강조되면서 양적으로 꾸준한 성장을 이루어온 대학평생교육원은 최근에 ‘고등교육기관의 평생교육 기능 강화’를 목표로대학을 중심으로 한 평생교육 정책이 시행됨에 따라 대학평생교육의 중심기관으로 경영차원에서 질적 제고의 필요성이 제기되고 있다. 그리고 평생교육 이념의 실현이라는 대학평생교육원의 미션과 비전 달성을 위해서도 중장기적 경영전략과 연계할 수 있는 성과평가가 필요하다. 또한 기존의 평생교육학의 평가 연구는 주로 평생교육 프로그램의 참여 지속 및 확산을 위한 프로그램 및 사업의 효과성 분석에 편중되어 왔고, 기관차원의 성과평가를 통해 경영을 지원하려는 시도는 미비한 편이었다.
따라서 본 연구는 대학평생교육원의 성과평가체계 구축을 위해 기관차원의 포괄적 BSC 성과평가모형의 개발과 모형의 실용성을 고려하여 BSC 성과평가모형의 상대적 중요도를 산출하는 것을 목적으로 하였다. 이러한 연구의 목적을 달성하기 위해 연구문제는 첫째, 대학평생교육원의 BSC 성과평가모형은 어떤 체계로 구안, 설계되는가? 둘째, 대학평생교육원의 BSC 성과평가모형의 관점, 핵심성과요인, 핵심성과지표의 내용타당도는 어떠한가? 셋째, 대학평생교육원의 BSC 성과평가모형의 관점, 핵심성과요인, 핵심성과지표의 상대적 중요도는 어떠한가?로 설정하였다.
본 연구에 사용한 연구방법은 문헌연구와 전문가 면접 조사, 델파이 기법, 계층화 분석법이었다. 이와 같은 방법으로 수행되어 도출된 본 연구의 결과는 다음과 같다.
첫째, 대학평생교육원 BSC 성과평가모형의 체계는 문헌연구와 평생교육원 실무자 및 평생교육 전문가 10명의 면접 조사를 병행하여, 대학평생교육원의 미션과 비전으로부터 설정된 관점과 핵심성과요인, 핵심성과지표의 위계구조로 구안하여 성과평가모형 초안이 설계되었다. 초안의 첫 번째 위계에서 대학평생교육원의 미션과 비전을 달성을 위한 성과를 조망할 수 있는 시각인 관점은 ‘학습자 및 이해관계자’ 관점, ‘업무프로세스’ 관점, ‘조직(원)의 학습 및 성장’ 관점, ‘자원’ 관점 4가지가 도출되었다. 두 번째 위계인 핵심성과요인은 각 관점별로 3~4개씩, 총 13개가 도출되었고, 마지막 위계인 핵심성과지표는 각 핵심성과요인에 따라 3~5개씩, 총 56개를 도출하였다.
둘째, 대학평생교육원 BSC 성과평가모형의 내용타당도를 확보하기 위해 평생교육 전문가 패널 34명을 대상으로 두 차례 델파이 조사를 실시하였다. 델파이 조사의 내용타당도는 패널의 의견 일치 정도를 산출하는 CVR 값으로 확인하였다. 본 연구의 1차 델파이 조사 결과에서 CVR 최소값 0.33을 기준으로 통계치가 낮은 항목은 수정하거나, 문항 교체, 항목 통합 등의 방법으로 보완하였고, 이 과정을 거친 2차 델파이 조사 결과에서는 성과평가모형의 내용타당도가 모든 항목에서 개선된 것으로 확인이 되었다. 이와 같이 내용타당도가 확보되어 ‘학습자 및 이해관계자’, ‘업무수행 프로세스’, ‘조직(원)의 학습 및 성장’, ‘자원’의 4개 관점과 13개 핵심성과요인과 각 핵심성과요인에 따른 54개의 핵심성과지표가 대학평생교육원의 BSC 성과평가모형으로 확정되었다.
셋째, 계층화 분석법을 이용하여 다수 전문가 패널의 의견 수렴과정을 통해 성과평가 항목 간의 가중치를 분석하여 모형의 관점, 핵심성과요인, 핵심성과지표 항목 간의 상대적 중요도를 제시하였다. 대학평생교육원 BSC 성과평가모형의 중요도는 첫 번째 위계인 관점에서는 ‘학습자 및 이해관계자’ 관점이, 두 번째 위계인 핵심성과요인 13개 중에서는 ‘학습자 만족 제고’가, 마지막 위계인 핵심성과지표 54개 가운데는 ‘학습자 만족도’가 가장 중요한 것으로 도출되었다. 이를 통해 대학평생교육원의 질적 제고를 위한 경영에서 집중적으로 성과관리를 해야 할 관점, 핵심성과요인, 핵심성과지표를 확인하였고, 경영에서 주요 관심을 가져야 하는 영역을 안내하였다. 또한 우선순위로 분석된 관점, 핵심성과요인, 핵심성과지표는 향후 성과평가를 바탕으로 대학평생교육원 경영 및 평생교육 사업 등에 대한 개선 및 혁신을 할 방법론의 역할을 제공할 것이다.
이상의 결과을 통해 본 연구는 다음과 같은 함의를 도출할 수 있다.
대표적 평생교육기관인 대학평생교육원의 BSC 성과평가모형은 대학평생교육원을 대상으로 개념적이고 실증을 위한 평가도구로 활용할 수 있다. 대학평생교육원의 사회적 책무성 확보 및 대학의 예산 지원과 확산을 위한 객관적 자료를 제공할 수 있는 경영차원 평가도구의 개발이라는 점에서 의미가 있다.
또한, 본 연구의 대학평생교육원의 BSC 성과평가모형과 모형 구성 항목의 상대적 중요도 확인에 의한 가중치 성과평가지표 도출은 대학평생교육원을 비롯한 평생교육기관 평가실무에 중요한 기준을 마련하였다는 데 의의가 있다.