Empirical Analysis and Application of the DEA Model for Improving the World University Ranking System

본 연구는 세계대학 평가체제 간 실증분석을 통해 세계대학 순위평가 제도의 문제점을 살펴보고, 세계대학의 연구 분야를 중심으로 상대적 효율성 평가방법을 적용하여 평가하며, 이를 세계대학 평가체제와 비교분석함으로써 세계대학 평가체제의 방법론적 개선이 근본적으로 필요함을 규명하고 보다 실효성 있는 평가체제를 확립하는데 기여하고자 하였다. 분석결과 첫째, 권역과 국가별 편중 현상은 영어권과 비영어권, 연구중심대학과 교육중심대학 등 이원적인 구분보다는 평가기관의 평가목적, 평가지표, 평가기관이 속한 국가 등에 따라 분포가 다르게 나타났다. 둘째, 평가기관 간 대규모 대학의 순위 차이가 중규모 대학 간의 순위 차이 보다 작고, 소규모 대학의 경우 평가기관 간 순위 차이가 매우 크게 나타났다. 대규모 대학에 대한 편중 현상은 일반적인 문제이지 않고 평가기관의 평가목적, 평가지표 등에 따라 평가 결과가 다르게 나타났다. 셋째, 100위내 대학의 순위변동 폭은 평가기관 모두 최근 3년간 순위 변동 폭이 작지만, 100위 밖 대학들의 경우 순위 변동 폭이 평가기관 간은 물론 평가기관의 연차별 차이에서도 더욱 커지는 것을 알 수 있었다. 넷째, 평가기관의 종합순위와 세부평가지표 순위 차이가 대학별로 차이가 크게 나타났다. 다양한 환경의 고등교육 체제를 제한된 평가지표와 임의의 가중치를 적용하여 평가하고 종합순위를 산정하는 것은 타당성과 정확성 측면에서 문제가 있다는 것을 알 수 있었다. 다섯째, DEA모형과 AP모형을 통한 측정결과 값은 세계대학 평가기관의 결과 값과 다르게 나타났고 평가체제의 적용방법에 따라 상이한 결과 값을 보이고 있음을 알 수 있었다. 일정한 조건이 충족된다면 세계대학을 대상으로 DEA 평가모형의 적용가능성은 높다고 할 수 있다. 세계대학 평가기관은 현재의 평가체제가 가지고 있는 문제점을 최소화할 수 있도록 평가제도의 근본적인 개선을 위한 노력이 필요하며, 보다 타당하고 수용 가능한 평가방법을 통해 대학평가의 객관성과 신뢰도를 높여야 할 것이다.This study attempts to review the problems of world university rankings through an empirical analysis of the world university evaluation system to apply a relative efficiency evaluation model for complementing the limits of the world university evaluation system and to discover the relationship between the results of the relative efficiency evaluation and the results of the world university ranking system. The findings of this research are as follows. First, evaluation institutions showed very different cross-distribution in accordance with evaluation scopes and indicators in relation to regional and national level. Second, a large-scale universitys ranking difference is less than the difference between a medium-size university and a small universitys ranking difference, which varies greatly. Third, fluctuation among the top 100 universities ranking is small but fluctuation is huge outside of the top 100. Fourth, the difference between comprehensive ranking and detailed evaluation indicators for each rank appeared high. There is a problem in terms of validity and accuracy in reviewing higher education systems with limited indicators and random weighting. Fifth, the measurement results via the DEA and AP models were different than the results of the world university ranking institutions. Correlations between relative efficiency evaluation and the evaluation system of the world university ranking are low. The applicability of the DEA model meaning of the ratio between input variables and output variables is high if certain conditions are met. The world university evaluation institutions should try to have a substantial improvement in order to minimize the problems of the world university ranking. Universities and governments should use the results of the world university ranking as a guide for the development of higher education system and should have strategic responses for the world university institutions to assess world universities and higher education systems more accurately and appropriately

Relative Efficiency of Research and Development Business Foundations through Data Envelopment Analysis

지식기반 경제사회에서 산학연협력은 교육, 연구와 더불어 대학의 주요한 역할로 자리매김하고 있다. 우리나라에서는 1990년대 중반부터 산학연협력의 중요성이 인식되었으며, 본격적인 산학연협력은 2004년 산학협력단이 설립되면서부터 본격화되었다. 우리나라와 같이 산학연협력의 역사가 짧은 상황에서 산학연협력의 선순환체계를 효율적으로 구축하기 위해서는 산학협력단과 같은 산학연협력 모델의 효율성을 분석하고 효율성 제고를 위한 방향을 제시할 필요가 있다. 이에 본 연구는 자료포락분석(DEA)을 이용하여 46개 종합대학(재학생 15,000명 이상)의 산학협력단을 대상으로 산학협력단의 상대적 효율성을 평가하였다. DEA 모형 중 CCR 모형과 BCC 모형에 추가하여 SBM 모형을 통해 상대적 효율성을 비교하였고, 비효율성의 원인 및 정도와 참조기관을 분석하였다. 다수의 효율적 산학협력단을 대상으로 DEA/AP 모형을 통해 초효율성 순위분석을 실시하였다. 분석 결과 SBM 모형의 효율성 점수가 CCR 모형과 BCC 모형에 비해 낮게 측정됨으로써 대부분의 분석 대상에 비방사형 잔여가 존재하고 있음을 알 수 있었다. 초효율성 순위분석 결과 가장 효율적인 기관은 분석 대상 산학협력단의 61% 참조기관을 가진 지방 국공립대학의 산학협력단이었다. 본 연구의 분석결과를 통해 산학연협력의 중개조직인 산학협력단의 효율성과 경쟁력을 제고 하는데 있어 주요한 시사점을 얻을 수 있을 것이다.Collaboration between industry and academia is positioning itself as a major factor in the university along with education and research in this knowledge-based economy and society. Recognition of the importance of collaboration between industry and academia has increased since the middle of the 1990s. Actual collaboration started in 2004 with the establishment of Research and Development Business Foundations. It is particularly important to share research and collaboration best practices to improve efficiency and promote the development in Korea where the history of collaboration between industry and academia is short. That is the way to create a virtuous cycle of industry/academia collaboration. This study analyses the relative efficiency of the Research and Development Business Foundation of 46 universities that have enrollment of more than 15,000 students by using the CCR, BCC, and SBM models of Data Envelopment Analysis (DEA). The DEA/AP model was conducted to analyze super-efficiency ranking. The results show that non-radial slack exists in most analytic objects as the efficiency scores of SBM are lower than those of the CCR and BCC models. According to the results of super-efficiency ranking, the most efficient DMU is the Research and Development Business Foundation in local public universities. These results suggest an important meaning for enhancing the efficiency and competition of Research and Development Business Foundations