Current Issue

대학기관연구(Institutional Research)는 대학에서 이루어지는 다양한 기획 및 정책개발 그리고 이와 관련된 의사결정을 체계적으로 지원하기 위한 일체의 활동을 의미한다[1]. 대학기관연구 분야 중 대학이 당면한 문제를 데이터 분석을 통해 해결하는 분야도 해당된다. 최근 본 대학에서는 전공과목 중 교양 수준의 내용으로 과목 개설을 요구하는 수요가 있어 많은 교양과목이 개설되고 있다. 하지만 성적 평가 후에 교양과목의 난이도 등 여러 이유로 학생들로부터 전공자와 비전공자 간 성적에 대한 형평성 문제를 제기하여 결국 성적 평가를 분리해달라는 요구가 있어 왔다.

이에 본 대학은 강의 계획 시 교수의 재량에 따라 전공자와 비전공자 간의 성적 평가를 분리할지 여부를 결정할 수 있도록 하였다. 그러나 현재 시스템은 교양과목 교수자에게 평가 분리 여부 결정을 전적으로 맡겨 놓았기 때문에 교수자가 직접 판단하기에는 어려움이 있다. 그러므로 데이터 분석 결과를 기반으로 교수자의 결정에 도움을 줄 수 있도록 하는 시스템 개선이 필요하다. 본 논문은 전공자와 비전공자 간의 성적 분리 평가 여부를 데이터 분석 결과를 기반으로 결정하기 위한 분석 시스템 아키텍처를 설계 및 구현하고 세 가지 교양과목을 본 논문의 분석 시스템에 적용하여 검증한다.

본 논문의 2절에서는 전공자와 비전공자 간의 성적 차이에 대한 최근 관련 연구와 각 연구에 이용한 분석 기법들에 대해 설명한다. 3절에서는 본 논문이 제안하는 분석 시스템 아키텍처를 설명한다. 다음 4절에서는 분석 과정과 독립표본 t-test 수행 결과에 대해 설명한다. 마지막으로 5절에서는 결론을 맺는다.

최근 전공자와 비전공자 간의 차이에 대한 연구는 <표1>과 같이 미용[2][3], 음악[4][5], 식품[6], 무용[7], 생물[8] 등 다양한 분야에서 진행되어 왔다. 각각의 연구들은 다양한 방법들을 통해 연구 대상에 해당하는 데이터들을 수집하여 다양한 통계 기법들로 연구 대상의 전공자와 비전공자 간 차이 유무에 대하여 분석하였다.

각 연구의 데이터는 설문지를 이용한 설문조사, 피실험자들의 검사 또는 연구 대상에 맞는 평가를 통해 수집되었고 그 데이터들을 독립표본 t-test, 단순회귀분석, 교차분석, 상관관계분석, 경로분석, Mann-Whitney U test, 귀납적 내용 분석을 통해 전공자와 비전공자 간 차이가 존재하는지에 대해 분석을 하였다. 각 분석 방법에 관해 설명하면 다음과 같다.

- 독립표본 t-test[9]: 두 개의 서로 다른 모집단의 평균에 대한 차이의 유무를 검정하기 위해 각각의 모집단에서 추출된 서로 독립적인 두 개의 표본의 평균값을 비교하고, 이를 통해 모집단 간의 차이가 있는지를 확인한다.- 단순회귀분석[10]: 두 변수 간의 인과관계를 조사하는 방법으로 독립변수가 종속변수에 얼마만큼 영향을 주는지에 대해 분석한다. - 교차분석[11]: 범주형으로 구성된 자료들 간의 연관 관계를 확인하여 자료들 간 관련이 있는지, 있다면 관련의 정도가 어느 정도인지를 검정한다.- 상관관계분석[12]: 양적인 두 변수 간의 선형적 관계를 분석한다. - 경로분석[13]: 인과관계를 가진 여러 관측변수 간의 관계를 종합적으로 분석한다. - Mann-Whitney U test[14]: 순위 척도 자료를 가진 집단이거나 집단의 표본 수가 비교적 작을 때에 두 집단의 차이를 분석한다.- 귀납적 내용 분석[15]: 연구자의 직관과 비판적 분석력이 결합된 연구자의 경험에서 출발하는 방법으로, 수집된 연구 자료에서 발견되는 다양한 변인들을 모두 찾아내어 활용하여 분석한다.

표 1에서 무용 분야의 발레 감상 포인트에 대한 연구는 다른 연구들과는 달리 수치 데이터가 아닌 반구조화 면담을 통해 수집된 면담 내용을 연구 데이터로 이용하였다.

본 분석 시스템은 성적 데이터를 이용하여 전공자와 비전공자의 차이 유무에 대해 분석 결과를 보여야 한다.

따라서 두 개의 서로 다른 모집단의 평균에 대한 차이의 유무를 검정하기 위해 독립표본 t-test를 본 분석 시스템의 분석 방법으로 사용한다.

본 논문의 분석 시스템 아키텍처는 기존 수업 관리 시스템과 유연한 통합을 위해 클라우드 컴퓨팅 기술 중 하나인 서버리스 컴퓨팅[16]을 기반으로 한다. 서버리스 컴퓨팅은 별도의 서버 관리가 필요 없어 인프라 운영을 쉽게 만들어주는 새로운 컴퓨팅 패러다임으로 서비스 어플리케이션 개발에 집중할 수 있도록 한다. 본 논문은 애플리케이션 개발과 실행에 필요한 Kubernetes[17] 기반 서버리스 프레임워크인 Kubeless[18]를 이용한다.

그림 1은 기존 학사 관리 시스템과 연동 가능한 본 논문의 서버리스 컴퓨팅 기반 분석 시스템 아키텍처이다. 기존 학사 관리 시스템은 Kubernetes의 API Server를 통해 Kubeless 내 Function을 호출할 수 있다. Kubeless는 Kubernetes API Server에 Kubeless를 위한 Function CRD(Custom Resource Definition)를 생성하고 Function Controller를 통해 관리되도록 한다. Function Controller는 Function Object생성 이벤트를 감시하고 있다가 필요 시 Function을 배포하고 이를 서비스로 노출한다.

Fig. 1. 
Analysis system architecture

본 논문은 전공자와 비전공자 평가 분리 여부에 대한 근거 데이터(통계 분석 결과 및 그래프)를 기존 학사 관리 시스템에 제공하기 위해 Kubeless에 서로 다른 모집단의 평균에 대한 차이의 유무를 검정하는 Function을 구현하여 등록하였다.

그림 2는 기존 학사 관리 시스템에서 수업 계획서 작성 중에 성적평가 방법에 대한 의사결정을 도와주도록 구현된 화면이다.

Fig. 2. 
Partial screen of syllabus writing

본 논문은 교수자가 교양과목 분리평가 여부를 판단할 수 있도록 도움을 주기 위해 지난 성적 데이터를 이용하여 검정한 결과를 교수자에게 제공하는 서버리스 컴퓨팅 기반 분석 시스템을 구현하였다. 그리고 본 분석 시스템 환경에서 실제 세 과목의 성적 데이터를 이용해 분리평가 여부에 대한 제안 결과가 맞는지에 대해 분석을 진행하였다. 그 결과 본 분석 시스템의 효용성을 검증하였다. 교수자는 본 분석 시스템을 통해 좀 더 공정한 성적 평가를 이룰 수 있을 것으로 기대한다.

본 논문은 계속해서 컴퓨터 전공 관련 외의 다양한 교양과목에 대해 본 분석 시스템을 평가할 계획이다.