본 연구는 문헌연구를 통한 모형 개발에서 시작하여, 2차에 걸친 설계 원리의 도출과 개발, 이에 대한 2차례의 현장 연구와 개선, 전문가 검토에 이르기까지의 일련의 과정을 거쳐 웹기반 형성적 동료평가 시스템(WFPA)를 개발하였다. 가장 최근에 완성된 WFPA를 연구의 ...
본 연구는 문헌연구를 통한 모형 개발에서 시작하여, 2차에 걸친 설계 원리의 도출과 개발, 이에 대한 2차례의 현장 연구와 개선, 전문가 검토에 이르기까지의 일련의 과정을 거쳐 웹기반 형성적 동료평가 시스템(WFPA)를 개발하였다. 가장 최근에 완성된 WFPA를 연구의 후반부에서 편의상 최종 시스템이라 명명하기는 하였으나, WFPA는 앞으로도 지속적인 발전을 거듭해야 할 것으로 보인다. 그 이유는 다음과 같다.
첫째, 본 연구에서 마련된 WFPA는 설계기반 연구를 거쳐 지속적으로 수정 및 보완이 이루어지긴 했으나, 현장 사용 환경이나 사용자가 한정되어 있었으므로 다른 환경에서 범용적인 형성적 동료평가 시스템으로 활용하기에는 한계가 있을 것이다. 본 연구에서 사용된 환경은 인문계열의 대학 교육 환경이다. 따라서 여기에 주어지는 학습과제도 쓰기 위주의 학습 과제가 많을 것이고, 이에 대한 논리적 논의와 토론이 문자로 전달되는 것이 낯설지 않은 상황이다. 그러나 사용자의 수준이 달라지고, 학습의 맥락이 달라진다면 현 WFPA의 개선점은 다른 여러 측면에서 다시 논의 되어야 할 것이다.
둘째, 본 연구에서 개발한 WFPA는 연구자의 선행연구에서 개발한 형성적 동료평가 모형을 토대로 만들어졌다. 현재까지는 본 연구에서 활용한 모형이외에 형성적 동료평가의 학습과정을 설명하는 모형이 없는 상태이기는 하지만, 형성적 동료평가의 학습과정을 다룬 또 다른 형태의 타당성을 갖춘 모형이 나온다면 이에 대한 고려와 개선이 필수적이다.
이러한 앞으로의 과제가 있음에도 불구하고, 현재 개발된 WFPA는 기존 동료평가 시스템에 비하여 학습방법으로서의 동료평가의 일련의 과정이 텝 메뉴로 설계되어 손쉽게 학습과정을 알게 함으로써 학습자의 학습 과정에 대한 이해를 도모하는 점, 형성적 목적을 강조한 메뉴를 필수화한 점, 일방향적인 상호작용을 지양하는 다양한 방식의 직접적 상호작용 기능이 설계한 점, 교수자가 자신의 수업에 맞는 동료평가를 설계할 수 있는 동료평가 설계 기능을 제공하는 점 등에서는 현존하는 다른 동료평가 시스템과 확연한 차별성을 확보하고 있다. 후속적인 연구에서는 이러한 특징들이 학생들의 학습에 직접적으로 어떠한 효과를 주는지를 중점적으로 탐구하고자 한다.
마지막으로, 학습 도구 개발을 위한 설계기반 연구를 수행하면서 경험한 설계기반 연구의 방법론에 관한 아이디어를 유사한 유형의 연구를 수행하는 연구자들과의 공유하기 위하여 소개하면 다음과 같다. 첫째, 본 연구와 같은 도구 개발을 위한 설계기반 연구는 개발된 도구의 현장 적용과 그에 대한 자료 분석을 매우 중요시한다. 그러나 이것에만 의존할 경우 생기는 딜레마가 있다. 도구 개발 과정에서 수행되는 현장 적용 연구는 간혹 추후에 완성된 도구가 사용될 모집단을 활용하여 수행되는 경우도 있겠지만, 많은 경우 대상 모집단보다 작은 집단에서 활용되고 그 결과를 해석하는 경우가 많다. 이 경우 적용 현장이 가지는 특징과 연구 대상자가 가지는 특징을 반드시 고려하여 결과가 해석되어야 한다. 그렇지 않고 도구 개발을 위한 설계기반 연구가 수행된다면 추후에 개발될 도구는 그 활용 범위가 상당히 축소될 것이다. 이러한 단점을 막기 위해서 본 연구에서는 현장 적용 연구와 함께 전문가 검토를 활용하여 양쪽 결과들 중 공통점이 있는 것을 중심으로 도구의 수정과 개선을 추진하였다. 이처럼 도구 개발을 위한 설계기반 연구는 도구가 지나치게 현실의 요구만을 반영하여 이론을 무시하게 되거나, 너무나 이상적인 이론 위주로 설계되어 현실의 요구를 방치하는 양 극단의 경우가 발생하지 않도록 양쪽의 균형을 살피며 이루어져야 할 것이다.
둘째, 도구 개발 연구는 그 후속 연구로 개발된 도구의 효과성 연구를 빈번히 수행하게 되는데, 시스템 개발 연구의 경우 도구의 효과성을 보기 위하여 2종류 이상의 시스템을 개발하여 비교 분석하기는 현실적으로 어려움이 많다. 따라서 본 연구에서는 후속적으로 이루어질 효과성 연구를 염두에 두고, 특별히 주안점이 되는 기능들의 사용 여부를 관리자 입장에서 조절할 수 있도록 설계하였는데, 이는 이후 도구의 효과성 연구에서 큰 도움이 될 것으로 사료된다.