퍼지 로직 기반 다중 사용자 적응형 테스트 시스템

초록

본 논문은 GSM 기반 SMS 서비스를 이용해 다중 사용자가 동시에 응시할 수 있는 적응형 테스트 시스템(MUATS)을 제안한다. 퍼지 로직을 활용해 학습자의 현재 능력치와 응답 패턴을 실시간으로 평가하고, 가장 적합한 문제를 자동으로 선택한다. 이를 통해 시험 설계·관리 비용을 절감하고, 플랫폼 독립적인 교육 평가 환경을 제공한다.

상세 분석

이 연구는 기존 컴퓨터 적응형 테스트(CAT)가 요구하는 복잡한 심리측정 모델과 고가의 인프라를 간소화하고자, 퍼지 로직 기반의 질문 선택 메커니즘을 도입하였다. 먼저 학습자의 능력치를 ‘낮음·보통·높음’이라는 퍼지 집합으로 정의하고, 정답률, 응답 시간, 이전 문제 난이도 등을 입력 변수로 설정한다. 규칙 기반 퍼지 추론 엔진은 “능력치가 낮고 정답률이 낮으면 쉬운 문제를 제시한다”와 같은 IF‑THEN 규칙을 통해 적절한 난이도의 문제를 도출한다. 이러한 접근은 전통적인 IRT(항목반응이론) 모델이 요구하는 정밀한 파라미터 추정 과정을 생략하면서도, 학습자 맞춤형 문제 제공이라는 핵심 목표를 달성한다는 점에서 의미가 크다.

시스템 아키텍처는 크게 네 개의 모듈로 구성된다. (1) SMS 게이트웨이 모듈은 GSM 네트워크와 연동해 사용자의 문자 입력을 수신하고, 테스트 결과를 문자로 전송한다. (2) 사용자 관리·프로파일링 모듈은 각 사용자의 고유 ID와 과거 응답 기록을 데이터베이스에 저장하고, 실시간 능력치 추정에 활용한다. (3) 퍼지 추론 모듈은 앞서 언급한 입력 변수들을 정규화하고, 멤버십 함수를 적용해 퍼지 값으로 변환한 뒤, 규칙 베이스에 따라 최적 문제를 선택한다. (4) 문제 풀(pool) 데이터베이스는 다양한 과목·주제별로 메타데이터(난이도, 정답, 해설 등)를 포함하고 있어, 퍼지 엔진이 빠르게 조회할 수 있다.

특히 SMS 기반이라는 제약은 UI/UX 설계에 큰 영향을 미친다. 텍스트 길이 제한(160자)과 비동기 통신 특성을 고려해, 문제와 선택지를 간결히 표현하고, 사용자의 응답을 ‘A/B/C/D’와 같은 단일 문자로 제한한다. 이러한 설계는 저가형 모바일 기기나 인터넷 접근이 어려운 지역에서도 시스템을 활용할 수 있게 만든다.

평가 실험에서는 200명의 대학생을 대상으로 3주간 파일럿 테스트를 진행했으며, 기존 고정형 시험 대비 평균 점수 향상률이 12%였고, 시험 종료까지 평균 소요 시간이 18% 감소했다. 또한, 시스템 관리자는 문제 풀 업데이트와 규칙 수정만으로 새로운 과목을 손쉽게 추가할 수 있었으며, 별도의 서버 구축 비용이 크게 절감되었다.

하지만 몇 가지 한계점도 존재한다. 퍼지 규칙의 설계가 전문가 의존적이며, 규칙 수가 증가하면 추론 속도가 저하될 가능성이 있다. 또한, SMS 특성상 멀티미디어(이미지·음성) 기반 문제 제공이 어려워, 과학·공학 분야의 실험적 질문에는 적용이 제한적이다. 향후 연구에서는 규칙 자동 생성 알고리즘과 하이브리드 모델(퍼지+머신러닝) 도입을 통해 적응성을 강화하고, 모바일 앱 연동을 통해 풍부한 인터페이스를 제공하는 방안을 모색한다.

전반적으로 이 논문은 저비용·고접근성을 갖춘 적응형 테스트 플랫폼을 구현함으로써, 교육 현장의 디지털 격차를 완화하고, 학습자 중심 평가 패러다임 전환에 기여할 수 있음을 보여준다.