소프트웨어 엔지니어링 교육과 산업에서 게임화 평가의 다양성 흐름 비교와 격차

초록

본 연구는 2011‑2020년 사이에 발표된 소프트웨어 엔지니어링 분야의 게임화 논문 100편을 체계적 매핑하여, 평가 절차·모델·목적·기준·데이터·분석 방법을 분류한다. 64편이 평가 절차를 제시했지만, 실제 모델을 제안한 논문은 3편에 불과했다. 평가 초점은 ‘전략 자체(사용자 경험·인지)’와 ‘결과·효과(동기·성과)’ 두 축으로 나뉘며, 주요 기준은 참여도, 동기, 만족도, 성과이다. 주관·객관 데이터와 정성·정량 분석이 혼합돼 사용되며, 초점에 따라 데이터 유형과 분석 기법이 달라진다.

상세 요약

이 매핑 연구는 먼저 검색 스트링을 정의하고, 2011‑2020년 사이에 ‘gamification’과 ‘software engineering’ 키워드가 동시에 등장한 논문을 1,342건 수집한 뒤, 제목·초록·전체 본문을 검토해 100개의 1차 연구를 선정하였다. 선정 기준은 실험·사례·설문 등 실증적 방법을 사용했으며, 평가 절차 혹은 모델을 명시적으로 기술한 경우를 포함한다. 이후 저자들은 평가 절차 존재 여부, 평가 목적(전략 vs. 결과), 사용된 평가 기준, 데이터 유형(주관·객관), 측정 도구(설문·로그·관찰·시험), 그리고 분석 방법(통계·테마 분석·머신러닝 등)으로 6가지 차원을 코딩하였다. 결과는 64%가 평가 절차를 제시했지만, 체계적 모델은 3%에 불과함을 보여, 현재 게임화 연구가 ‘무엇을 평가할지’보다는 ‘어떻게 평가할지’에 대한 통일된 프레임워크가 부족함을 시사한다. 또한, ‘전략 자체’ 평가는 주로 설문 기반의 주관적 척도(동기, 만족, 몰입)를 사용하고, ‘결과·효과’ 평가는 로그 데이터·성능 지표 등 객관적 측정에 의존하는 경향이 있다. 데이터 분석에서도 정량적 통계 검증이 55%로 가장 많았으며, 정성적 테마 분석은 30% 수준에 머물렀다. 이러한 편향은 연구자가 연구 목적에 따라 적절한 혼합 방법을 선택하지 못하고, 기존에 널리 사용되는 설문 도구에 과도하게 의존하고 있음을 드러낸다. 마지막으로, 평가 기준이 ‘참여도·동기·만족·성과’에 집중된 반면, 장기 학습 효과, 팀 협업 향상, 비용 효율성 등 실무적·조직적 차원의 지표는 거의 다루어지지 않아 향후 연구에서 다각적 평가 프레임을 구축할 필요가 있다.