이론 기반 메시지 프레이밍이 원격 평가에서 정직과 동기 부여 성과를 동시에 향상시킬 수 있는가

초록

본 연구는 자기결정성, 인지 부조화, 사회 규범, 자기 효능감 등 15가지 심리학적 개념을 기반으로 45개의 메시지를 설계하고, 원격 무감시 시험에서 부정행위(치팅) 감소와 동시에 학업 성과 및 시험 경험을 유지·향상시킬 수 있는지를 실증하였다. 메시지들은 전체 치팅 비율을 42% 감소시키고, 비치팅 비율을 19% 증가시켰으며, 성과와 경험에 부정적 영향을 미치지 않았다. 흥미롭게도 개념별 효과 차이는 거의 없었으며, 메시지는 의도된 단일 메커니즘이 아니라 여러 심리적 메커니즘을 동시에 활성화했다는 점이 밝혀졌다.

상세 분석

이 연구는 원격 무감시 평가에서 부정행위를 억제하기 위한 메시지 개입을 이론적으로 체계화한 최초의 시도 중 하나이다. 먼저, 자기결정성 이론(autonomy, competence, relatedness), 인지 부조화 이론(자아 일관성, 불편감, 부조화 감소), 사회 규범 이론(서술적·규범적 규범, 사회적 제재, 집단 정체성), 자기 효능감 이론(성취 경험, 대리 경험, 언어 설득, 정서적 각성) 등 네 가지 프레임워크에서 15개의 구체적 개념을 도출하였다. 각 개념당 3개의 메시지를 제작해 총 45개의 ‘동기 부여형’ 메시지를 만들었으며, 이는 기존 연구가 주로 위협·감시 중심의 메시지를 사용한 것과는 근본적인 차별점이다.

실험은 1,232명의 온라인 참여자를 무작위 배정하여, 각자 하나의 메시지 혹은 무메시지 조건에서 보상 기반 애너그램 과제를 수행하도록 설계되었다. 부정행위는 각 아이템별로 ‘cheated’ 여부를 자동 기록해 0%(비치팅), 1‑99%(부분 치팅), 100%(전면 치팅)으로 분류하였다. 주요 결과는 다음과 같다. 첫째, 메시지 전체가 전면 치팅 비율을 33%에서 19%로 42% 감소시켰으며, 비치팅 비율을 53%에서 63%로 19% 상승시켰다. 둘째, 성과(정답 수, 과제 완료 시간)와 시험 경험(스트레스, 만족도, 몰입도)에서는 어떠한 부정적 효과도 관찰되지 않았다. 셋째, 개념별 효과 차이는 통계적으로 유의미하지 않아, ‘어떤 이론에 기반했는가’보다 ‘메시지가 동기 부여를 촉진한다’는 공통 메커니즘이 핵심임을 시사한다.

특히, 사후 설문에서 참가자들은 자신이 인식한 심리적 메커니즘이 의도된 단일 메커니즘과 일치하지 않으며, 오히려 여러 메커니즘이 동시에 작동했다고 보고했다. 예를 들어, 자기결정성 메시지가 ‘자율성 만족’뿐 아니라 ‘사회적 연결감’과 ‘성취감’까지 향상시켰다. 이러한 다중 메커니즘 효과는 구조방정식 모델링을 통해 부정행위 감소, 성과 향상, 긍정적 경험과 모두 유의한 경로를 형성함을 확인했다. 따라서 기존 이론이 제시하는 단일 경로보다 복합적·상호작용적 모델이 실제 행동을 더 잘 설명한다는 중요한 학술적 함의를 제공한다.

실무적 관점에서는 ‘통제·감시’가 아닌 ‘지원·자율성’ 강조 메시지가 부정행위를 억제하면서 학습자 경험을 해치지 않으며, 오히려 동기와 성과를 유지·증진시킬 수 있음을 보여준다. 이는 원격 시험 설계 시 비용 효율적이며 프라이버시 침해 위험이 없는 대안으로 활용 가능하다.