동료심사 알고리즘 혁신으로 발견 속도 가속

초록

본 논문은 저자·심사자·저널을 에이전트로 하는 개별 기반 시뮬레이션을 구축하고, 기존의 ‘저자 선택형’ 저널 제출 방식과 ‘저널 입찰형’ 방식을 비교한다. 결과는 입찰형 시스템이 심사 속도·출판 효율·리소스 활용 모두에서 현행 시스템을 능가함을 보여준다.

상세 분석

이 연구는 과학 출판의 급증과 심사 부담을 정량적으로 탐구하기 위해 에이전트 기반 모델(ABM)을 설계한다. 모델의 핵심 구성요소는 (1) 저자 에이전트: 연구 역량, 논문 품질, 목표 저널 임팩트, 제출 전략을 보유; (2) 심사자 에이전트: 전문 분야, 가용 시간, 피로도, 평가 정확도 등으로 정의; (3) 저널 에이전트: 영향력, 수용률, 편집 정책, 심사 비용 등을 파라미터화한다. 각 논문은 ‘품질 점수(Q)’와 ‘혁신성(I)’라는 두 차원으로 표현되며, 저자는 자신의 논문을 목표 저널에 직접 제출하거나, 저널이 논문에 입찰하는 두 시나리오를 통해 흐름이 전개된다.

현행 시스템(저자 선택형)에서는 저자가 목표 저널을 정하고, 해당 저널의 편집자가 심사자를 매칭한다. 심사자는 자신의 가용 시간과 전문성에 따라 논문을 수락하거나 거절하고, 리뷰 결과에 따라 저널이 수락·거절을 결정한다. 이 과정은 심사자 과부하, 반복 제출, 그리고 저널 간 중복 심사라는 비효율을 야기한다.

대안인 ‘저널 입찰형’에서는 논문이 먼저 공개 플랫폼에 올라가면, 여러 저널이 논문의 품질·혁신성에 따라 입찰 점수를 제시한다. 저널은 입찰 점수와 자체 수용 정책을 종합해 최적의 매칭을 수행한다. 심사자는 입찰된 저널 중 하나에만 배정받아 리뷰를 진행하므로, 심사자당 평균 리뷰 수가 감소한다. 또한, 저널은 입찰 경쟁을 통해 높은 품질의 논문을 확보하려 하므로, 논문의 평가가 보다 객관적이고 빠르게 이루어진다.

시뮬레이션 결과는 다음과 같다. 입찰형 시스템에서는 평균 심사 소요 시간이 35 % 감소하고, 논문이 최종 출판까지 걸리는 전체 사이클이 28 % 단축된다. 저자는 평균적으로 0.8개의 추가 논문을 더 많이 출판하며, 그 중 15 %는 기존 시스템 대비 높은 임팩트 저널에 게재된다. 심사자 측면에서는 전체 리뷰 요청량이 22 % 감소하고, 각 리뷰당 평균 피로도 점수가 낮아져 리뷰 품질이 향상되는 경향을 보인다. 다만, 저널 편집자는 입찰 관리와 경쟁 조정에 추가적인 업무가 발생한다는 점이 확인되었다.

모델의 한계로는 (1) 인간 행동을 단순화한 가정(예: 저자의 전략이 완전히 합리적)과 (2) 실제 학문 분야별 특성(예: 실험 vs 이론) 차이를 충분히 반영하지 못한 점을 들 수 있다. 향후 연구에서는 다중 분야 모델링, 리뷰 품질의 정량적 측정, 그리고 입찰 메커니즘에 대한 경제학적 분석을 추가함으로써 결과의 일반성을 검증할 필요가 있다.