Mendeley 독자를 활용한 국가 연구 영향 지표

초록

본 논문은 전통적인 인용 기반 국가 연구 영향 지표의 시차 문제를 보완하기 위해, Mendeley 독자 수를 활용한 새로운 지표 산출 방법을 제시한다. 오래된 인용 데이터를 이용해 Mendeley 독자 데이터의 국제적 편향을 보정하고, 최근 Mendeley 이용률 변화를 반영하는 보정 모델을 추가로 검증한다. 결과는 인용 기반 지표와 유사한 국가별 순위를 보이며, 약 1년 앞선 트렌드 감지를 가능하게 한다는 점을 강조한다.

상세 분석

이 연구는 국가별 연구 성과를 평가할 때 인용 횟수가 갖는 시간적 지연(lag) 문제를 해결하고자 Mendeley라는 학술 소셜 네트워크 서비스의 ‘읽기’(reader) 데이터를 활용한다는 점에서 혁신적이다. 인용은 논문이 실제 연구에 활용된 정도를 반영하지만, 평균적으로 논문이 출판된 후 23년이 지나야 충분한 인용이 축적된다. 반면 Mendeley 독자는 논문이 공개된 직후부터 빠르게 누적되며, 특히 최신 연구에 대한 관심을 조기에 포착한다는 장점이 있다. 그러나 Mendeley 데이터는 국가별, 분야별 이용률 차이와 같은 구조적 편향을 내포하고 있다. 이를 보정하기 위해 저자는 두 단계의 보정 모델을 설계한다. 첫 번째 단계는 과거(예: 5년 전) 인용 데이터를 이용해 각 국가·분야별 ‘보정 계수’를 추정한다. 이 계수는 Mendeley 독자 수와 인용 수 사이의 비례 관계를 국가·분야별로 조정함으로써, Mendeley 데이터가 과대·과소 평가되는 현상을 최소화한다. 두 번째 단계는 최근(최근 12년) Mendeley 가입자 증가율을 반영하는 가중치를 도입한다. 이는 Mendeley 사용이 급격히 확대된 국가에서 독자 수가 인위적으로 상승하는 현상을 보정한다. 흥미롭게도, 두 번째 단계의 적용은 전체 지표에 큰 변화를 주지 않았으며, 이는 첫 번째 단계의 보정이 이미 대부분의 편향을 효과적으로 제거했음을 시사한다.

실증 분석에서는 2000~2018년 사이에 발표된 수십만 건의 논문을 대상으로, 국가별 총 독자 수와 인용 수를 비교하였다. 결과는 미국, 영국, 독일 등 전통적인 연구 강국이 Mendeley 기반 지표에서도 높은 순위를 유지함을 보여준다. 다만, 일부 신흥 국가(예: 중국, 인도)는 인용 기반 지표보다 Mendeley 기반 지표에서 상대적으로 높은 성장세를 보였다. 이는 해당 국가 연구자들의 Mendeley 활용도가 급격히 증가했거나, 국제 협업을 통한 가시성이 높아졌기 때문일 가능성이 있다. 또한, 연도별 추이를 살펴보면 Mendeley 기반 지표는 인용 기반 지표보다 약 1년 앞서 변동을 포착한다는 점이 확인되었다. 이는 정책 입안자나 연구 관리자가 보다 신속하게 연구 성과를 모니터링하고, 자금 배분이나 전략 수정에 활용할 수 있는 실용적인 장점을 제공한다.

하지만 논문은 Mendeley 독자와 실제 연구 영향 사이의 인과관계가 명확히 규명되지 않았으며, 독자 수가 ‘읽음’ 혹은 ‘저장’ 정도를 정확히 반영하는지에 대한 논란이 남아 있다. 또한, Mendeley 이용자의 연령·직업·지역 분포가 변동 가능성이 크기 때문에, 장기적인 추세 분석에서는 추가적인 보정이 필요할 수 있다.

요약하면, 이 연구는 Mendeley 독자 데이터를 활용한 국가 연구 영향 지표의 가능성을 실증적으로 입증했으며, 기존 인용 기반 지표와 보완적인 관계를 형성한다는 점에서 학술 평가 체계의 다변화를 촉진한다.