연구 수준과 논문 유형이 인용과 F1000 추천 차이에 미치는 영향

초록

본 연구는 F1000이 제공하는 FFa 점수와 Scopus 인용 횟수 사이의 불일치를 연구 수준과 논문 유형 관점에서 분석한다. 28,254편의 논문을 대상으로 한 결과, 연구 수준은 차이에 큰 영향을 미치지 않지만, 비주류 연구·증거 기반 연구는 인용이 높고, 변혁·번역 연구는 FFa 점수가 높지만 인용은 상대적으로 낮은 것으로 나타났다. 이는 학술적 인용과 실무자 관점의 평가가 서로 다른 기준을 갖기 때문이며, 정책 입안자는 평가 시 증거 기반·변혁·번역 연구 비율을 고려해야 함을 제안한다.

상세 요약

이 논문은 F1000 추천 시스템이 연구 평가 도구로서 갖는 잠재력을 검증하고, 기존의 인용 기반 지표와의 차이를 구조적으로 해석하려는 시도이다. 연구자는 먼저 F1000에 등재된 28,254편의 논문을 Scopus 데이터베이스와 매칭시켜 두 지표(FFa 점수와 인용 횟수)를 동시에 확보했다. 이후 논문을 ‘연구 수준’(기본, 중간, 고급)과 ‘논문 유형’(비주류 연구, 증거 기반 연구, 변혁 연구, 번역 연구)으로 분류하고, 각 그룹별 평균 FFa 점수와 평균 인용 횟수를 비교하였다. 통계적 검증에는 ANOVA와 사후 검정이 활용되었으며, 효과 크기와 상관계수도 보고하였다.

핵심 결과는 두 가지로 요약된다. 첫째, 연구 수준(예: 기초·임상·응용)의 차이는 FFa 점수와 인용 간 차이에 유의미한 영향을 미치지 않았다. 이는 F1000 평가자가 논문의 과학적 수준보다는 내용의 실용성이나 혁신성을 더 중시한다는 해석을 가능하게 한다. 둘째, 논문 유형에 따라 차이가 크게 나타났다. 비주류 연구와 증거 기반 연구는 인용이 상대적으로 높았으며, 이는 학술 커뮤니티가 기존 지식을 확장하거나 검증하는 연구에 더 많이 인용하는 경향을 반영한다. 반면 변혁 연구와 번역 연구는 FFa 점수가 높지만 인용은 낮았다. 변혁 연구는 새로운 패러다임을 제시하거나 기존 이론을 근본적으로 재구성하는 논문으로, 학계의 수용까지 시간이 걸릴 수 있다. 번역 연구는 임상 현장이나 정책 현장에서 바로 적용 가능한 실용적 가치를 지니지만, 학술적 인용보다는 실무자에 의한 활용이 주된 평가 기준이 된다.

이러한 결과는 인용 지표가 학술적 영향력을, FFa 점수가 실무자·전문가의 인지적·실천적 가치를 각각 포착한다는 점을 시사한다. 따라서 연구 평가 시 두 지표를 병행 사용하면 보다 다면적인 평가가 가능하다. 특히 정책 입안자는 연구 포트폴리오를 구성할 때 증거 기반 연구, 변혁 연구, 번역 연구의 비율을 명시적으로 관리함으로써, 학술적 성과와 실용적 파급 효과를 균형 있게 추구할 수 있다.

이 논문의 한계로는 논문 유형 분류가 주관적 판단에 의존했다는 점과, F1000 평가자 풀의 분야 편중 가능성이 있다. 또한 인용 데이터는 시간에 따라 축적되므로, 변혁·번역 연구가 장기적으로 인용을 얻을 가능성을 배제할 수 없다는 점도 고려해야 한다. 향후 연구에서는 보다 정교한 텍스트 마이닝 기반 분류와 장기 추적 분석을 통해 이러한 제한을 보완할 필요가 있다.