학술지 영향력 지표의 역사와 비판 그리고 부정적 영향

초록

이 장은 저널 임팩트 팩터(JIF)의 40년 넘는 역사를 조명하고, 계산 방식의 비대칭성, 짧은 인용 창, 분야별 차이, 인용 분포의 왜도 등 핵심 한계를 비판한다. 또한 JIF 인플레이션과 예측력 약화, 연구자와 기관의 행동 변화를 포함한 시스템적 부작용을 논의하고, Eigenfactor, CiteScore, SJR 등 대안 지표를 소개한다.

상세 분석

JIF는 1975년 SCI와 함께 처음 도입된 이후 학술 출판과 연구 평가의 핵심 메트릭으로 자리 잡았다. 계산 방식은 “전년도와 그 전년도에 게재된 논문이 해당 연도에 받은 인용 수를 두 해 동안 발표된 ‘인용 가능한 논문’ 수로 나눈 값”으로 정의되지만, 여기에는 여러 구조적 결함이 내재한다. 첫째, numerator와 denominator의 비대칭성이다. 인용은 모든 유형의 문서(에디토리얼, 레터, 뉴스 등)를 포함하지만, denominator에는 오직 논문과 리뷰만 포함한다. 이로 인해 비인용 가능한 문서가 받는 인용까지 계산에 포함돼 인위적으로 JIF가 상승한다. 둘째, 자기인용을 제한하지 않음으로써 저널 자체가 인용을 끌어모아 팩터를 부풀리는 현상이 빈번히 발생한다. 셋째, 2년이라는 짧은 인용 창은 장기 인용 패턴을 반영하지 못한다. 특히 인문·사회과학 분야는 인용 피크가 3~5년 이후에 나타나는 경우가 많아 JIF가 해당 분야의 실제 영향력을 과소평가한다. 넷째, 인용 분포는 극히 비대칭적이며 소수의 고인용 논문이 평균을 크게 끌어올린다. 평균값에 기반한 JIF는 중앙값이나 분위수와 같은 보다 견고한 통계량을 대체하지 못한다. 다섯째, 분야별 인용 문화와 출판 관행 차이로 인해 JIF를 직접 비교하는 것이 무의미하다. 예를 들어, 생명과학은 논문당 인용이 많지만 물리학이나 수학은 상대적으로 적다. 이러한 한계에도 불구하고 JIF는 평가 정책, 채용, 연구비 배분 등에 광범위하게 활용되면서 ‘JIF 엔지니어링’이라 불리는 전략적 행동을 촉발한다. 학자들은 고임팩트 저널에 논문을 투고하거나, 저널 자체가 자기인용 비율을 조정하는 등 지표 최적화를 위한 행동을 보인다. 또한 기관 차원에서 JIF를 기준으로 학과·연구팀을 평가함으로써 연구 주제 선택이 지표에 맞춰 왜곡된다. 이러한 부작용을 완화하기 위해 Eigenfactor Score, Article Influence Score, CiteScore, SCImago Journal Rank 등 대안 지표가 제시되었으며, 각각 인용 네트워크 구조, 전체 인용량, 장기 인용 창 등을 고려한다. 그러나 대안 역시 완전한 해결책은 아니며, 지표 사용에 대한 책임감 있는 접근과 다중 지표 활용이 강조된다.