통합 임팩트 지표(I3)와 에너지‑엔트로피(E​EE) 논쟁: 비모수적 정규화의 필요성

초록

인용 분포는 극도로 비대칭이므로 평균에 기반한 지표는 오해를 낳는다. 저자들은 Prathap의 Energy‑Exergy‑Entropy(E​EE) 방식이 평균과 중앙값에 의존해 분포 형태를 무시한다며 비판하고, 논문별 백분위수를 이용해 비모수적으로 계산하는 Integrated Impact Indicator(I3)를 제안한다. I3는 각 논문의 백분위수를 가중합하여 전체 임팩트를 산출하고, 기대값과의 차이를 통계적으로 검정할 수 있다. 또한 분야 구분의 한계와 인용 잠재력 차이를 보정하기 위한 분수 인용 방법도 논의한다.

상세 분석

본 논문은 인용 데이터의 분포 특성을 근본적으로 재검토한다. Seglen(1992,1997)이 밝혀낸 바와 같이 인용 횟수는 롱테일 형태의 극단적 비대칭을 보이며, 평균이나 중앙값 같은 위치통계량은 전체 구조를 왜곡한다. Prathap이 제안한 Energy‑Exergy‑Entropy(EEE) 지표는 물리학의 열역학 개념을 차용해 에너지와 엔트로피를 계산하지만, 실제 인용 데이터에 적용할 때는 평균 JCS와 FCS를 사용한다. 이는 중앙극한정리(CLT)에 의존하는데, 비대칭 분포에서는 CLT가 성립하지 않으므로 신뢰성이 떨어진다. 저자들은 이러한 점을 지적하며, EEE가 “Energy – Exergy = Entropy”라는 식을 물리적 차원으로 그대로 옮기는 것이 개념적으로 부적절하다고 주장한다.

대조적으로 Integrated Impact Indicator(I3)는 각 논문을 0~100 백분위수로 매핑하고, 해당 백분위수를 논문의 인용 횟수와 곱해 전체 집합의 임팩트를 산출한다. 수식 I3 = Σ xᵢ · f(xᵢ)에서 xᵢ는 특정 백분위 구간에 속한 논문의 수, f(xᵢ)는 그 구간의 백분위값이다. 이 방식은 인용 분포의 형태를 그대로 반영하므로, 비모수적 검정(예: Mann‑Whitney, Kruskal‑Wallis)으로 관측값과 기대값을 비교할 수 있다. 또한 백분위 기반 가중합은 논문 수준에서의 정규화를 가능하게 하여, 저자, 기관, 국가 등 다양한 단위로의 집계가 통계적으로 통제된 형태로 이루어진다.

논문은 또한 분야 구분의 문제점을 짚는다. 기존 ISI 주제분류는 정형화되지 않아 필드별 인용 잠재력 차이를 정확히 반영하지 못한다. 대신 인용을 제공한 논문 자체의 참고문헌을 분수(counting)하여 각 인용을 해당 분야에 비례적으로 할당하는 방법을 제안한다. 이는 Garfield(1979)의 “citation potential” 개념과 일맥상통하며, Moed(2010)와 Leydesdorff & Bornmann(2011b)의 연구와도 일치한다.

마지막으로 저자들은 “Rates of Averages vs. Averages of Rates” 논쟁을 인용해, 평균 비율(RCR) 자체가 통계적 검정이 불가능한 단순 비율에 불과하다고 비판한다. 대신 I3와 같은 비모수적 지표를 사용하면 기대값 대비 실제 임팩트를 검정하고, 정책적·전략적 의사결정에 보다 신뢰할 수 있는 근거를 제공한다.