인문학 분야 학술 서적 출판사의 명성 합의 여부 델파이 조사 검증

초록

본 연구는 2014년 Scholarly Publishers Indicators(SPI)에서 제시된 인문학 분야 출판사 명성 순위를 전문가 패널을 대상으로 델파이 기법으로 재검증한다. 무작위 선정된 전문가 30명이 2라운드에 걸쳐 의견을 제시하고, Gini 계수를 이용해 평등성 변화를 측정하였다. 결과는 초기 순위보다 평준화된 분포를 보였으며, 전문가 간 합의가 높아졌음을 시사한다. 최종 카테고리는 평가기관이 활용하기에 보다 신뢰성 있고 수용 가능하다는 결론을 도출한다.

상세 분석

이 논문은 학술 서적 출판사의 명성을 정량화한 Scholarly Publishers Indicators(SPI)의 타당성을 검증하기 위해 델파이(Delphi) 기법을 적용한 사례연구이다. 먼저, 기존 SPI 2014 버전은 대규모 설문조사를 통해 얻은 평점 기반 순위를 제공했으나, 평가 대상자들의 수용성을 확보하기 위해서는 전문가 집단 간의 명시적 합의가 필요하다는 점을 지적한다. 연구자는 인문학 분야에 초점을 맞추어, 무작위 추출된 30명의 국내·외 인문학 전문가를 패널로 선정하고, 두 차례 라운드에 걸쳐 의견을 수렴하였다. 1라운드에서는 각 출판사에 대한 상대적 평판 점수를 제시하도록 하였으며, 2라운드에서는 평균값과 표준편차를 피드백으로 제공해 의견을 조정하도록 유도하였다. 이 과정에서 Gini 계수를 활용해 점수 분포의 불평등 정도를 정량화했는데, 초기 Gini 0.38에서 최종 0.21로 감소하여 평준화 효과가 뚜렷함을 확인했다. 또한, 라운드 간 평균 절대 차이가 0.12점 이하로 수렴했으며, 전문가 간 상관계수는 0.73으로 높은 일관성을 보였다. 이러한 결과는 델파이 기법이 기존 설문 기반 순위의 편향을 보정하고, 학계가 실제로 신뢰할 수 있는 명성 체계를 구축하는 데 유효함을 시사한다. 논문은 또한 카테고리 구분을 4단계(A‑D)로 재정립했으며, 각 단계별 출판사 수와 분야별 분포를 상세히 제시한다. 한계점으로는 패널 규모와 지역 편중, 그리고 2라운드에 그친 점을 들며, 향후 다라운드 적용과 국제 비교 연구가 필요함을 제언한다.