영국 비토착 유기체 위험 평가 체계에 대한 고찰
초록
본 논문은 영국 환경청이 2004년에 의뢰한 비토착 유기체 위험 평가 체계(UK NROAS)의 수학적 기반을 검토한다. Baker et al.(2008)와 사용자 매뉴얼에 제시된 위험 종합 절차에 논리적·통계적 오류가 존재함을 지적하고, 그 오류가 위험 등급 산정에 미치는 영향을 분석한다.
상세 분석
UK 비토착 유기체 위험 평가 체계는 각 위험 요인에 1~5점의 정성적 점수를 부여하고, 이를 가중 평균 혹은 단순 합산 방식으로 종합 위험 점수를 산출한다. 논문은 먼저 점수 체계가 순서형 데이터임에도 불구하고 등간척도로 취급되는 점을 비판한다. 등간척도로 가정하면 점수 간 차이가 실제 위험 차이를 동일하게 반영한다는 전제가 필요하지만, 실제 설문과 전문가 평가에서는 “5점이 4점보다 두 배 위험”이라는 근거가 없다. 따라서 평균값을 계산하는 것은 통계적으로 부적절하다.
다음으로 가중치 부여 과정에서 발생하는 오류를 지적한다. 매뉴얼은 가중치를 전문가 합의에 따라 임의로 설정하지만, 가중치 합이 1이 되도록 정규화하지 않아 종합 점수가 과대·과소 평가될 위험이 있다. 또한, 가중치가 서로 독립적이라고 가정하지만, 실제로는 서식 적합성, 번식력, 전파 경로 등은 상호 연관성이 높아 다중공선성을 야기한다. 다중공선성을 무시하고 단순 가중합을 사용하면 특정 요인의 영향이 과도하게 반영될 수 있다.
또한, 위험 등급 구분을 위한 임계값 설정이 통계적 근거 없이 임의로 지정된 점을 강조한다. 논문은 위험 점수 분포가 비정규적이며, 임계값을 정규분포 기반의 퍼센타일로 설정하면 오분류율이 크게 증가한다는 시뮬레이션 결과를 제시한다.
마지막으로, 불확실성 처리 방식이 부적절함을 지적한다. 현재 매뉴얼은 전문가 의견의 변동성을 점수 범위로만 반영하고, 베이지안 업데이트나 민감도 분석과 같은 정량적 불확실성 전파 방법을 도입하지 않는다. 이는 정책 결정 시 위험 과소평가 혹은 과대평가로 이어질 가능성을 높인다.
이러한 문제점을 종합하면, 현재 UK NROAS는 정성적 점수 체계를 수치화하는 과정에서 통계적 원칙을 위배하고, 가중치와 임계값 설정에 객관적 근거가 부족하며, 불확실성 전파가 미흡하다. 따라서 위험 평가 결과의 신뢰성과 재현성을 보장하기 위해서는 순서형 데이터에 적합한 비모수적 방법, 가중치의 정규화 및 다중공선성 검토, 데이터 기반 임계값 설정, 그리고 베이지안 혹은 몬테카를로 시뮬레이션을 통한 불확실성 전파가 필요하다.
댓글 및 학술 토론
Loading comments...
의견 남기기