선택 효율 추정의 통계적 방법론

초록

본 논문은 실험 데이터에서 이벤트 선택 효율을 측정하고 그 불확실성을 정량화하기 위한 통계 기법을 종합적으로 검토한다. 빈도주의와 베이지안 접근법을 비교하고, 베이지안에서는 베타 분포를 활용한 공액 사전분포를 통해 복잡한 상황(가중치가 있는 표본, 비독립 선택 등)까지도 해석적으로 해결할 수 있음을 보여준다. 또한 서로 다른 샘플을 결합하는 방법과 사전분포 선택의 실용적 지침을 제시한다.

상세 분석

논문은 먼저 선택 효율 ε를 “성공”(선택된 이벤트)과 “실패”(선택되지 않은 이벤트)로 구분되는 이항 실험으로 모델링한다는 전제에서 시작한다. 빈도주의적 추정은 최대우도법(ML)으로 ε̂ = k/n(여기서 k는 선택된 수, n은 전체 수)을 제시하고, 그 불확도는 표준 정규 근사(σ≈√