지수 가족 안에서 최대우도와 제어변량의 등가성

초록

본 논문은 지수족 분포에서 알려진 파라미터를 활용한 최대우도추정(MLE)과 제어변량추정(CVE)의 asymptotic 분산이 동일함을 증명하고, 이를 기반으로 CVE의 최적 가중치를 반복적으로 업데이트하는 EM 알고리즘을 제안한다. 실험 결과, 이 EM 알고리즘은 이중정규분포에 대한 기존 근근 찾기 방법보다 빠르고 수치적으로 안정적이며, 재현성 문제도 해결한다.

상세 분석

논문은 먼저 지수족(Exponential Family)의 일반적인 형태를 정리하고, 충분통계량 y와 정규화 상수 ψ 사이의 미분 관계 dμ = V dη, dη = V⁻¹ dμ 를 이용해 Fisher 정보와 점근적 분산을 명시한다. 이때 η는 자연 파라미터, μ는 기대값 파라미터이며, V는 공분산 행렬이다. 저자는 파라미터를 추정해야 할 집합 ν_E와 이미 알려진 집합 ν_K 로 구분하고, 모든 μ_i가 ν_i와 일치한다는 가정 하에 MLE와 CVE의 점근적 분산을 각각 계산한다. CVE는 제어변량 Y_i와 그 기대값을 이용해 Z = X + Σc_i(Y_i−E