IRT 신뢰도 계수의 점근 표준오차 추정법

초록

본 논문은 IRT 모델 하에서 고전 검증 이론(CTT) 신뢰도와 PRMSE를 추정할 때 발생하는 두 가지 표본오차(문항 파라미터 추정 오차와 표본 모멘트 대체 오차)를 동시에 고려한 점근 표준오차(AS​E) 공식을 제시한다. 그리드 응답 모델(GRM) 하에서 EAP 점수 기반 CTT 신뢰도와 잠재 변수 자체에 대한 PRMSE의 AS​E를 유도하고, 시뮬레이션과 실증 예제로 정확성을 검증한다.

상세 분석

이 연구는 기존 IRT 신뢰도 추정에서 표본오차를 단순히 문항 파라미터 추정에만 국한시킨 점을 비판하고, 실제 적용 시에는 모집단 모멘트를 표본 모멘트로 대체하는 과정에서도 오차가 발생한다는 사실을 강조한다. 이를 해결하기 위해 저자들은 ‘두 단계 추정’ 구조를 채택한다. 첫 단계에서는 최대우도법(ML)으로 문항 파라미터 ν̂ 를 얻고, 두 번째 단계에서는 ν̂ 를 이용해 관측점수 s(y;ν̂)와 잠재점수 ξ(θ;ν̂)의 표본 분산·공분산을 계산한다. 이때 두 단계 모두에서 발생하는 추정오차가 결합된 형태의 점근 정규성을 증명하기 위해 매트릭스 미분과 Delta 방법을 확장하였다. 핵심은 함수 g(ν, M) 형태(여기서 M은 표본 모멘트)의 도함수를 ν와 M에 대해 각각 구하고, 공분산 행렬 Σν와 ΣM(표본 모멘트의 공분산)과의 크로스항을 포함한 전체 변동성을 추정한다는 점이다.

구체적인 적용 사례로는 (1) GRM 하에서 EAP 점수 E(Θ|Y;ν̂)를 관측점수로 삼아 CTT 신뢰도 ρ̂_CT​T = Var(E