동적 치료 전략을 위한 Q와 A 학습 방법

초록

본 논문은 임상 현장에서 환자의 기저 및 진행 특성을 기반으로 연속적인 치료 결정을 내리는 동적 치료 전략(DTR)을 추정하는 두 가지 주요 통계학적 방법인 Q‑learning과 A‑learning을 상세히 소개한다. 각각의 방법론적 원리, 모델링 절차, 추정 효율성 및 강건성에 대해 비교 분석하고, 우울증 임상 데이터에 적용하여 실제 성능을 검증한다.

상세 분석

Q‑learning은 강화학습 이론을 차용한 방법으로, 각 의사결정 시점 t에서 상태 변수 S_t와 행동 A_t를 입력으로 하여 미래 보상(결과) Y에 대한 조건부 기대값 Q_t(S_t,A_t)=E