학습 기반 동적 스펙트럼 접근 알고리즘

본 논문은 인지 라디오(Cognitive Radio, CR) 시스템에서 1차 사용자(Primary User, PU)의 채널 점유 상태가 마코프 체인으로 변한다는 가정 하에, 다중 인지 사용자가 협력적으로 채널을 탐지하고 접근하는 문제를 부분 관측 마코프 결정 과정(POMDP)으로 정식화한다. 시스템 모델은 N개의 PU 채널이 각각 ‘점유’(1) 혹은 ‘공백’(0) 상태를 갖고, 시간 슬롯마다 인지 사용자는 하나의 채널을 선택해 센싱을 수행한다. 센싱 결과는 PU 신호와 잡음의 합으로 표현되며, 신호 강도 분포는 사전에 알려졌다고 가정하거나, 파라미터화된 형태로 가정한다. **1. 완전 분포 정보 가정** 첫 번째 절에서는 PU 신호와 잡음의 정확한 확률 밀도 함수(pdf)가 알려진 경우를 다룬다. 이 경우, 인지 사용자는 현재 belief state b (각 채널이 공백일 사후 확률)를 베이즈 규칙에 따라 업데이트할 수 있다. 목표는 ‘즉시 보상’을 최대화하면서, PU에 대한 간섭 확률이 사전 정의된 임계값 ε 을 초과하지 않도록 하는 것이다. 저자들은 라그랑주 승수를 도입해 제약을 포함한 라그랑지안 L(b, a, λ)=E