단일 서버 큐를 위한 밴딧 기반 전송률 적응

초록

본 논문은 연속적인 전송률 공간에서 이진 ACK/NACK 피드백만을 이용해 채널 용량을 학습하고, 도착률과 서비스율 사이의 여유(ε)를 알지 못하더라도 평균 큐 길이를 유한하게 유지하는 알고리즘을 제안한다. 알려진 ε 경우에는 단일 단계 UCB 정책으로 O(log (1/ε)/ε²) 를 달성하고, 알려지지 않은 경우에는 단계별 디스크리타이제이션을 점진적으로 정밀화하는 방식으로 O(log³·⁵(1/ε)/ε³) 를 보장한다. 또한 Ω(1/ε²) 의 하한을 증명한다.

상세 분석

이 논문은 전통적인 큐 안정성 연구와 밴딧 학습을 결합한 ‘큐잉 밴딧’ 분야에 연속형(continuum‑armed) 액션 공간을 도입한 최초의 시도라 할 수 있다. 시스템 모델은 슬롯당 도착량 A(t)와 채널 용량 C(t)가 i.i.d.이며, 전송률 V(t)∈