시선 기반 클라우드 게임 스트리밍: 대역폭 절감과 지연 최소화

초록

본 논문은 클라우드 게임에서 사용자의 시선 정보를 실시간으로 활용해 영상 인코딩의 양자화 파라미터를 동적으로 조정함으로써, 시야 중심부는 고품질, 주변은 저품질로 전송하는 foveated 스트리밍 시스템을 구현한다. 프로토타입 실험 결과, 파라미터 설정에 따라 50 % 이상 대역폭을 절감하면서도 100 ms 이하의 지연을 유지할 수 있음을 보여준다.

상세 분석

이 연구는 클라우드 게임이라는 고대역폭·저지연이 동시에 요구되는 환경에 foveated 비디오 코딩을 적용한 최초 사례 중 하나이다. 핵심 아이디어는 인간의 중심 시야(약 2°)가 차지하는 영역만 고해상도로 인코딩하고, 그 외 영역은 양자화 파라미터(QP)를 높여 압축률을 높이는 것이다. 이를 위해 저지연을 목표로 하는 x264의 CRF(Constant Rate Factor) 모드에 QP 오프셋을 매크로블록 단위로 적용한다. 오프셋 QO(i,j)는 가우시안 함수 QOmax·