다중시점 영상 코딩을 위한 깊이·텍스처 비트 할당 최적화 연구

초록

**
본 논문은 DIBR 기반 다중시점 영상 시스템에서 텍스처와 깊이 데이터에 대한 비트 예산을 효율적으로 분배하기 위한 새로운 레이트‑디스토션 모델을 제시한다. 파동렛 기반 텍스처 코더와 균일 양자화 깊이 코더를 이용한 간소화된 장면·카메라 모델을 통해, 인코더 측에서 렌더링을 수행하지 않고도 최적의 비트 할당을 계산한다. 실험 결과, 제안 방법이 기존 고정 비율 할당이나 복잡한 렌더링 기반 최적화보다 높은 품질을 제공함을 확인하였다.

**

상세 분석

**
이 논문은 DIBR(Depth Image Based Rendering) 환경에서 다중시점 비디오를 전송할 때, 텍스처와 깊이 두 종류의 데이터에 어떻게 비트를 배분할 것인가라는 근본적인 문제에 접근한다. 기존 연구들은 깊이 맵의 왜곡을 기준으로 비트를 할당하거나, 인코더에서 가상 뷰를 실제로 렌더링해 왜곡을 측정하는 방식으로 최적화를 시도했지만, 전자는 깊이 오류가 시각적 품질에 미치는 영향을 충분히 반영하지 못하고, 후자는 계산 복잡도가 매우 높아 실시간 적용이 어렵다는 한계를 가지고 있었다.

본 논문은 이러한 문제점을 해결하기 위해 세 가지 핵심 아이디어를 도입한다. 첫째, 장면을 “평면 배경 위에 임의 형태의 전경 객체가 존재하는 2‑D 함수”로 단순화함으로써, 깊이와 텍스처가 각각 어떤 형태의 왜곡을 유발하는지를 수학적으로 분석할 수 있는 기반을 마련한다. 여기서 전경 객체는 이진 함수 f(t₁,t₂) = 1 또는 0 으로 표현되며, 이는 파동렛 변환 후 고주파 계수에서 주로 에너지가 집중된다는 사실을 이용한다.

둘째, 텍스처 코더를 파동렛 기반으로 모델링하고, 깊이 코더는 균일 양자화 방식을 가정한다. 파동렛 변환은 직교성을 보장하므로, 고주파 계수의 양자화 오차가 전체 신호 왜곡에 직접적으로 대응한다. 이때 저주파(평균값) 영역은 양자화에 크게 영향을 받지 않으므로 무시하고, 고주파 계수에 대한 평균 제곱 오차를 레이트‑디스토션 함수 D(Rₜ,R_d) ≈ O(2 μ σ² 2αRₜ + K ΔZ min