색상 흐림을 이용한 초고속 스펙트럼 영상

초록

본 논문은 두 개의 일반 렌즈와 흑백 센서만으로 구성된 간단한 광학 시스템과, 물리 기반 플러그‑인 ADMM 알고리즘을 결합해 5장의 디포커스 이미지(크로마틱 포컬 스택)만으로 고품질 하이퍼스펙트럼 영상을 1초 이내에 복원한다. 색수차를 이용한 초점 스위핑 방식으로 거의 모든 입사광을 유지하면서 파장별 블러를 인코딩하고, 저차원 스펙트럼 사전학습과 딥 디노이저를 활용해 연산량을 크게 줄인다. 실험 결과, 기존 CASSI·DOE 기반 시스템을 능가하는 PSNR·SSIM·SAM 성능을 보이며, 광학 부품 수와 계산 비용 모두 최소화한다.

상세 분석

본 연구는 하이퍼스펙트럼 영상(Hyperspectral Imaging, HSI)의 핵심 난제인 ‘광자 효율·공간·스펙트럼·시간 해상도 간의 트레이드오프’를 근본적으로 재구성한다. 기존 스냅샷·압축감지 방식은 복잡한 코딩 렌즈·프리즘·디퓨저 등을 필요로 하여 광량 손실과 시스템 복잡성을 초래한다. SfD는 이러한 복잡성을 ‘색수차(Chromatic Aberration)’라는 렌즈의 자연 현상을 활용해, 두 개의 오프‑더‑쉘프 렌즈와 이동 가능한 두 번째 렌즈만으로 파장별 초점 위치를 제어한다. 렌즈를 N(논문에서는 5) 단계 이동시키면 각 단계에서 특정 파장이 가장 선명하게 포착되고, 다른 파장은 점점 흐려지는 ‘크로마틱 포컬 스택’이 생성된다. 이때 입사광의 거의 전부가 센서에 도달하므로 저조도·고속 촬영에 유리하다.

수학적으로는 각 파장 λ_j와 렌즈 위치 z_i에 대응하는 PSF K(z_i,λ_j)를 2‑D 컨볼루션 행렬 H_i,j 로 표현하고, 전체 포워드 모델을 Y = C·H·X 로 정의한다. 여기서 C는 경계 크롭을 담당하는 이진 행렬이며, X는 H×W×C 차원의 하이퍼스펙트럼 데이터, Y는 H×W×N 차원의 포컬 스택이다. N≪C 이므로 역문제는 고차원 선형 시스템을 푸는 형태가 된다.

역복원은 플러그‑인 ADMM(Alternating Direction Method of Multipliers) 프레임워크에 기반한다. 두 가지 핵심 개선이 적용된다. 첫째, 자연계 가시광선 스펙트럼이 저차원 선형 서브스페이스에 집중한다는 사실을 이용해, 사전 학습된 하버드 데이터셋의 주성분 B (v×C) 로 스펙트럼을 투영한다. 즉, X≈P·z (P = B^T⊗I_HW) 로 차원을 v(≈8~10) 로 축소해 연산량을 크게 감소시킨다. 둘째, 프라임 업데이트 단계에서 H의 서브매트릭스가 BCCB(Block Circulant with Circulant Blocks) 구조를 갖는다는 점을 이용해 FFT 기반 빠른 역행렬 연산을 도입한다. 이는 대규모 행렬 직접 역산에 비해 O(N·logN) 수준의 복잡도로 변환한다.

ADMM의 ‘데노이징’ 단계에서는 최신 딥러닝 기반 이미지 디노이저 φ_θ 를 그대로 플러그‑인한다. 이 디노이저는 스펙트럼 도메인에 학습된 것이 아니라, z를 이미지 도메인으로 복원한 뒤 적용한다. 따라서 물리 모델과 데이터‑드리븐 정규화가 자연스럽게 결합돼, 순수 최적화 기반 방법에서 흔히 발생하는 ‘스펙트럼 허위 생성(hallucination)’을 억제한다.

실험에서는 Harvard 데이터셋 30장을 사용해 밝은 환경(5 s 총 노출)과 저조도 환경(2.9 s 총 노출)에서 성능을 평가했다. PSNR, SSIM, SAM(스펙트럼 각도 오차) 지표에서 기존 CASSI·MST·KRISM·2in1‑Camera 등과 비교해 각각 30.81 dB, 0.92, 7.35° 를 기록, 최고 수준의 재구성 품질을 달성했다. 특히 계산 시간은 0.64 s(RTX A6000)로, 15 분 이상 걸리던 일부 CASSI 기반 방법보다 2~3 order magnitude 빠르다. 광학 부품 수 역시 4개(렌즈 2개, 액추에이터, 센서)로 최소화돼, 휴대형·드론·현장 검사 등에 적용 가능하다.

핵심 인사이트는 다음과 같다. ① 색수차를 ‘코딩 매커니즘’으로 전환함으로써 광량 손실 없이 파장 정보를 인코딩한다. ② 물리‑데이터 하이브리드 역복원 구조가 저차원 스펙트럼 사전과 딥 디노이저를 결합해 고속·고정밀 복원을 가능하게 한다. ③ BCCB 기반 FFT 역연산을 통해 대규모 컨볼루션 행렬을 실시간 수준으로 처리한다. 이러한 설계는 ‘광학 복잡도 vs. 계산 복잡도’ 트레이드오프를 근본적으로 뒤집어, 간단한 하드웨어와 강력한 알고리즘만으로 차세대 하이퍼스펙트럼 카메라의 실용화를 앞당긴다.