단일 카메라 내시경 영상으로 전체 위 3D 재구성 색채 채널과 크로모 내시경의 효과

초록

본 연구는 일반 단일 내시경 비디오에서 위 전체의 3차원 형태와 색 텍스처를 재구성하는 방법을 제시한다. 색채 채널별 특징과 인디고 카민(IV) 염색을 이용한 크로모 내시경을 결합했을 때, 특히 빨간색 채널이 가장 풍부한 특징점을 제공하여 전체 위를 성공적으로 복원할 수 있음을 확인하였다.

상세 분석

이 논문은 위 내시경 영상에서 구조‑from‑motion(SfM) 기법을 적용해 전체 위의 3D 모델을 오프라인으로 생성하는 과정을 상세히 기술한다. 기존 연구들은 주로 부분 표면(대장, 간, 후두 등) 재구성에 머물렀으며, 텍스처가 부족한 내부 장기의 경우 특징점 검출이 어려워 재구성 품질이 제한적이었다. 저자들은 이러한 한계를 극복하기 위해 두 가지 핵심 전략을 도입하였다. 첫째, 크로모 내시경을 활용해 인디고 카민(IV) 염료를 위 표면에 분사함으로써 인위적인 텍스처를 생성한다. 염료는 특히 빨간색 채널에서 강한 대비를 만들어 SIFT와 같은 고정밀 특징점 검출기에 풍부한 키포인트를 제공한다. 둘째, 색채 채널별로 별도 SfM 파이프라인을 실행해 어느 채널이 가장 효과적인지를 정량·정성적으로 평가한다.

실험은 3명의 환자에게서 촬영한 HD(1920×1080) 30 fps 비디오를 사용했으며, 각 비디오는 염료 비사용 구간과 사용 구간으로 나뉘었다. 카메라 캘리브레이션은 어안 렌즈 모델을 적용해 왜곡을 보정했으며, 입력 프레임은 중복을 제거하고 단일 색채 채널(레드, 그린, 블루) 이미지로 변환하였다. 특징점 검출에는 SIFT를, 매칭에는 전역 탐색을, 최적화에는 번들 어드저스트먼트를 사용해 전역적인 포즈와 3D 포인트를 동시에 추정하였다.

정량적 결과는 표 1에 요약돼 있다. 염료를 사용하지 않은 경우, 전체 이미지 중 재구성된 프레임 비율은 6~24 %에 불과했으며, 특히 레드 채널은 6 % 수준에 머물렀다. 반면, 인디고 카민을 분사한 레드 채널에서는 95 % 이상의 프레임이 성공적으로 매칭·재구성되었고, 731 070개의 3D 포인트가 생성돼 가장 밀도 높은 모델을 제공했다. 그린 채널도 염료 사용 시 64 % 정도의 재구성률을 보였지만, 레드에 비해 포인트 밀도와 텍스처 품질이 낮았다. 블루 채널은 전반적으로 가장 낮은 성능을 보였다.

메시 생성 단계에서는 포인트 클라우드를 10 000점으로 다운샘플링하고, 통계적 이상치 제거와 포인트 법선 추정을 거쳐 스크린드 포아송 재구성을 적용했다. 텍스처 매핑은 각 삼각형에 가장 적합한 카메라 뷰를 선택해 수행했으며, 결과적으로 전체 위 형태와 점막 색상이 그대로 보존된 고해상도 3D 모델을 얻었다. 또한 저자들은 자체 개발한 뷰어를 통해 특정 프레임을 3D 모델에 투사함으로써, 병변 위치를 직관적으로 확인할 수 있는 인터페이스를 제공한다.

기술적 시사점은 다음과 같다. (1) 내부 장기의 텍스처가 부족할 때는 색채 변조(크로모 내시경)와 채널 선택을 통해 인위적인 특징점을 만들 수 있다. (2) 레드 채널이 인디고 카민의 흡수 스펙트럼과 맞물려 가장 높은 대비를 제공하므로, SfM 파이프라인에 가장 적합하다. (3) 전통적인 스테레오 혹은 구조광 장비 없이도 기존 2D 내시경 장비만으로 전체 장기의 정밀 3D 모델을 구축할 수 있어 비용 효율성이 높다. (4) 오프라인 SfM은 실시간 SLAM보다 높은 정밀도를 제공하지만, 전처리 단계에서 색채 채널 정합과 중복 프레임 제거가 필수적이다. 향후 연구에서는 메쉬 세분화, 고해상도 텍스처 복원, 그리고 자동 병변 검출 알고리즘과의 연계를 통해 임상 적용성을 더욱 강화할 수 있을 것이다.