무선 통신·센싱을 위한 다중모달 기초 모델

초록

본 논문은 전자기파 전파 물리를 내재한 물리‑인식 토큰을 도입해, 채널 상태 정보(CSI), 3D 환경 지도, 사용자 위치 등 이질적인 모달리티를 통합 학습하는 다중모달 기초 모델을 제안한다. 자기지도식 사전학습 후 제한된 라벨만으로 빔포밍, 대규모 MIMO 프리코딩, 무선 위치추정 등 다양한 물리계층 과제에 효율적으로 전이한다. 실험 결과, 기존 과제‑특화 모델 대비 일반화·데이터 효율성이 크게 향상됨을 보인다.

상세 분석

이 연구는 무선 통신·센싱 시스템이 본질적으로 전자기파 전파와 공간 기하학의 다중모달 상호작용임을 강조하고, 이를 학습 프레임워크에 명시적으로 반영한다는 점에서 혁신적이다. 먼저, CSI 행렬을 2‑D 안테나 배열 형태의 텐서로, 3‑D 환경을 고도 맵 행렬로, 사용자 위치를 2‑D 좌표 벡터로 각각 정규화해 입력으로 사용한다. 이러한 이질적 데이터는 패치화 후 선형 프로젝션을 거쳐 공유 토큰 공간에 매핑되고, 각 토큰에 물리적 위치 정보를 담은 포지셔널 임베딩과 모달리티 구분 임베딩이 부여된다. 핵심은