제한된 볼츠만 머신의 기하학적 구조와 식별 가능성

초록

제한된 볼츠만 머신(RBM)은 이진 변수들의 그래프 모델로, 숨김층과 관측층을 완전 이분 그래프로 연결한다. 본 논문은 RBM을 대수통계와 열대기하학 관점에서 연구하여, 그 Zariski 닫힘이 Segre 다양체의 첫 번째 시컨트 다양체의 Hadamard 거듭제곱임을 보인다. 이를 바탕으로 열대화된 모델의 차원 공식을 도출하고, 코딩 이론과 선형 임계함수의 기하학을 이용해 다수 경우에서 RBM의 식별 가능성을 증명한다.

상세 분석

본 논문은 제한된 볼츠만 머신(RBM)을 대수기하학적 객체로 정확히 규정함으로써, 기존 통계학·머신러닝 분야에서 주로 사용되던 경험적 접근법과는 다른 근본적인 이해를 제공한다. RBM은 이진 관측 변수 (v\in{0,1}^n)와 이진 숨김 변수 (h\in{0,1}^k)를 완전 이분 그래프 (K_{n,k})로 연결한 확률 모델이며, 그 확률 질량 함수는 파라미터 (\theta=(W,b,c))에 대해
\