서명 인증을 위한 회전·스케일·이동(RST) 자동 보정 시스템

초록

본 논문은 디지털 펜으로 획득한 손글씨 서명을 회전, 스케일, 이동 변형에 대해 자동으로 보정하는 방법을 제안한다. 정규화된 교차 상관을 이용해 최적 회전 각을 추정하고, 이미지 크롭으로 배경을 제거해 이동을 무시하며, 높이·너비 비율을 이용해 스케일을 보정한다. 한 개의 레퍼런스 서명만으로도 높은 인증 정확도를 달성한다는 점이 특징이다.

상세 분석

이 연구는 기존 서명 인증 시스템이 제한된 서명 박스, 고정된 스케일, 사용자의 각도 오차 등으로 인해 실제 환경에서 성능이 급격히 저하되는 문제점을 정확히 짚어낸다. 특히, 오프라인 서명 검증에서 흔히 발생하는 intra‑class 변이(서명자의 동일 서명 내에서도 크게 달라지는 형태)를 최소화하기 위해 RST(회전‑스케일‑이동) 보정에 초점을 맞추었다.

먼저 회전 보정 단계에서는 정규화된 교차 상관(normalized cross‑correlation, NCC)을 이용한다. 레퍼런스 이미지 X와 사용자 이미지 Y 사이의 NCC를 각도별로 5° 간격으로 계산하고, 최대값을 찾은 뒤 ±3° 구간을 1° 간격으로 재탐색한다. 이중 최대 NCC값이 나타나는 각도가 최적 회전 각도로 판단되어, 사용자의 서명을 역회전시킨다. NCC를 정규화함으로써 조명 변화나 명암 차이에 강인한 회전 추정이 가능하며, 두 단계(거친 5° 탐색 → 정밀 1° 탐색)로 연산량을 효율적으로 관리한다는 설계적 장점이 있다.

두 번째로 이동 보정은 이미지 크롭(cropping) 방식으로 구현한다. 레퍼런스 이미지와 사용자 이미지를 각각 전처리(그레이스케일 변환 → 이진화) 후, 서명 픽셀만 남도록 주변 배경을 제거한다. 이렇게 얻어진 서명 영역의 좌측·하단 좌표를 원점으로 정의함으로써, 실제 서명이 캔버스 내 어디에 위치했든 좌표계가 일치한다. 즉, 별도의 변환 행렬을 계산하지 않아도 이동 오류가 완전히 소거된다.

세 번째 스케일 보정은 높이와 너비 비율을 이용한다. 크롭된 레퍼런스 이미지와 사용자 이미지의 높이(H)와 너비(W)를 측정하고, 스케일 비율을 Scale = H_ref / H_user 혹은 W_ref / W_user 로 정의한다. 실험에서는 Y축(높이) 비율이 변동이 더 크게 나타났으므로 Y 스케일을 주로 사용하였다. 이후 사용자 이미지를 해당 비율에 맞춰 리사이징(resizing)함으로써, 두 이미지의 크기가 동일해진다.

전체 파이프라인은 디지털 펜(Wacom Bamboo)으로 서명을 실시간 수집하고, 전처리 → 회전 보정 → 크롭(이동 제거) → 스케일 보정 → 특징 추출 → 매칭 점수 산출 순으로 진행된다. 특징 추출은 서명 이미지의 주요 포인트(예: 시작점, 전환점, 교차점 등)를 좌표 집합으로 변환하고, 레퍼런스와의 매칭 포인트 수를 기반으로 점수를 계산한다.

핵심적인 기여는 (1) 다중 레퍼런스 서명이 필요 없는 단일 레퍼런스 기반 설계, (2) 정규화된 교차 상관을 활용한 회전 추정의 높은 정확도와 연산 효율성, (3) 이미지 크롭을 통한 이동 완전 제거, (4) 간단한 비율 연산으로 구현된 스케일 보정이다. 실험에서는 90명의 사용자 각각 9개의 테스트 서명과 1개의 레퍼런스 서명을 사용했으며, RST 보정 전후의 인증 정확도 차이를 정량적으로 제시하였다. 결과는 회전 ±60°, 스케일 0.5~2.0 배, 이동 최대 캔버스 크기까지 보정했을 때 기존 시스템 대비 오류율이 현저히 감소함을 보여준다.

하지만 몇 가지 한계점도 존재한다. 첫째, 교차 상관 기반 회전 추정은 이미지가 크게 왜곡되거나 노이즈가 많을 경우 정확도가 떨어질 수 있다. 둘째, 스케일 보정이 단일 비율에 의존하므로 비등방성(가로·세로 비율이 서로 다르게 변하는) 변형에 취약하다. 셋째, 오프라인 서명 스캔 시 발생하는 해상도 차이나 압축 아티팩트에 대한 견고성 검증이 부족하다. 향후 연구에서는 다중 스케일·다중 회전 후보를 동시에 탐색하는 멀티‑스레드 구현, 비선형 변형을 보정하는 변형 모델(예: Thin‑Plate Spline) 도입, 그리고 딥러닝 기반 특징 추출과 결합한 하이브리드 시스템을 제안한다.

결론적으로, 이 논문은 전통적인 오프라인 서명 인증에 RST 보정이라는 실용적인 전처리 레이어를 추가함으로써, 제한된 환경에 얽매이지 않고 보다 자유로운 서명 입력을 허용하는 시스템을 구현했다는 점에서 의미가 크다. 특히, 저비용 디지털 펜만으로 구현 가능하다는 점은 현장 적용 가능성을 크게 높인다.