스마트 MIDI 편집을 위한 “댄싱 MIDI” 모델

** 이 논문은 인간 연주가 담긴 비양자화(MIDI) 데이터를 편집할 때 발생하는 고유의 음악적 문제들을 체계적으로 분석하고, 이를 해결하기 위한 새로운 모델인 ‘Dancing MIDI’를 제안한다. 1. **연구 배경 및 문제 정의** - MIDI는 연주의 정확한 타이밍과 다이내믹 정보를 담고 있어 편집에 적합하지만, 기존 DAW(Logic Pro X, Pro Tools 등)의 기본 편집 명령(cut, copy, paste, split)은 음표를 단순히 시간 구간으로만 다룬다. - 이로 인해 (a) 긴 음표가 경계에서 잘려 여러 개의 짧은 음표가 생성돼 불필요한 어택이 발생하고, (b) 짧은 잔음(레지듀얼)이 생겨 클릭 같은 청각적 방해가 된다, (c) 음표 속도가 급격히 변하거나 원래의 미세한 타이밍 편차가 사라져 메트릭이 양자화된다. - 이러한 현상은 연주의 ‘그루브’와 표현성을 크게 손상시킨다. 2. **목표 및 접근법** - 저자들은 편집 연산이 두 가지 수학적 속성을 만족하도록 설계한다. - **P1 (역연산성)**: Split과 Concat은 서로의 역연산이어야 하며, 이를 통해 편집 후 원본 복원이 보장된다. - **P2 (레지듀얼 방지)**: 편집 과정에서 새롭게 짧은 음표(길이 < ε)가 생성되지 않아야 한다. 기존에 존재하던 레지듀얼만이 결과에 남는다. - 이 두 속성을 동시에 만족시키는 연산을 구현하기 위해, 연속적인 시간 축(정수 단위)과 일정 간격(δ)으로 나뉜 메트릭 구간을 동시에 고려하는 모델을 만든다. 3. **모델 설계 – Dancing MIDI** - **시간 이벤트 정의**: 각 음표는 시작 시점 e⁻와 종료 시점 e⁺(정수)로 표현되며, 비중첩 시퀀스 Sδ에 포함된다. - **시퀀스 분해**: 실제 MIDI는 같은 피치·채널에 겹치는 음표가 존재할 수 있으므로, 파일을 피치·채널별 비중첩 시퀀스로 분해한다. - **Split 연산**: 지정된 이산 시점 t(δ의 배수)에서 시퀀스를 두 부분으로 나눈다. 경계에 걸친 음표는 전체를 왼쪽 혹은 오른쪽에 포함시키거나, 길이가 ε보다 짧으면 삭제한다. 이렇게 하면 경계에서 인위적인 짧은 음표가 생성되지 않는다. - **Concat 연산**: 두 시퀀스를 순서대로 이어 붙이며, 겹치는 음표가 없도록 사전 검증한다. 기존에 존재하던 레지듀얼만이 결과에 남는다. - **구현**: Knuth의 ‘Dancing Links’ 구조를 차용해 이벤트 리스트를 양방향 연결 리스트로 관리한다. 이를 통해 Split·Concat이 거의 상수 시간에 수행될 수 있다. 4. **속성 증명** - 논문은 형식적으로 P1과 P2를 만족함을 증명한다. Split 후 Concat을 하면 원본 시퀀스가 정확히 복원되고, Concat 후 동일 시점에서 Split하면 원래 두 시퀀스로 되돌아간다. 또한, 레지듀얼이 새로 생성되지 않음이 보장된다. 5. **실험 및 평가** - **동기화 예시**: 브라함스 인터메조의 5마디 피아노 롤을 사용해, 기존 Logic Pro X와 Pro Tools에서 ‘split‑paste’를 수행한 결과와 ‘Dancing MIDI’ 적용 결과를 비교했다. - 기존 도구는 음표가 경계에서 잘려 레지듀얼과 불필요한 어택이 다수 발생했으며, 일부 음표가 양자화돼 원래의 미세 타이밍이 사라졌다. - ‘Dancing MIDI’는 레지듀얼이 전혀 없고, 긴 음표가 그대로 유지되며, 속도 변화도 원본과 동일했다. - **자동 하모나이저 적용**: AI 기반 하모니 생성 파이프라인에 ‘Dancing MIDI’를 삽입해 하모니 파트를 삽입·삭제했을 때도 원본 멜로디와 리듬이 손상되지 않음을 확인했다. 6. **의의 및 향후 과제** - 본 연구는 MIDI 편집에 있어 ‘시간적 연속성’과 ‘음악적 의미’를 동시에 보존하는 최초의 형식적 모델을 제시한다는 점에서 학술적·실용적 가치를 갖는다. - 향후 연구에서는 (a) 템포 변동이 있는 비메트릭 연주, (b) 다중 트랙(오케스트라) 상황에 대한 확장, (c) 실시간 UI와의 통합을 통한 사용자 친화적 편집 도구 개발 등을 목표로 할 수 있다. **