하이퍼성능 저전력 HTAP를 위한 폴리네시아 하드웨어 소프트웨어 협업

초록

폴리네시아는 트랜잭션과 분석 워크로드를 각각 전용 섬(island)으로 분리하고, 맞춤형 가속기와 3D‑스택 메모리 기반 PIM을 활용해 데이터 이동과 일관성 유지 비용을 크게 줄인다. 실험 결과 기존 HTAP 시스템 대비 트랜잭션·분석 처리량을 평균 1.7배·3.7배 향상시키고, 에너지 소비는 48% 절감한다.

상세 분석

폴리네시아는 HTAP 시스템이 직면한 세 가지 핵심 문제—데이터 이동 비용, 업데이트 전파 오버헤드, 일관성 유지 비용—를 근본적으로 재구성한다. 첫 번째로, 시스템을 ‘트랜잭션 섬’과 ‘분석 섬’이라는 두 개의 격리된 하드웨어‑소프트웨어 공동 설계 단위로 나눈다. 트랜잭션 섬은 기존 멀티코어 CPU와 다단계 캐시를 활용해 캐시 친화적인 행 기반 접근을 최적화하고, 분석 섬은 3D‑스택 DRAM의 로직 레이어에 배치된 단순 인‑오더 PIM 코어를 이용해 대용량 컬럼 기반 연산을 메모리 근처에서 수행한다. 이 구조는 메모리 대역폭 병목을 크게 완화한다.

두 번째로, 폴리네시아는 맞춤형 가속기를 도입해 업데이트 전파와 일관성 유지 메커니즘을 가속한다. 기존 시스템이 스냅샷 복사나 MVCC 버전 체인을 사용해 발생시키는 대규모 memcpy와 랜덤 메모리 접근을 하드웨어 수준에서 제거한다. 가속기는 트랜잭션 로그를 실시간으로 집계하고, 분석 섬에 필요한 형식으로 변환·전송하는 파이프라인을 제공한다. 이를 통해 데이터 신선도를 유지하면서도 분석 워크로드가 최신 데이터를 즉시 읽을 수 있다.

세 번째로, 폴리네시아는 데이터 배치와 작업 스케줄링을 섬 특성에 맞게 설계한다. 트랜잭션 데이터는 CPU 캐시 계층에 최적화된 행 기반 레이아웃으로 유지하고, 분석 데이터는 컬럼 기반 DSM 형태로 메모리 내에 배치한다. 스케줄러는 분석 쿼리의 메모리 접근 패턴을 분석해 PIM 코어에 작업을 할당하고, 동시에 트랜잭션 섬은 CPU 코어에 부하를 분산한다. 이러한 워크로드‑특화 스케줄링은 메모리 대역폭 활용률을 극대화하고, 두 워크로드 간의 자원 경쟁을 최소화한다.

실험에서는 Hyper, AnkerDB, Batch‑DB 등 최신 HTAP 시스템을 대상으로 종합적인 벤치마크를 수행했으며, 폴리네시아는 트랜잭션 처리량에서 평균 1.70배, 분석 처리량에서 평균 3.74배 향상을 기록했다. 에너지 효율 측면에서도 가장 낮은 전력을 소비하는 기존 시스템 대비 48% 절감했다. 이러한 결과는 섬 기반 설계와 맞춤형 가속기가 HTAP 환경에서 실질적인 성능·전력 이점을 제공함을 입증한다.

하지만 폴리네시아는 3D‑스택 DRAM과 PIM 코어가 필요하므로 초기 하드웨어 비용이 높을 수 있다. 또한, 섬 간 데이터 복제와 동기화 로직이 복잡해져 시스템 구현 및 유지보수 난이도가 증가한다. 향후 연구에서는 비용 효율적인 메모리 기술 적용, 동적 섬 재구성, 그리고 다양한 워크로드(예: 스트리밍, 머신러닝)와의 통합 가능성을 탐색할 필요가 있다.