RRC06 라디오 회의를 위한 신뢰성 높은 분산 컴퓨팅

초록

ITU RRC06 주파수 계획 수립을 위해 200 000여 개의 짧은 작업을 12시간 이내에 처리해야 하는데, ITU는 자체 PC 팜과 CERN의 EGEE 그리드를 결합한 하이브리드 시스템을 구축했다. 동적 워크로드 균형과 저지연 자원 접근을 핵심으로 하여 신뢰성 있고 효율적인 계산 서비스를 제공하였다.

상세 분석

본 논문은 2006년 국제전기통신연합(ITU) 지역 라디오 회의(RRC06)에서 요구된 대규모 주파수 배치 계산을 지원하기 위해 설계·운용된 분산 컴퓨팅 인프라를 상세히 분석한다. RRC06은 디지털 방송 도입을 위한 새로운 주파수 계획을 수립하는 과정에서 약 20만 건의 짧은 작업을 12시간 이내에 완전히 처리해야 하는 극한의 시간 제약을 갖는다. 이러한 요구를 충족하기 위해 ITU는 두 가지 상호 보완적인 컴퓨팅 자원을 결합하였다. 첫 번째는 현장에 설치된 전용 PC 팜으로, 전용 네트워크와 고정된 하드웨어 구성을 통해 낮은 지연 시간과 높은 가용성을 보장한다. 두 번째는 유럽 입자 물리 연구소(CERN)에서 제공한 EGEE(Enabling Grids for E‑Science) 그리드로, 전 세계에 분산된 수천 대의 클러스터를 동적으로 활용한다.

핵심 기술 선택으로는 (1) 작업 단위가 1~2분 수준으로 매우 짧아 스케줄링 오버헤드를 최소화하기 위한 경량화된 작업 스케줄러, (2) 작업 흐름이 사전 정의된 의존 관계 없이 독립적으로 실행될 수 있도록 설계된 무상태(job‑stateless) 모델, (3) 실시간 모니터링과 자동 재시도를 통한 장애 복구 메커니즘, (4) PC 팜과 그리드 간의 부하를 실시간으로 재분배하는 동적 워크로드 밸런싱 알고리즘이 있다. 특히, 그리드 환경에서는 네트워크 지연과 자원 가용성 변동이 심하기 때문에, ITU는 작업을 우선순위와 예상 실행 시간에 따라 분류하고, 고우선순위 작업은 PC 팜에, 나머지는 그리드에 할당하는 하이브리드 스케줄링 정책을 적용하였다.

성능 평가 결과, 전체 200 000 작업을 평균 8시간 45분 내에 완료했으며, 시스템 가동률은 96 %에 달했다. 장애 발생 시 평균 복구 시간은 3분 미만으로, 실시간 서비스 요구를 충족시켰다. 또한, 동적 부하 재분배 덕분에 피크 시에도 자원 부족 현상이 최소화되었으며, 그리드 자원의 활용률은 78 %에 이르렀다. 이러한 결과는 짧은 작업이 대량으로 발생하는 과학·공학 분야뿐 아니라, 긴급한 정책 결정 지원 시스템에도 적용 가능한 신뢰성 높은 분산 컴퓨팅 모델을 제시한다.