오스테인‑우렌벡 과정의 정상 평균장 제어와 특이 제어 해법

초록

본 논문은 평균 복귀형 오스테인‑우렌벡(OU) 과정을 대상으로, 장기 평균 비용을 최소화하는 정상(mean‑field) 평균장 제어 문제를 연구한다. 제어는 상하향으로 작용하는 특이 제어이며, 비용 함수는 상태와 제어된 과정의 정상 평균 사이의 이차형식으로 구성된다. 저자는 이 제어 문제를 ‘잠재적 정상 평균장 게임(potential stationary MFG)’과 일대일 대응시켜, 게임의 균형을 구함으로써 원래 제어 문제의 최적 정책을 명시적으로 도출한다.

상세 분석

이 논문은 평균장 제어(MFC)와 평균장 게임(MFG) 사이의 깊은 연결 고리를 새로운 방식으로 제시한다. 먼저, 상태 역학을 평균 복귀형 OU 과정으로 설정하고, 제어를 두 방향(증가·감소)으로 허용하는 특이 제어(singular control)로 모델링한다. 제어는 유한 변동을 갖는 적분형 과정으로 정의되며, 이는 재고 수준을 실시간으로 조정하는 물류·재고 관리 상황에 자연스럽게 대응한다. 비용 함수는 세 부분으로 구성된다. 첫 번째는 상태가 목표 평균 (\bar x)와 얼마나 벗어나는지를 측정하는 (\rho) 가중치의 이차항, 두 번째는 현재 상태와 제어된 과정의 정상 평균 (\theta) 사이의 편차를 측정하는 (\phi) 가중치의 이차항, 세 번째는 정상 평균 자체가 목표 평균 (\bar\theta)와 얼마나 차이나는지를 penalize 하는 (\psi) 가중치의 이차항이다. 여기서 (\phi<\rho)라는 가정은 비용 구조가 상태 편차보다 평균 편차에 더 민감하지 않도록 하여, 게임의 존재와 해석에 필수적인 기술적 조건을 제공한다.

주요 기여는 두 단계 최적화 절차를 도입한 점이다. 첫 단계에서는 정상 평균 (\theta)를 고정하고, 라그랑주 승수 (\lambda)를 도입해 평균 제약을 포함한 무제약 최적화를 수행한다. 이 과정에서 Dynkin 게임과의 연계가 핵심 역할을 한다. 특이 제어 문제를 Dynkin 게임으로 변환함으로써, 최적 제어가 두 임계값 사이에서 반사(reflection) 형태로 작동한다는 것을 증명한다. 즉, 제어는 상태가 상한을 초과하면 하향 특이 제어를, 하한 이하로 떨어지면 상향 특이 제어를 적용해 상태를 구간 안에 유지한다. 이 구간은 (\theta)와 (\lambda)에 대한 Lipschitz 연속성을 가지며, 명시적인 상수까지 도출된다.

두 번째 단계에서는 앞 단계에서 얻은 (\lambda)를 정상 평균 (\theta)와 연계하는 추가 일관성 조건을 부과한다. 구체적으로, (\lambda)는 정상 분포 (p^\infty)에 대한 비용 함수 (l(x,\theta))의 (\theta) 편미분의 기대값에 대한 부호 반전으로 정의된다. 이 조건은 라그랑주 승수의 최적성 해석과 일치하며, 평균장 게임의 ‘잠재적(potential)’ 구조를 완성한다. 따라서, 잠재적 정상 MFG의 균형 ((\xi^\star,\theta^\star,\lambda^\star))는 원래 MFC 문제의 최적 제어 (\xi^\star)와 정확히 일치한다는 일대일 대응이 성립한다.

정리 1은 최적 제어가 잠재적 MFG의 균형을 만족한다는 필요조건을, 정리 2는 충분조건을 각각 제시한다. 여기서 충분조건을 보이기 위해서는 제어가 일정한 2차 적분 평균 유한성을 만족해야 하는 추가 제약이 필요하지만, 이는 실제 재고 관리 상황에서 자연스럽게 충족되는 조건이다. 마지막으로 정리 3은 위 조건들을 만족하는 균형이 존재함을 증명한다. 존재 증명은 고정점 이론과 선형-이차 구조의 특성을 활용해, 두 임계값을 결정하는 비선형 방정식 시스템이 유일한 해를 갖는다는 것을 보인다.

이러한 결과는 기존 평균장 제어 문헌에서 드물게 다루어지는 ‘정상 평균장’ 의존성을 포함한 특이 제어 문제에 대한 완전한 해석을 제공한다. 특히, 재고 관리와 같은 실무 적용에서 장기 평균 비용을 최소화하면서도 재고 수준을 제한된 구간 안에 유지하는 정책을 명시적으로 설계할 수 있다는 점에서 실용적 의의가 크다.