재시작을 포함한 연속시간 마코프 과정의 특성

초록

본 논문은 독립적인 포아송 프로세스로 발생하는 재시작 시점에 미리 지정된 분포에서 다시 시작하도록 강제된 연속시간 마코프 과정을 연구한다. 원래 과정과 재시작이 포함된 과정의 전이 확률 함수 사이의 관계를 수식으로 연결하고, 수정된 과정의 불변 확률 측정과 유클리드 공간에서의 모멘트에 대한 폐쇄형 해를 제시한다. 또한 재시작 과정이 항상 양의 해리스 재발성을 가지며, 재시작률 이상으로 지수적 수렴성을 보임을 증명한다. 마지막으로 표준 및 기하 브라운 운동을 예시로 일반 결과를 구체화한다.

상세 분석

이 연구는 연속시간 마코프 과정에 외부 재시작 메커니즘을 도입함으로써, 복잡한 동적 시스템을 보다 현실적인 모델링이 가능하도록 확장한다. 재시작 시점은 원래 과정과 독립적인 포아송 프로세스로 정의되며, 재시작 시 선택되는 초기 분포는 임의의 확률 측정 ν 로 설정된다. 저자들은 먼저 원래 과정의 전이 확률 함수 P(t,x,·)와 재시작이 포함된 과정의 전이 확률 함수 Q(t,x,·) 사이에 다음과 같은 적분 방정식을 도출한다. Q(t,x,A)=e^{-λt}P(t,x,A)+λ∫₀^{t}e^{-λs}∫_{E}P(s,y,A)ν(dy)ds. 여기서 λ는 포아송 프로세스의 강도이며, E는 상태공간이다. 이 식은 재시작이 없는 경우(λ=0)와 재시작이 매우 빈번한 경우(λ→∞)를 자연스럽게 연결한다.

불변 측정 μ에 대해서는 μ(A)=λ∫₀^{∞}e^{-λs}∫_{E}P(s,y,A)ν(dy)ds 라는 명시적 표현을 얻는다. 이는 ν와 원래 과정의 장기 행동이 결합된 형태이며, ν가 원래 과정의 불변 측정과 일치하면 μ*도 동일함을 보여준다. 유클리드 공간 ℝ^d 상에서의 경우, 원래 과정이 확률적 미분 방정식으로 기술될 때, Q의 모멘트는 원래 과정의 모멘트와 λ, ν의 모멘트를 선형 결합한 형태로 닫힌 식을 갖는다. 예를 들어, 1차 모멘트는 E_Q