정보 인식이 협력 진화에 미치는 영향

초록

본 연구는 Q-러닝을 이용해 두 사람 죄수 딜레마에서 정보 인식의 대칭·비대칭 구조가 협력 진화에 미치는 차별적 영향을 실험적으로 분석한다. 세 가지 정보 인식 시나리오(상대 행동 인식, 자기 행동 인식, 비대칭 혼합)에서 협력 수준의 전이와 안정성을 비교한 결과, 비대칭 정보 구조가 가장 높은 협력 선호와 복잡한 동적 과정을 보이며, 협력의 출현·붕괴·재구축이라는 3단계 메커니즘을 드러냈다.

상세 분석

본 논문은 강화학습 중 Q‑learning 알고리즘을 두 명의 에이전트가 반복적으로 죄수 딜레마(PD) 게임을 수행하도록 설계하고, 각 에이전트가 인식하는 ‘상태’ 정보를 어떻게 정의하느냐에 따라 협력 진화 양상이 어떻게 달라지는지를 체계적으로 탐구한다. 연구자는 세 가지 정보 인식 스키마를 제시한다. 스키마 I(‘You+You’)은 양쪽 모두 상대방의 이전 행동을 상태로 인식하는 대칭 구조이며, 스키마 II(‘Me+Me’)는 양쪽 모두 자신의 이전 행동을 상태로 삼는 또 다른 대칭 구조이다. 스키마 III(‘You+Me’)는 한 명은 상대 행동을, 다른 한 명은 자기 행동을 상태로 삼는 비대칭 구조다. 이때 상태 집합 S={C,D}는 각각 ‘협력’과 ‘배신’으로 정의되고, 행동 집합 A도 동일하게 C와 D로 구성된다. Q‑table은 상태‑행동 쌍에 대한 가치 Q(s,a)를 저장하며, ε‑greedy 탐색(ε=0.01)과 학습률 α=0.1, 할인율 γ=0.9를 고정한다.

시뮬레이션 결과는 각 스키마별로 협력 비율 ⟨f_c⟩_t와 그 확률밀도함수(PDF)를 분석함으로써 차이를 명확히 드러낸다. 스키마 I에서는 b(딜레마 강도)가 작아도 협력 수준이 불안정하고, b가 증가함에 따라 급격히 배신으로 전이한다. PDF는 트라이모달 형태를 보이며, 중간값(0.5)과 완전 협력(1) 피크가 동시에 존재한다. 스키마 II에서는 b≈0.22 이하에서 완전 협력(⟨f_c⟩≈1)이 안정적으로 유지되지만, b가 임계값 b_c≈0.32를 넘으면 배신이 유일한 안정 상태가 된다. 이때 PDF는 이중 피크(협력·배신) 형태를 띠어 1차 상전이와 유사한 ‘first‑order‑like’ 전이를 시사한다.

가장 흥미로운 것은 스키마 III에서 관찰된 비대칭 동역학이다. 비대칭 정보 구조는 협력의 출현, 붕괴, 재구축이라는 세 단계 과정을 보이며, b가 0.3 수준에서도 스키마 II보다 높은 협력 비율(⟨f_c⟩≈0.25)을 유지한다. Q‑table의 변화 분석에 따르면, 초기에는 ‘Me’ 입장에서 자신의 행동에 기반한 Q값 차이 ΔQ_M가 D를 선호하지만, 상대방(Y)의 행동 인식에 의해 ΔQ_Y가 C를 선호하게 되면서 협력이 급격히 증가한다. 이후 학습이 진행되면서 ΔQ_M이 다시 D를 선호하게 되며 협력이 붕괴하고, 최종적으로는 양쪽 모두가 서로의 행동을 보정하면서 새로운 균형점에 도달한다. 이 과정은 ΔQ_i^s의 부호 변화를 시각화한 4가지 사분면(상태 C와 D 각각에 대한 행동 선호 조합)으로 설명되며, 비대칭 정보가 ‘상호 보정 메커니즘’을 제공해 협력의 회복을 가능하게 한다는 중요한 통찰을 제공한다.

결론적으로, 정보 인식의 대칭성 여부가 협력 진화에 결정적 영향을 미치며, 비대칭 정보 구조는 협력의 생성·소멸·재생산을 촉진하는 복합적 동적 메커니즘을 내포한다는 점을 밝혀냈다. 이는 인간 사회에서 개인이 서로 다른 정보에 기반해 의사결정을 할 때 나타나는 협력 패턴을 이해하는 데 이론적·실험적 근거를 제공한다.