AI 요약이 검색 결과에 미치는 여론 형성 효과

초록

본 연구는 AI가 자동 생성한 요약문이 검색 결과 페이지에 표시될 때, 사용자들의 이슈 태도와 정책 지지에 어떤 영향을 미치는지를 실험적으로 조사하였다. 2,004명의 참여자를 무작위 배정하여 요약문의 유무, 위치(상단·중간), 프레이밍(이익·위험) 세 가지 변수를 조작하였다. 요약문이 제시된 그룹은 요약의 입장에 맞는 태도와 정책 지지를 보였으며, 특히 상단에 배치된 요약이 태도 변화에 더 큰 효과를 나타냈다. 또한 이슈 친숙도와 AI에 대한 일반적 신뢰가 효과를 조절했으며, 건강 위험을 강조한 요약이 더 유용하게 인식되었다.

상세 분석

이 연구는 사전등록(preregistration)된 무작위 통제 실험으로, 외부 타당성을 확보하기 위해 실제 검색 엔진 인터페이스를 모방한 목업 페이지를 사용하였다. 독립 변수는 세 차원(요약 존재 여부, 위치, 프레이밍)으로 2 × 2 × 2 설계였으며, 각 조합에 약 250명씩 배정하였다. 종속 변수는 (1) 이슈에 대한 태도(리커트 7점), (2) 행동 의도, (3) 정책 지원 의도이며, 모두 사전 검증된 척도를 적용했다. 통계 분석은 다변량 ANOVA와 사후 검증으로 진행했으며, 효과 크기는 η²로 보고하였다. 주요 결과는 요약문이 존재할 때 태도와 정책 지원이 요약의 프레이밍과 일치하는 방향으로 유의하게 이동했으며(F(1,1998)=12.34, p<.001, η²=0.006), 위치 효과는 상단 요약이 중간 요약보다 태도 변화에 더 큰 영향을 미쳤지만(F(1,1998)=4.87, p=.027, η²=0.002) 행동 의도와 정책 지원에는 차이가 없었다. 조절 변수 분석에서는 이슈 친숙도가 낮은 참가자와 AI에 대한 신뢰도가 높은 참가자에서 요약 효과가 강화되는 상호작용이 발견되었다(친숙도 × 프레이밍: F=5.21, p=.023; 신뢰도 × 위치: F=4.03, p=.045). 부가적으로, 위험 프레이밍(특히 건강 위험) 요약이 유용성 평가에서 긍정적 차이를 보였으며(F=6.78, p=.009). 연구는 표본의 연령·성별·교육 수준이 다양했음에도 불구하고, 온라인 검색 환경에서 AI 요약이 여론 형성에 실질적 영향을 미칠 수 있음을 시사한다. 한계점으로는 인공적인 목업 사용으로 인한 외적 타당성 제한, 단일 노출 상황만을 검증한 점, 그리고 문화적·언어적 차이를 고려하지 않은 점을 들 수 있다. 향후 연구는 실제 검색 엔진 로그와 장기 노출 데이터를 활용하고, 다양한 문화권에서의 프레이밍 효과를 비교할 필요가 있다.