사진 속 개들의 상호작용: 모델과 인간의 판단 일치성 분석

📝 원문 정보

• Title: Guiding Perception-Reasoning Closer to Human in Blind Image Quality Assessment
• ArXiv ID: 2512.16484
• 발행일: 2025-12-18
• 저자: Yuan Li, Yahan Yu, Youyuan Lin, Yong-Hao Yang, Chenhui Chu, Shin’ya Nishida

📝 초록 (Abstract)

이 이미지는 흰색과 허스키 견종의 두 마리 개가 잔디밭에서 상호 작용하는 모습을 보여줍니다. 인식 캡션 및 등급 SFT 모델 RL 모델 인식 추론 및 등급 인간 박스 안의 텍스트는 인간 주석 가이드를 나타냅니다. 사진의 우수성은 어떻게 평가할까요? 더 높은 일치도 그림 1. 시각적 입력 없이 인간 판단과 모델 추론을 일치시키기 위한 과정.

💡 논문 핵심 해설 (Deep Analysis)

본 논문은 이미지와 캡션에 대한 질량 평가를 통해 모델의 추론 과정과 인간의 판단 사이에서 일관성을 분석합니다. 특히, Q-Instruct(SFT) 및 Q-Insight(RL) 모델을 테스트하여 기존 모델들이 이미지와 캡션 입력에 대한 점수에서 일치하지 않는 결과를 내놓는 반면, 제안된 모델은 인간의 판단과 일관되게 일치하는 점수를 제공합니다. 이 연구에서는 SFT 모델이 캡션과 등급에 대해 감독을 받지만 명시적인 추론 가이드가 부족하고, RL 모델은 점수 최적화에 초점을 맞추는 반면 인간은 해석 가능한 판단 기준을 통해 일관된 평가를 수행할 수 있음을 강조합니다. 제안된 모델은 추론과 등급에 공동으로 가이드되며 이는 인간의 평가 과정을 반영합니다.

📄 논문 본문 발췌 (Excerpt)

Reference