LLM 비서, 사회적 추론 검증 가능해진다
본 논문은 LLM assistants의 social reasoning 능력을 평가하기 위해 multi-agent simulation framework인 Fuse를 제안합니다. Fuse는 target agent의 hidden motive를 추론하는 과정에서 user-mediated social reasoning을 시뮬레이션하며, 이를 통해 검증 가능한 ground truth를 제공합니다. 연구진은 12개의 LLM에 Fuse를 적용하여 user mediation이 social reasoning의 난이도를 높인다는 점을 체계적으로 분석했습니다.