论文系统研究偏好对齐对多模态LLM图像理解和幻觉问题的影响。
推荐理由：重点不只是把RLHF搬到多模态，而是考察对齐如何减少“回答与图像不一致”的幻觉；这直接关系到视觉问答、代理感知和安全评测。
阅读原文