AI@NEWS

压缩本身构成事实幻觉的理论下限

论文用率失真模型说明,即使见过事实,有限模型记忆也会因近似存储而答错。

推荐理由:它将幻觉来源从“训练时没见过”扩展到“见过但无法无损存储”,用容量、事实规模和答案空间刻画误差下限,挑战单靠扩充语料的思路。

阅读原文