AI@NEWS

从CLIP贡献恢复局部语义

TraceCLIP利用patch到CLS的贡献关系恢复CLIP中的局部视觉语言对应。

推荐理由:它试图不重训CLIP而挖出局部语义,对开放词汇分割和区域识别很实用;关键意义是把全局对比预训练资产转成密集理解能力。

阅读原文