研究探索不依赖预定义模态组合和固定任务的通用多模态融合模型。
推荐理由:目标是让同一融合骨干接收任意模态组合并适配不同预测任务,突破部署后输入类型固化的限制;若成立,可显著减少每个场景单独建模的成本。
阅读原文