百度开源2800亿参数文心基座模型
ERNIE 5.5 Flash Base采用MoE架构,以33.5万亿Token预训练并直接开放未微调基座。
推荐理由:百度开放的是未经指令微调的2800亿参数MoE基座,而非成品聊天模型;33.5万亿Token训练规模为开发者定向后训练和研究模型能力边界提供了新底座。
ERNIE 5.5 Flash Base采用MoE架构,以33.5万亿Token预训练并直接开放未微调基座。
推荐理由:百度开放的是未经指令微调的2800亿参数MoE基座,而非成品聊天模型;33.5万亿Token训练规模为开发者定向后训练和研究模型能力边界提供了新底座。