AI@NEWS

Kimi K3开源近3万亿MoE

Kimi K3开源完整权重,称总参数2.8万亿、上下文窗口100万token。

推荐理由:2.8万亿总参数与100万token上下文把开源MoE推到超大规模区间,关键不只是参数量,而是长上下文与稀疏激活能否在真实成本下可用。

阅读原文