AI@NEWS

分词方式会扭曲自适应计算预算

Qwen3的置信度早退对词内后续子词分配更少计算,且该现象跨多种语言存在。

推荐理由:早退机制把标记误当成等价难度单位,导致同一词的首片段与后续片段获得不同算力;这揭示多语言效率优化可能被分词结构系统性偏置。

阅读原文