Artificial Analysis发布评测指数v5
新版综合模型指数新增两项基准和三项升级,60%评分来自私有测试集或隐藏答案。
推荐理由:私有测试集及隐藏答案占比升至60%,能显著压低训练集污染和榜单定向优化的收益,使模型横评更接近真实能力,但透明度与可复现性也随之下降。
新版综合模型指数新增两项基准和三项升级,60%评分来自私有测试集或隐藏答案。
推荐理由:私有测试集及隐藏答案占比升至60%,能显著压低训练集污染和榜单定向优化的收益,使模型横评更接近真实能力,但透明度与可复现性也随之下降。