2 月 2 日消息,阶跃星辰发布了旗下最新、最强开源基座模型 Step 3.5 Flash,官方称其具备强大的推理能力与 Agent 智能,为 Agent 而生。
性能 vs 模型尺寸
附官方介绍如下:
核心亮点如下:
更快:推理速度最高 350 TPS(单请求代码类任务)
更强:在 Agent 场景和数学任务上媲美闭源模型
更稳:胜任复杂、长链条任务
阴影柱状图为 Step 3.5 Flash 开启 Parallel Thinking 后的增强性能。左侧开源模型按总参数量排序,右侧为闭源模型。XBench-DeepSearch 数据源自官方发布。 我们不仅需要“更聪明”的模型,更需要“值得信任”、“响应迅速”、“成本可控”的模型。Step 3.5 Flash 正是为此而来,我们采用:
稀疏 MoE 架构:每个 token 仅激活约 110 亿个参数(总计 1960 亿参数)
MTP-3:模型一次预测 3 个 Token,效率翻倍
3:1 滑动窗口与全局注意力混合架构(SWA + Full Attention):长文本中只看“重点”,显著降低计算开销,高效处理 256K 上下文
Step 3.5 Flash 现已全量上线,官方还称已启动 Step 4 模型的训练,并邀请大家深度参与共创。
文章来源:
哈哈库
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至23467321@qq.com举报,一经查实,本站将立刻删除;如已特别标注为本站原创文章的,转载时请以链接形式注明文章出处,谢谢!