阶跃Step 5 Preview大模型权重开放

IT时代网10月15日消息，阶跃今日正式释放Step 5 Preview大模型权重，本次开放内容包括BF16与FP8模型权重、技术博客与配套开源开发工具。

Step 5 Preview面向长程Agent任务而设计，采用稀疏MoE架构，总参数量600B、每token激活参数仅27B，支持100万token上下文窗口，原生支持文本与视觉输入，在AI编程、软件工程、专业知识工作和金融等场景表现突出。近期，Step 5 Preview在OpenRouter周调用量、日调用量榜单中均位居全球第二。

目前，模型权重已上线Hugging Face和ModelScope，并提供面向多种芯片平台和推理框架的适配支持。开发者可以通过vLLM或SGLang部署兼容接口的API服务，也可以使用Transformers进行离线推理，将模型接入自己的数据、工具和系统，构建智能体、应用、工作流与服务。

官方同步公开的技术博客介绍了Step 5 Preview如何通过架构与训练的协同优化，支持更长、更复杂的Agent任务：92层窄深架构为隐式多跳推理提供更深的计算路径，同时控制参数规模与计算成本；Sparse GQA通过块级索引与稀疏计算合并，降低百万token上下文的计算开销，其中8 token块级索引可将索引与top-k选择开销降至原来的1/8；训练上在关键状态与参数上保留FP32精度，结合细粒度梯度裁剪，缓解深层网络中的激活异常增长与梯度尖峰。

注：本文综合自IT之家等，文中包含AI辅助创作的内容。

编辑：林一舟