StepFun开放Step 5 Preview权重：600B MoE、27B激活、1M上下文

据MarkTechPost报道，StepFun于10月14日发布Step 5 Preview开放权重，FP8和BF16检查点已上线Hugging Face和ModelScope。该模型为稀疏混合专家模型，总参数600B、每token激活27B，支持最高1M token上下文，面向长周期代理任务，为开发者提供可自托管的编程代理、文档分析和金融工作流选项。

报道称，Step 5 Preview只能运行在数据中心GPU上。FP8检查点需4块B300或8块H200，BF16需8块B300或16块H200；仅FP8检查点大小即650.32GB。vLLM和SGLang提供带OpenAI兼容API的Docker镜像，Transformers仅支持离线生成，完整BF16分片流程尚未端到端验证。StepFun建议温度1.0、top_p 0.95、top_k 0。

架构方面，StepFun技术团队称其采用92层窄而深的Transformer结构，门控滑动窗口注意力与全注意力按3:1交错；全注意力层每次查询选取4096个历史token，以8个为一组评分。模型使用MTP-3投机解码头，端到端速度约提升30%；训练采用FP8混合精度，并在百万级可验证代理环境中进行强化学习。

性能上，StepFun在High推理设置下自测，图表中竞品使用Max effort，报道称这一比较并非同条件。其Hugging Face卡片列出DeepSWE v1.1为67.7、Terminal-Bench 4.0为33.3、Agents’ Last Exam（ALE-CLI）为29.5。Artificial Analysis经OpenRouter的独立结果显示，该模型Intelligence Index为43.7，AA-LCR为88.3%，Humanity’s Last Exam为46.5%，GDPval-AA为54.3%。

Vals AI结果则显示短板：SRE Bench为0.4%，Harvey法律代理基准为9.2%。金融方面，StepFun图表显示FrontierFinance为66.4%，高于GLM-5.3和Kimi K3，但低于Claude Opus 5的69.7%。报道还称，该模型在编程任务上接近开放权重同行GLM-5.3和Kimi K3，落后于GPT-6 Astra和Claude Opus 5；Terminal-Bench 4.0的33.3%低于GLM-5.3的41.9%。

对比其他开放权重模型，Step 5 Preview总参数600B、激活27B、上下文1M，输入支持文本和图像，API另加视频；GLM-5.3总参数按HF文件大小为753B，Kimi K3总参数2.8T、激活104B。Step 5 Preview采用StepFun Model License 1.0，权重格式为FP8和BF16。API价格为每百万输入token 1.00美元、每百万输出token 2.70美元，缓存命中每百万0.10美元，输出计价包含推理token；API支持低、中、高三档推理强度、工具调用和JSON Schema输出。该API已于9月20日上线。