Samaya Sterling 金融模型 58.9% 分:单题成本 0.61 美元

10 月 30 日,Samaya AI 发布 Samaya Sterling,一个面向金融研究智能体的后训练模型。在它自家的 FrontierFinance 基准上,Sterling 拿到 58.9% 的成绩,高于 Claude Fable 5.1 的 55.9%,而单题成本只有 0.61 美元,对手是 6.89 美元,差出 11 倍。

3B 激活参数怎么压过旗舰模型

Sterling 基于英伟达 Nemotron 3.5 Lightning,是一个 30B 总参数、3B 激活的混合专家模型,底座上下文最长 100 万 token,在 BF16 精度下能塞进单张 H100 80GB 显卡。Samaya 为小模型改造了生产环境里的金融 harness,把系统提示与工具描述中冗长的指引全部删掉,把工具合并以缩短提示词,再让一个压缩器缩短过长的工具返回结果、一个摘要器随轨迹增长做归纳,另外用一个研究预算限制智能体的工作时长,最后交给独立的报告撰写模型成文。

四阶段训练流程

第一步是合成轨迹的监督微调,团队自造 968 个分析师问题,教师模型 Kimi K3 每题答两次,再由一个 LLM 裁判挑出更好的那份,模型由此学会调用 37 个工具并给出合法参数。第二步是最佳策略蒸馏,同样用 Kimi K3 按 8 种研究策略回答 1819 个专家撰写的问题,取评分最好的一条作为训练数据,best-of-8 命中了 80% 的必要评分项,而单一最佳策略只有约 66%,过滤之后留下 1157 题。第三步是离线 GRPO,直接拿 8 份教师答案互相评分,不需要重新生成,每一步成本都很低。第四步是在线 GRPO,模型对每道题答 8 次并从被评分的尝试中学习,训练中用截断重要性采样修正了一个已知的 MoE 采样器错配问题。

分数、代价与边界

FrontierFinance 有 220 道公开查询,按专家撰写的评分细则打分,由 3 个模型组成裁判组,团队声称没有把任何一道基准题放进训练集。成绩对比上,Sterling 是 58.9%、每题 282 秒、0.61 美元,Claude Fable 5.1 是 55.9%、268 秒、6.89 美元,Samaya 自家的高强度系统是 56.0%、278 秒、1.81 美元。分阶段看分数爬升,底座 42.5%,经过三个阶段依次到 51.4%、54.8%、57.5%,最终 58.9%,工具调用的中位数也从 3 次涨到 17 次。切到高强度模式后能到 60.6%,代价是 1.83 美元与 372 秒,在最难的三分之一题目上则从 31.8% 提到 45.2%。其中模型本身每题只花 0.04 美元,其余开销来自工具调用与辅助模型。

需要留意的是权重没有公开,基准成绩也属于团队自报,这类小激活参数模型靠 harness 与模型协同训练换取单点胜出的做法,和 Liquid AI LFM3 的 2B 激活参数路线 属于同一类思路,落地前仍要看真实业务里的稳定性。