AI 资讯聚合 · 大模型

Paper Instruments 发 Ultramarine 1 Flash:拿 GLM-5.3 Flash 做非可验证 RL,六项知识工作基准平均 +4.1

国外大模型知识工作强化学习Paper Instruments · 2026-10-14 · 约2分钟 · 来源:Paper Instruments 官方博客
Paper Instruments 发 Ultramarine 1 Flash:拿 GLM-5.3 Flash 做非可验证 RL,六项知识工作基准平均 +4.1

旧金山的小型实验室 Paper Instruments 10 月 14 日发布 Ultramarine 1 Flash:在开源基座 GLM-5.3 Flash 上做大规模强化学习,专攻「不可验证」的专业工作——尽职调查备忘录、诉讼时间线、Excel 与 PPT 交付物这类没有单元测试可判对错的产出。官方技术报告称,六项知识工作基准上平均提升 4.1 分,同时少生成 6.5% 的 token(3270 万 → 3050 万)。分项:JobBench 62.9 排第一,其后是 Gemini 3.8 Flash 60.6、DeepSeek V4.1 Flash 60.4,基座 GLM-5.3 Flash 56.3;外部基准 FrontierFinance 53.3、DiligenceBench 50.6、APEX-Agents 1.1 为 57.0;AutomationBench 50.2,该榜第一是 DeepSeek V4.1 Flash 51.3。

训练侧的构造是这条发布里最实的一块:四类领域(金融、法律、咨询、运营)拆成 19 个业务方向、88 种环境类型,每个方向一条独立的生成管线,按交付物格式、复杂度来源、利益相关方、材料冲突、交易所处的阶段等轴采样,单方向的配置空间在 10⁷–10¹⁰ 量级;奖励不是正则或单元测试,而是按任务写的评分细则。超参也用全:CISPO 损失(改过的双策略目标)、LoRA rank 64、AdamW、128K 上下文、单次最多 250 轮工具调用,上下文用到 85% 或只剩 3 万 token 时压缩。

它给「专业工作智能体」这条线换了一张价目表:官方口径单任务 0.13 美元,对照同榜的 Claude Fable 5(max)8.19 美元、GPT-5.6 Sol(max)2.09 美元,并在成本—质量前沿上与 Claude Opus 5.5(max)6.96 美元、GPT-6 Sol(max)1.26 美元差 2–3 分。两点保留意见写在这里:那个「60 倍便宜」的说法建立在厂商自建的内部基准上,尚无第三方复现;权重目前只写「即将放出」,产品页上线的只有托管 API——所以这条记录的是模型上线与训练方法,不是权重开放。

原文链接:Paper Instruments 官方博客

核验记录
一手页 paperinstruments.com/blog/ultramarine 直读 200 / 770,729 字节,JSON-LD datePublished 与 og:article:published_time 均为 2026-10-14T19:00:00Z,页内可见 Oct 14, 2026;产品页 /ultramarine 直读 200 / 168,827 字节(JobBench、PI Knowledge Work 等六张榜单数字逐字取自该页)。数字逐字核过:JobBench 62.9 / PI Knowledge Work 59.3 / FrontierFinance 53.3 / AutomationBench 50.2 / DiligenceBench 50.6 / APEX-Agents 1.1 57.0;六项平均 +4.1;输出 token 32.7M→30.5M(−6.5%);单任务 0.13 美元 vs Claude Fable 5(max)8.19、GPT-5.6 Sol(max)2.09;API 定价 输入 0.15 / 缓存 0.03 / 输出 0.50 每百万 token,与基座 GLM-5.3 Flash 同价。⚠ 两处口径限制:(1)权重尚未放出(产品页写 Model weights coming soon),本轮收录的是「模型上线 + 技术报告」,不是权重开放;(2)单任务成本对照依赖其自建内部基准 PI Knowledge Work(厂商自述与 Artificial Analysis 智能指数 r=0.81),无第三方复现。团队规模与后训练成本(5 人、约 30 万美元)来自媒体转述 CEO 在 X 上的自述,本机未直读该帖,正文已按二手口径写出。配图 1200×630 PNG,裸请求与带站内 Referer 双 200。