瑞士 Apertus 1.5 开源扩到多模态:上下文四倍到 262k,thinking 只是模板开关

10 月 11 日,瑞士 AI 计划(Swiss AI Initiative,由 ETH 苏黎世与 EPFL 联合推动)在 arXiv 发布 Apertus 1.5,把全开放发布的 Apertus 1.0 从纯文本扩展到多模态推理:8B 与 70B 两个尺寸在原有模型上继续预训练,8B 加 4 万亿 token、70B 加 2 万亿,新增图像与音频理解,上下文窗口扩大四倍到 262,144 token。
多模态从 tokenizer 进入,语言模型头仍限于文本,主干架构未改;作者称 thinking 不是单独的模型,而是聊天模板里的一个开关,仅这一项就让 8B 的数学推理最多提升 20 分。发布模型走完监督微调、长上下文微调、可验证奖励强化学习与偏好对齐四步,权重以 Apache-2.0 放在 Hugging Face 的 swiss-ai 组织下。
论文给的对照是:在完全开放的同类模型里,8B 在知识、指令跟随与文化基准上领先,指令跟随一项超过包括开放权重对手在内的全部对照模型。作者把这件事的意义写在开头——基础设施应当由公共机构用公开数据、在开放流程里建成,这可以是不依赖少数供应商的方案,而 Apertus 说明它在规模上是可行的。
核验记录
定日:arXiv abs 页 `citation_date` 与 `citation_online_date` 两处同为 2026/10/11(页内 `[Submitted on 11 Oct 2026]`,本机直读 67,557 字节),arXiv API 的 `published` 为同一时刻 2026-10-11T11:34:43Z。第二证:Hugging Face 官方仓 `swiss-ai/Apertus-v1.5-8B` 与 `-70B` 的 `lastModified` 均为 2026-10-14T22:04:30Z,tags 含 `multimodal` / `image-text-to-text` / `arxiv:2610.15542`(两仓 `createdAt` 2026-07-24 是 1.5 文本版的建仓日,不作定日)。**未直读模型卡**:README 返回 401(受限)。官方站侧:apertus.ai 首页 `multimodal` 命中 0、无对应公告条目,swiss-ai.org 首页亦未检索到该发布,故日期取论文与 HF 仓两个一手时间戳,不写成「厂商公告日」。配图取 apertus.ai 的 `og:image`(`/img/og-en.jpg`,裸请求与带站内 Referer 均 200 / JPEG 240,384 字节)。
← 上一篇OpenAI 把 GPT-6.1 Sol 默认上下文提到 500K:Codex 与 Work 的长任务少触发压缩下一篇 →Agnes 开源音视频生成模型:15.3B Dense 改三专家 MoE,28.7B 存储