AI消息速览

DFM Mimir v1:仅用许可后训练数据实现前沿性能的1B参数开放HRM模型

事件日期 2026-08-13 · 学术前沿 · 已接受

事件日期2026-08-13
信息日期2026-08-13
入库日期2026-08-15
通道学术前沿
状态已接受
来源arXiv 论文

知识卡片:DFM Mimir v1:仅用许可后训练数据实现前沿性能的1B参数开放HRM模型

英文标题:DFM Mimir v1: An Open HRM Delivering Frontier Performance at 1B Parameters Using Only Permissible Post-Training Data
英文关键词:permissible data; open model; 1B parameters; Danish; HRM architecture

一句话结论

Mimir v1 是一个基于 Hierarchical Reasoning Model(HRM)架构、参数规模为 10 亿的语言模型,从零开始训练,仅使用“许可”(permissible)的后训练数据,就在英语上表现出强竞争力,并在丹麦语上达到新的最先进水平,同时保持模型开放可获取。

事件概述 / 研究问题

当前大语言模型开发高度依赖大规模、通常并非合法可用的数据集,这对致力于开源和符合伦理数据来源的研究者构成了很高门槛。该研究针对这一问题提出 Mimir v1,探索是否可以在仅使用可许可数据的前提下,用较小规模的开放模型取得具有前沿竞争力的表现。

方法/产品要点

  • 架构:基于 Hierarchical Reasoning Model(HRM)架构,具体实现细节在材料中未展开(待核实)。
  • 规模:1 billion(10 亿)参数。
  • 训练方式:从零开始训练(trained from scratch),并非在已有模型上微调。
  • 数据:使用 161 个数据集的混合数据,并强调仅使用“许可的后训练数据”(permissible post-training data)。关于预训练数据、许可定义及数据清单,材料未进一步说明(待核实)。
  • 开放性:模型已在 Hugging Face Hub 发布,链接为 https://huggingface.co/danish-foundation-models/DFM-Mimir。

主要结果或产业意义

  • 在 20 个基准测试中,覆盖英语、数学与代码、丹麦语三大类。
  • Mimir v1 超过了原始的 HRM-Text 1B 模型。
  • 在与更大规模模型的比较中,能够与 Qwen 3.5 4B、Gemma 4 E2B 等“前沿模型”竞争。
  • 在丹麦语任务上创造了新的最先进结果(new state of the art)。
  • 产业意义:为需要严格数据合规、无法使用大规模非许可数据集的团队,展示了利用“干净”数据训练出实用小模型的可行路径。

为什么重要

该工作将“数据许可合规性”放在模型开发的核心位置,而不是事后过滤。它证明 1B 参数级别的开放模型,在仅使用许可数据的情况下,仍有能力逼近甚至超越更大规模模型的性能,这对学术研究、低资源语言社区以及有版权合规需求的产业应用都具有参考价值。

局限与不确定性

  • 摘要未给出 20 个基准的具体名称、指标分数与比较设定(待核实)。
  • “许可数据”的具体定义、来源与许可类型未在摘要中展开(待核实)。
  • 训练计算成本、数据混合比例、HRM 架构细节未在摘要中描述(待核实)。
  • “与 Qwen 3.5 4B 和 Gemma 4 E2B 竞争”的具体含义和差距幅度尚不明确(待核实)。
  • 丹麦语 SOTA 的评价基准和对照版本待核实。

可用于图书/PPT/简报的角度

  • “数据合规也能训练出前沿小模型”:以 Mimir v1 为案例,展示许可数据约束下的模型训练。
  • “低资源语言的新 SOTA”:丹麦语作为相对低资源语言,如何在小模型上取得突破。
  • “小而精”的模型路线:1B 参数与 4B 甚至更大模型的性能比较,对部署成本和效率有启示。
  • “开放科学基础设施”:模型权重和代码开源,降低复现门槛。

与既有脉络的关系

已有相关卡片分别涉及 UltraX 的预训练数据精炼、零售机器人后训练框架、地理空间社区划分。本条与它们无直接承接,增量信息在于:它聚焦“仅许可数据”约束下从零训练开放基础模型,而不是针对某一应用的微调或数据分析任务。

原始材料

  • 英文标题:DFM Mimir v1: An Open HRM Delivering Frontier Performance at 1B Parameters Using Only Permissible Post-Training Data
  • arXiv ID:2608.13517v1
  • 作者:Peter Schneider-Kamp, Jacob Nielsen, Gianluca Barmina, Kenneth Enevoldsen, Lukas Galke Poech
  • 提交/更新:2026-08-13T17:37:53Z
  • 类别:cs.CL, cs.AI
  • 摘要链接:https://arxiv.org/abs/2608.13517v1
  • PDF 链接:https://arxiv.org/pdf/2608.13517v1
  • 模型主页:https://huggingface.co/danish-foundation-models/DFM-Mimir