知识卡片:DFM Mimir v1:仅用许可后训练数据实现前沿性能的1B参数开放HRM模型
英文标题:DFM Mimir v1: An Open HRM Delivering Frontier Performance at 1B Parameters Using Only Permissible Post-Training Data
英文关键词:permissible data; open model; 1B parameters; Danish; HRM architecture
一句话结论
Mimir v1 是一个基于 Hierarchical Reasoning Model(HRM)架构、参数规模为 10 亿的语言模型,从零开始训练,仅使用“许可”(permissible)的后训练数据,就在英语上表现出强竞争力,并在丹麦语上达到新的最先进水平,同时保持模型开放可获取。
事件概述 / 研究问题
当前大语言模型开发高度依赖大规模、通常并非合法可用的数据集,这对致力于开源和符合伦理数据来源的研究者构成了很高门槛。该研究针对这一问题提出 Mimir v1,探索是否可以在仅使用可许可数据的前提下,用较小规模的开放模型取得具有前沿竞争力的表现。
方法/产品要点
- 架构:基于 Hierarchical Reasoning Model(HRM)架构,具体实现细节在材料中未展开(待核实)。
- 规模:1 billion(10 亿)参数。
- 训练方式:从零开始训练(trained from scratch),并非在已有模型上微调。
- 数据:使用 161 个数据集的混合数据,并强调仅使用“许可的后训练数据”(permissible post-training data)。关于预训练数据、许可定义及数据清单,材料未进一步说明(待核实)。
- 开放性:模型已在 Hugging Face Hub 发布,链接为 https://huggingface.co/danish-foundation-models/DFM-Mimir。
主要结果或产业意义
- 在 20 个基准测试中,覆盖英语、数学与代码、丹麦语三大类。
- Mimir v1 超过了原始的 HRM-Text 1B 模型。
- 在与更大规模模型的比较中,能够与 Qwen 3.5 4B、Gemma 4 E2B 等“前沿模型”竞争。
- 在丹麦语任务上创造了新的最先进结果(new state of the art)。
- 产业意义:为需要严格数据合规、无法使用大规模非许可数据集的团队,展示了利用“干净”数据训练出实用小模型的可行路径。
为什么重要
该工作将“数据许可合规性”放在模型开发的核心位置,而不是事后过滤。它证明 1B 参数级别的开放模型,在仅使用许可数据的情况下,仍有能力逼近甚至超越更大规模模型的性能,这对学术研究、低资源语言社区以及有版权合规需求的产业应用都具有参考价值。
局限与不确定性
- 摘要未给出 20 个基准的具体名称、指标分数与比较设定(待核实)。
- “许可数据”的具体定义、来源与许可类型未在摘要中展开(待核实)。
- 训练计算成本、数据混合比例、HRM 架构细节未在摘要中描述(待核实)。
- “与 Qwen 3.5 4B 和 Gemma 4 E2B 竞争”的具体含义和差距幅度尚不明确(待核实)。
- 丹麦语 SOTA 的评价基准和对照版本待核实。
可用于图书/PPT/简报的角度
- “数据合规也能训练出前沿小模型”:以 Mimir v1 为案例,展示许可数据约束下的模型训练。
- “低资源语言的新 SOTA”:丹麦语作为相对低资源语言,如何在小模型上取得突破。
- “小而精”的模型路线:1B 参数与 4B 甚至更大模型的性能比较,对部署成本和效率有启示。
- “开放科学基础设施”:模型权重和代码开源,降低复现门槛。
与既有脉络的关系
已有相关卡片分别涉及 UltraX 的预训练数据精炼、零售机器人后训练框架、地理空间社区划分。本条与它们无直接承接,增量信息在于:它聚焦“仅许可数据”约束下从零训练开放基础模型,而不是针对某一应用的微调或数据分析任务。
原始材料
- 英文标题:DFM Mimir v1: An Open HRM Delivering Frontier Performance at 1B Parameters Using Only Permissible Post-Training Data
- arXiv ID:2608.13517v1
- 作者:Peter Schneider-Kamp, Jacob Nielsen, Gianluca Barmina, Kenneth Enevoldsen, Lukas Galke Poech
- 提交/更新:2026-08-13T17:37:53Z
- 类别:cs.CL, cs.AI
- 摘要链接:https://arxiv.org/abs/2608.13517v1
- PDF 链接:https://arxiv.org/pdf/2608.13517v1
- 模型主页:https://huggingface.co/danish-foundation-models/DFM-Mimir