AI消息速览

同一任务,多种接口——简单的跨接口一致性训练提升 LLM 智能体鲁棒性

事件日期 2026-10-14 · 学术前沿 · 已接受

事件日期2026-10-14
信息日期2026-10-14
入库日期2026-10-15
通道学术前沿
状态已接受
来源arXiv 论文

知识卡片:同一任务,多种接口——简单的跨接口一致性训练提升 LLM 智能体鲁棒性

一句话结论

LLM 智能体的能力在 post-training 后会被“绑定”到训练时使用的接口上;语义不变但形式变化的接口扰动会显著降低其表现,而 Cross-Interface Policy Regularization(CIPR)通过约束两种接口下动作分布的一致性来提升鲁棒性。

事件概述或研究问题

论文研究的问题是:post-training 会让 LLM 智能体的胜任力依赖于它被训练时所使用的接口。对接口进行保持语义的扰动(例如重命名一个动作或改变记号)并不会改变底层任务,却会让智能体在该任务上表现变差。由于每个样本被独立评分,接口随机化只是把这种依赖从单一接口扩展到训练时的接口分布,因此分布外(out-of-distribution)的扰动仍会导致智能体性能下降。

方法/产品要点

  • 提出 Cross-Interface Policy Regularization(CIPR),一种自监督目标。
  • CIPR 将动作名称替换为无信息标识符(uninformative identifiers)。
  • 它将每个训练样本以两种接口呈现,在这两种接口中,等价动作通过构造被识别为对应关系。
  • CIPR 惩罚两种接口下所诱导出的动作分布之间的 KL 散度,从而使策略在不同接口间保持一致行为。
  • 在监督学习和强化学习两种 post-training 设置中都对 CIPR 进行了评估。

主要结果或产业意义

  • 在 agentic function calling 上,留出的接口扰动使 post-trained 智能体的准确率下降近 25%。
  • CIPR 恢复了 10.5% 的准确率,同时保持在未改变接口上的准确率不受影响。
  • CIPR 在监督和强化学习两种 post-training 中均提升了鲁棒性。

为什么重要

  • 说明 LLM 智能体的能力可能过度依赖特定接口形式,而非任务语义本身,这是部署中的一个实际脆弱点。
  • 提供了一种相对简单的自监督训练目标,可在不牺牲原有接口表现的前提下提升跨接口鲁棒性。
  • 与“跨任务技能迁移在 LLM 智能体中的可靠性”等既有脉络相关:两者都关注智能体能力是否能脱离特定训练形式而稳定泛化;本条关注的是同一任务下接口形式变化带来的鲁棒性问题。

局限与不确定性

  • 摘要未说明 CIPR 在更多任务类型、更多接口扰动形式上的泛化表现,待核实。
  • 摘要未给出 KL 散度约束的具体权重、训练成本或实现细节,待核实。
  • 除 agentic function calling 外其他场景的收益幅度待核实。
  • 论文发表信息(arXiv 2610.20576v1,2026-10-14)中的具体实验设置与消融结果待核实。

可用于图书/PPT/简报的角度

  • 作为“智能体鲁棒性”案例:语义不变、接口变化即可造成近 25% 准确率下降。
  • 作为“post-training 副作用”案例:训练会把能力绑定到特定接口分布。
  • 作为“自监督一致性正则”方法示例:用两个接口视图 + KL 约束提升泛化。
  • 可与技能迁移、接口抽象、工具调用稳定性等主题并列讨论。

原始材料

  • Title: One Task, Many Interfaces: Simple Cross-Interface Consistency Training Improves LLM Agent Robustness
  • arXiv ID: 2610.20576v1
  • Authors: Artin Tajdini, Manpreet Kaur, Peng Qi
  • Published: 2026-10-14T17:56:06Z
  • Primary category: cs.LG
  • Categories: cs.LG, cs.AI, cs.CL
  • Abstract URL: https://arxiv.org/abs/2610.20576v1
  • PDF URL: https://arxiv.org/pdf/2610.20576v1

发现内容有误?

免登录提交,管理员审核并完成修正后才会公开修订说明。

值得关注

说明 LLM 智能体的能力可能过度依赖特定接口形式,而非任务语义本身,这是部署中的一个实际脆弱点。 提供了一种相对简单的自监督训练目标,可在不牺牲原有接口表现的前提下提升跨接口鲁棒性。 与“跨任务技能迁移在 LLM 智能体中的可靠性”等既有脉络相关:两者都关注智能体能力是否能脱离特定训练形式而稳定泛化;本条关注的是同一任务下接口形式变化带来的鲁棒性问题。

相关主题

对应的教材知识点

根据卡片内容自动匹配,点击查看已审核的教材讲解: