AI消息速览

SovereignPA-Bench:评估用户拥有的个人代理在演化意图、平台中介和同意约束下的表现

事件日期 2026-07-06 · 学术前沿 · 已接受

事件日期2026-07-06
信息日期2026-07-06
入库日期2026-07-07
通道学术前沿
状态已接受
来源arXiv 论文

知识卡片:SovereignPA-Bench:评估用户拥有的个人代理在演化意图、平台中介和同意约束下的表现

英文标题: SovereignPA-Bench: Evaluating User-Owned Personal Agents under Evolving Intent, Platform Mediation, and Consent Constraints

英文关键词: personal agents, user sovereignty, benchmark, evolving intent, platform mediation, consent constraints, privacy, evidence, manipulation

一句话结论

SovereignPA-Bench 是一个用于评估用户拥有的个人代理(Personal Agent)在演化意图、平台中介和同意约束下是否保持“用户主权”的可执行基准,实验表明“完全主权脚手架”策略在主权评分、隐私泄露、同意违反、过度让步和操纵捕获等指标上均优于现有基线。

事件概述或研究问题

个人代理正成为持久的用户拥有的中介:它们记忆偏好、过滤平台中介信息、使用工具并与服务协商。现有基准评估工具使用、网页导航、桌面控制、个性化、推荐和演化上下文,但很少问及代理是否维护用户主权——即推进用户当前利益的同时尊重隐私、同意、证据、用户负担,并且抵抗操纵性激励。本研究引入 SovereignPA-Bench,专门填补这一评估缺口。

方法/产品要点

  • 基准设计:可执行基准,覆盖演化意图、平台中介、隐私边界、同意约束、证据要求和负担权衡。
  • 状态分离:将代理可见的 ObservableState 与仅评估者可见的 HiddenLabels 分离。
  • 组件指标:任务成功、对齐、隐私、同意、证据、操纵、负担和可审计性。
  • 评估规模:120 个主权压力场景,4 个模型家族,8 个政策基线,共 3,840 条冻结提示轨迹。
  • 审计:对 240 个项目进行盲法 3 注释者审计。

主要结果或产业意义

  • 完全主权脚手架(Full-sovereign scaffolding)在主权评分上优于直接、仅记忆、仅同意、仅证据、ReAct/工具使用、安全提示和法官守卫基线。
  • 同时减少了隐私泄露、同意违反、过度让步和操纵捕获。
  • 人工审计显示:隐私和同意上一致性高,操纵上一致性较低,表明平台说服判断存在主观边界。

为什么重要

现有个人代理评估过度关注任务完成,忽视了用户主权(隐私、同意、证据、抵抗操纵等)。SovereignPA-Bench 提供了首个系统性基准,推动评估向“代表性、同意感知、证据依据的行动”转变,对构建可信的自主代理具有关键指导意义。

局限与不确定性

  • 操纵指标的人工审计一致性较低,表明“平台说服”的判断具有主观性,基准在这一维度的定义可能仍需细化。
  • 当前仅涉及 4 个模型家族和 8 个政策基线,模型和场景的泛化性有待验证。
  • 基准的“完全主权”策略在具体实现细节上(如脚手架的具体结构)在摘要中未完全披露,需要阅读原文确认。
  • 基准是否覆盖所有实际部署环境下的平台中介复杂性(例如动态交互、多轮操纵)尚不确定。

可用于图书/PPT/简报的角度

  • 个人代理的“主权”概念:从“帮你完成任务”到“保护你的隐私、同意和抵抗操纵”。
  • 对比现有 Agent 评估(如 ToolBench、WebArena)与主权评估的差异。
  • 可视化:使用雷达图展示不同策略在隐私、同意、证据、操纵等维度上的得分。
  • 未来趋势:如何设计同时具备高任务完成率和高主权保护的个人代理。

原始材料

  • 论文标题:SovereignPA-Bench: Evaluating User-Owned Personal Agents under Evolving Intent, Platform Mediation, and Consent Constraints
  • 作者:Dylan Zongmin Liu
  • 发布时间:2026-07-06
  • 类别:cs.AI
  • arXiv ID:2607.05363v1
  • URL:https://arxiv.org/abs/2607.05363v1
  • PDF:https://arxiv.org/pdf/2607.05363v1