知识卡片:JEPA-Anything:跨七类系统验证的隐空间世界模型框架
一句话结论:量子位报道,PhAI Labs 联合牛津、斯坦福、普林斯顿、港中文等团队发布 JEPA-Anything,尝试用共享预测核心和 OPF(Orthogonal Predictive Factorization,正交预测分解)在视觉、生物、临床、控制、分子、物理场、天气七类系统中学习隐空间世界模型,并用肝癌干预候选与行星轨道规律对账展示“内部结构可被科学分析”;但材料明确,这验证的是共同预测原则的跨领域适用性,而非已实现统一所有领域的世界模型。
事件概述或研究问题:
报道提出,天气、分子、细胞、病人、机器人乃至行星各自遵循不同规律,AI 在理解它们“如何变化”时,是否可能共享一套更底层的方法。JEPA-Anything 试图回答这一问题。它被描述为一个面向不同“世界”学习预测模型的跨领域框架。标准 JEPA 通常让信息全部汇入同一个 target embedding,走同一条预测路径;但现实变化往往多尺度、多通路同步发生,容易导致预测容量分配不均。JEPA-Anything 由此引入 OPF 机制,将目标状态拆分为多个互补子空间,由不同预测分支独立处理,再拼回完整世界状态。
方法/产品要点:
- 每个领域保留自己的观测形式、context-target 构造和编码器,但共享后面的预测核心,以及一套统一的 latent world-state interface。
- OPF 将原本完整的目标状态切割为多个彼此互补的子空间,交由不同预测分支独立处理,最终再拼回完整世界状态。
- OPF 引入正交约束,让不同 factor 尽量占据互不重叠的预测方向;同时通过因子活性约束和编码器方差约束,避免部分 factor 失活,并降低表示坍缩风险。
- factor 没有被预先规定“负责速度”“负责温度”“负责某条生物通路”等,它们学什么由数据中的可预测结构决定。训练完成后,这些 factor 留下可供后续分析的内部接口。
- 实验覆盖七类系统:视觉、生物、临床、控制、分子、物理场和天气。
- 受控实验使用 CITRIS Interventional Pong;真实系统验证使用 Matched Dynamics Benchmark,并在十项任务中确保标准 JEPA 与 JEPA-Anything 使用相同训练数据、编码器、状态转移骨干网络、计算预算及评估切分。
- 多步 rollout 中,每一次预测继续作为下一次预测输入;分子系统测试液态水、α-石英、对乙酰氨基酚和苯四种体系,持续预测未来原子位置和速度。
主要结果或产业意义:
- 在 CITRIS Interventional Pong 中,分布内单项干预下,JEPA-Anything 相较标准 JEPA 降低约 11.7% 的预测误差;未见过的多因子组合干预中,MSE 下降约 3.5%,且在五组配对训练 seed 中全部改善。
- Matched Dynamics Benchmark 十项任务中,九项预测任务的性能指标有所提升。例如 PDEBench 的 Burgers 方程 MSE 下降 39.7%;浅水方程下降 39.3%;WeatherBench 2 下降 10.5%。
- 分子系统中,无论一步预测的 MAE,还是 100 步自由 rollout 后的最终位置 RMSD,JEPA-Anything 在四种分子系统中都拿到最低误差。
- 连续控制测试并非全面占优:Walker2d 和 HalfCheetah 上,JEPA-Anything 平均得分高于标准 JEPA;但 Hopper 上标准 JEPA 表现更好。
- 额外 Burgers 测试中,预测长度从 20 步增加到 50 步时,JEPA-Anything 仍领先,但优势已明显缩小。
- 肝癌案例中,研究者从模型内部正交因子坐标筛出候选组合:IL-18 联合 NT5E/CD73 阻断。该组合被推进到 Huh7-PBMC 共培养体系、患者来源肝细胞癌类器官、肿瘤组织碎片,并加入免疫健全小鼠验证。材料称,在 3 份患者类器官与 3 份肿瘤组织碎片中,IL-18 与 CD73 阻断剂组合均展现出最强肿瘤细胞杀伤力,并伴随显著增强的免疫细胞激活。
- 行星轨道案例中,研究者只向模型输入模拟的行星位置与速度轨迹,不告诉它开普勒定律;训练后对隐模式进行频谱分析,将提取频率与轨道半长轴配对。结果显示拟合斜率为 -1.4991,开普勒第三定律理论值为 -1.5,R²=0.99999999。
- 产业意义主要在 AI for Science 方向:材料将 JEPA-Anything 定位为 PhAI Labs 科学发现大模型(Discovery Foundation Models, DFM)结构中的世界模型层,试图把科学 trajectory 和真实世界变化中可预测的部分压缩成可快速调用的预测能力,在耗时更长、成本更高的真实实验之前提供近似判断。具体商业化、部署效果和成本收益待核实。
为什么重要:
它把“世界模型”从单一领域的预测任务,推进到跨领域预测原则的实验验证;更重要的是,模型内部 Latent Factor 和 Latent Modes 不再只服务预测数字,还可以被研究者拿出来分析,并接受湿实验或已知物理规律检验。报道将其概括为“模型内部结构→领域分析→候选干预→实验验证”的链条。
与既有相关卡片的关系:已有卡片分别覆盖 AI 治理框架、AI 研究趋势出版物页面、LLM 网关/路由平台归档;本卡增量在于记录一个具体的前沿世界模型研究,它把跨领域预测原则、隐空间内部因子分析和科学实验验证放在同一条叙事中,而非治理清单或基础设施产品动态。
局限与不确定性:
- 材料称其为“技术报告”/“论文”,但同行评审状态、完整作者名单与机构贡献待核实。
- 结果依赖特定基准和实现,跨领域泛化仍有限;材料明确表示并未呈现“单一机制全面碾压”的理想化曲线。
- 连续控制存在反例;长程预测误差仍会累积,Burgers 长步预测优势缩小。
- 肝癌干预候选的临床转化潜力、动物实验细节、样本量、统计显著性和安全性待核实。
- 行星轨道案例基于模拟数据与已知规律对账,不代表真实天文发现能力。
- GitHub、Hugging Face 资源可用性、许可证、复现状态待核实。
- 算力需求、训练成本、产业落地效果待核实。
- 材料本身也强调,这距离“AI 理解万物”还有相当距离,验证的是“共同预测原则存在跨领域适用性”,而非“已经实现一个统一所有领域的世界模型”。
可用于图书/PPT/简报的角度:
- “同一个预测核心,跨七类系统”:世界模型能否共享底层演化逻辑。
- “从黑盒预测到可分析内部接口”:Latent Factor / Latent Modes 作为科学假设生成器。
- “癌细胞与行星轨道”的反差案例:跨领域 AI 科学发现如何被验证。
- OPF 正交预测分解:用多分支、正交约束和因子活性约束解决预测容量分配问题。
- 谨慎叙事:跨领域适用性 ≠ 通用世界模型,反例和长程误差同样值得展示。
- 与 DFM 的关系:世界模型层在科学发现流程中承担实验前近似判断和假设筛选。
原始材料:
- 原始报道:量子位《AI离“理解万物”还有多远?先拿癌细胞和行星轨道试试水》,2026-09-19,作者/来源:梦瑶,衡宇 发自凹非寺,量子位 | 公众号 QbitAI。URL:https://www.qbitai.com/2026/09/492429.html
- 技术报告:https://arxiv.org/abs/2609.20800 (英文标题、作者名单、同行评审状态待核实)
- GitHub:https://github.com/Gen-Verse/JEPA-Anything
- Hugging Face:https://huggingface.co/collections/Gen-Verse/jepa-anything
- 英文名称/项目名:JEPA-Anything;英文标题待核实。
- 英文关键词:JEPA-Anything; OPF (Orthogonal Predictive Factorization); Latent World Model; JEPA (Joint-Embedding Predictive Architecture); Discovery Foundation Models (DFM); Latent Factor; Latent Modes; Matched Dynamics Benchmark; CITRIS Interventional Pong; WeatherBench 2; PDEBench; Burgers equation; shallow water equations; DreamerV3; V-JEPA 2。
发现内容有误?
免登录提交,管理员审核并完成修正后才会公开修订说明。
相关主题
对应的教材知识点
教材知识点匹配尚未完成。