知识卡片：OmniRay：基于复合光线场的相机无关单目3D重建

一句话结论

OmniRay 是一种前馈单目3D重建模型，通过将相机几何建模为“复合光线场”（单调径向基 + 球谐残差 + 自由形式残差），在推理时无需相机参数即可从单张图像恢复3D点云，并在多种相机配置下达到相机无关单目重建的新的最优水平。

事件概述或研究问题

多数单目3D重建模型默认针孔相机假设，面对鱼眼、全景等广角镜头图像时会产生畸变几何。相机感知模型改为预测逐像素光线场以摆脱该假设，但通常用单一固定基同时表达整体相机投影与细节变化。论文提出：相机几何在光线表示上具有“复杂度层级”，应分层建模。OmniRay 即针对这一问题提出的前馈模型。

方法/产品要点

• Ray Module 三组件：
  1. 单调径向基（monotone radial base）：捕捉径向对称结构；
  2. 球谐残差（spherical-harmonic residual）：建模对径向基的平滑偏离；
  3. 自由形式残差（free-form residual）：吸收剩余局部变化。
• 组合方式：三个组件以球面上的连续旋转（successive rotations on the sphere）方式复合，从而适配多样相机几何。
• 输出：给定单张图像，逐像素预测光线方向与 up-to-scale 径向距离，进而恢复3D点云。
• 推理条件：推理时不需要任何相机信息（camera-agnostic）。

主要结果或产业意义

• 论文称在多种相机配置上的大量实验表明，OmniRay 在相机无关单目3D重建任务上建立了新的 state-of-the-art。
• 具体数值指标、对比基线名称与数据集细节：待核实（摘要未给出）。

为什么重要

• 把“相机几何”从单一固定基的隐式拟合，拆解为“径向对称 + 平滑偏离 + 局部残差”的层级表示，为广角/鱼眼/全景等非针孔成像的单目重建提供了结构性归纳偏置。
• 推理阶段免相机参数，意味着可直接用于相机型号未知或元数据缺失的消费级广角影像。
• 与既有卡片的关系：DermDepth 聚焦皮肤科领域并强调度量尺度，MAGiSt3R 面向单目视频的多智能体前馈重建，GenIA 侧重测试时对齐生成先验；OmniRay 的增量在于“相机无关 + 复合光线场表示”这一几何表示层面的贡献，而非领域适配或视频/生成先验路线。

局限与不确定性

• 输出为 up-to-scale 径向距离，即点云为尺度不确定的重建，非度量尺度；摘要未提及绝对尺度恢复能力。
• 摘要仅称“extensive experiments”，未列出数据集、评价指标、与相机感知模型的定量对比，具体性能边界待核实。
• 对极端畸变、滚动快门、非中心投影等特殊成像的适用性：待核实。
• 代码/模型权重是否公开：待核实。

可用于图书/PPT/简报的角度

• “相机几何的复杂度层级”作为一种表示设计原则：从单一基到分层复合基的演进逻辑。
• 单目3D重建的相机假设演进线：针孔假设 → 相机感知逐像素光线场 → 相机无关复合光线场。
• 球面旋转复合作为多几何统一表示的工程手法。
• 广角/鱼眼影像在消费级设备普及背景下，相机无关重建的实际需求场景。

原始材料

• Title: OmniRay: Camera-Agnostic Monocular 3D Reconstruction with Composite Ray Fields
• Authors: Namitha Guruprasad, Abhay Yadav, Cheng Peng, Rama Chellappa, Anand Bhattad
• arXiv ID: 2610.31645v1（Primary category: cs.CV）
• Published/Updated: 2026-10-22T17:55:30Z
• Abstract URL: https://arxiv.org/abs/2610.31645v1
• PDF URL: https://arxiv.org/pdf/2610.31645v1
• Keywords: camera-agnostic monocular 3D reconstruction; composite ray fields; monotone radial base; spherical-harmonic residual; free-form residual; per-pixel ray field