AI消息速览

CLIFE:面向边缘部署的路边易受伤害道路使用者感知的相机-激光雷达融合框架

事件日期 2026-07-17 · 学术前沿 · 已接受

事件日期2026-07-17
信息日期2026-07-17
入库日期2026-07-21
通道学术前沿
状态已接受
来源arXiv 论文

知识卡片:CLIFE:面向边缘部署的路边易受伤害道路使用者感知的相机-激光雷达融合框架

一句话结论
CLIFE 提出一种在单个边缘设备上运行的无目标在线标定与轻量级晚期融合的相机-激光雷达框架,在 12 个实际交叉口部署验证,实现在 Jetson AGX Thor 上 53.2 FPS 的高吞吐率,为边缘侧实时路边感知提供了可行的基础方案。

事件概述或研究问题

  • 背景:在遮挡、光照变化和恶劣天气下,可靠的路边易受伤害道路使用者(VRU)感知仍具挑战,现有的多传感器融合系统多依赖云端或服务器级基础设施,难以在真实交叉口边缘部署。
  • 目标:设计一种完全在单个嵌入式设备上运行、无需云端卸载的边缘原生相机-激光雷达融合框架,兼顾实时性、低延迟与部署可行性。

方法/产品要点

  • 无目标在线标定:自适应地按需优化相机-激光雷达的对齐,无需专用标定物。
  • 轻量级晚期融合跟踪:多传感器融合与航迹关联采用 O(N log N) 每帧复杂度。
  • 边缘部署:框架完全运行于 Jetson AGX Thor 等边缘设备,不依赖云端计算。
  • 实际验证:在美国查塔努加(Chattanooga)的 12 个信号交叉口部署,并在一个代表性交叉口使用同步相机-激光雷达数据进行昼夜及多种天气条件下的深入评估。
    注:具体融合网络结构、标定算法细节待核实。

主要结果或产业意义

  • 融合架构在多种环境和交通条件下显著提升单个传感器的感知范围和鲁棒性。
  • 晚期融合核心在 Jetson AGX Thor 上达到 53.2 FPS,满足实时交叉口级应用的高吞吐需求。
  • 通过将感知集中在边缘,可降低带宽和标定开销,为下游安全应用提供可部署基础。

为什么重要

  • 增量信息:与已有相关卡片相比,CLIFE 填补了“边缘原生”相机-激光雷达融合在真实多交叉口环境中的部署空白。PRISA(2026-07-17)侧重 LiDAR 轨迹预测与安全评估,CLIFE 则提供相机-激光雷达融合的通用感知基础;4DR360(2026-07-10)面向 4D 雷达-相机全景感知,采用状态推理范式,而 CLIFE 聚焦于传统相机-激光雷达模态的轻量级晚期融合与在线标定,适用于不同传感器配置的实际部署场景。
  • 提供了首个在多个信号交叉口规模化部署的边缘融合感知系统实例,验证了边缘计算替代云端方案的可行性。

局限与不确定性

  • 摘要未提及具体标定精度、融合检测的准确率(如 mAP、召回率)等定量指标,需进一步查阅原文。
  • 仅在一个交叉口进行了深入评估,其他 11 个交叉口的性能表现待核实。
  • 未讨论系统在极端恶劣天气(如大雾、暴雨)下的表现边界。
  • 未说明框架是否支持其他传感器组合(如仅 LiDAR 或仅相机模式)。

可用于图书/PPT/简报的角度

  • 智能交通系统中边缘计算架构的落地案例。
  • 多传感器融合从实验室到真实交叉口部署的工程挑战与解决方案。
  • 无目标在线标定技术降低车联网维护成本的应用价值。

原始材料

  • URL: https://arxiv.org/abs/2607.16154v1
  • Track: academic
  • Topics: foundation-model
  • Manual title: CLIFE: Camera-LiDAR Fusion Framework for Edge-Deployable Roadside VRU Perception
  • English keywords: camera-LiDAR fusion, edge deployment, roadside perception, vulnerable road users, targetless calibration, late fusion