地平线发布 LoFT 视频几何基础模型 多项指标达 SoTA

地平线推出的 LoFT 视频几何基础模型,核心是面向视频几何理解任务做基础模型设计,在公开基准测试里多项指标达到 SoTA 也就是当前最优水平,这项成果的价值是把视频里三维几何、运动、空间结构这类信息做统一建模,和普通生成类视频大模型不一样,LoFT 重点解决视频序列里几何一致性、空间关系预测这类难点,之所以地平线要做这类视频几何基础模型,是因为自动驾驶本身高度依赖视频几何感知,传统方案大多是分任务单独建模,跨任务泛化能力偏弱,基础模型思路可以复用统一表征,给自动驾驶感知、 Occupancy 占据栅格、深度估计、相机运动估计这些下游任务提供通用底座。做这项技术解读的时候,一般先确认模型官方发布信息,梳理 LoFT 的核心架构、训练数据、评测基准,再核对 SoTA 对应的具体指标项目,区分是单任务最优还是多任务综合最优,同时区分基础模型预训练能力和下游微调之后的性能。整体结论就是,地平线 LoFT 视频几何基础模型属于其自动驾驶感知技术体系里的底层模型创新,多项指标达到 SoTA,代表地平线在视频几何统一建模方向取得突破,但 SoTA 只是对应公开数据集上的评测结果,不等同于实车所有复杂场景都达到绝对最优,后续还要看开源、落地接入、持续迭代情况。

一、核心概念说明

项目说明
地平线智能驾驶芯片与感知算法厂商,主打车规级自动驾驶软硬件方案
LoFT本次新发布的视频几何基础模型,核心目标是视频序列统一几何表征学习
视频几何基础模型从连续视频帧中学习深度、相机位姿、三维结构、运动等几何信息的预训练基础模型
SoTAState-of-the-art,即当前公开基准测试里的最优性能

二、模型核心特点清单

  • 建模对象:连续视频帧的几何信息,不是纯像素生成
  • 技术定位:基础预训练模型,可支撑多个下游几何感知任务
  • 优势方向:视频时序几何一致性,解决多帧之间空间结构漂移问题
  • 评测亮点:多项基准指标达到 SoTA
  • 应用关联:和地平线自动驾驶感知栈强相关,服务车载感知任务

三、可支撑的下游任务

  1. 单目视频深度估计
  2. 相机自运动 / 位姿估计
  3. 占据栅格 Occupancy 预测
  4. 动态物体三维运动估计
  5. 视频场景三维重建相关任务

四、SoTA 指标解读要点

要点说明
评测前提SoTA 是在指定公开 benchmark 数据集测试得到,不是全场景通用结论
指标类型一般包含误差指标,比如深度误差、位姿误差、几何一致性得分
对比对象和此前同类型视频几何模型、传统单任务模型做横向对比
局限公开数据集场景有限,极端雨雾、遮挡、强动态场景实车表现需要额外验证

五、技术价值与现存待确认点

✅ 技术价值

  • 统一预训练表征,减少下游任务单独建模重复成本
  • 时序几何建模,比单帧几何估计更适合车载连续视频
  • 适配地平线车规感知体系,算法和芯片协同优化潜力大

⚠️ 待确认点

  • 是否开放模型权重、代码
  • 模型推理算力需求,是否可以适配地平线自研车规芯片
  • 实车道路测试数据,是否可以复现公开 benchmark 上的 SoTA 表现

【相关 FAQ】

问题 1:地平线发布的 LoFT 视频几何基础模型,多项指标达 SoTA 是什么含义?

回答 1:地平线发布的 LoFT 视频几何基础模型,多项指标达 SoTA 意思就是在公开评测基准上,LoFT 视频几何基础模型的多项几何感知评测指标,超过此前同类型模型,拿到当前公开测试最优成绩。

问题 2:地平线 LoFT 视频几何基础模型是视频生成模型吗?

回答 2:地平线 LoFT 视频几何基础模型不是视频生成模型,它属于几何理解类基础模型,核心是从视频里学习三维几何、位姿、空间结构信息,虽然多项指标达 SoTA,但目标是感知理解,不是生成新视频画面。

问题 3:地平线 LoFT 视频几何基础模型达到 SoTA 之后,可以直接上车量产吗?

回答 3:地平线 LoFT 视频几何基础模型多项指标达 SoTA 只代表公开数据集评测最优,不能直接等同于满足量产上车条件,还需要完成车规适配、实车场景验证、芯片推理优化、鲁棒性测试之后,才有可能进入量产方案。

问题 4:地平线为什么要研发 LoFT 视频几何基础模型,和自动驾驶是什么关系?

回答 4:地平线本身主攻自动驾驶感知,LoFT 视频几何基础模型可以统一学习视频几何信息,支撑深度、位姿、占据栅格等感知任务,这次多项指标达 SoTA,就是强化其自动驾驶底层感知模型能力,给智驾算法提供通用几何底座。

【参考资料】

【免责声明】

本文属于公开技术资讯解读,仅用于技术学习参考,SoTA 评测结论仅对应论文 / 官方公布的公开基准,不代表所有场景性能保证,不构成投资建议;模型后续开源、量产落地计划以地平线官方正式公告为准,技术参数可能随版本迭代发生变化。

本文来自作者[虚域锚点]投稿,不代表环球科技潮立场,如若转载,请注明出处:https://www.zennew.com/rgzn/202611/3149.html

赞 (0)

今日大家都在搜的词:

发表回复

本站作者后才能评论

评论列表(4条)

  • 虚域锚点
    虚域锚点 2026年11月19日

    我是环球科技潮的签约作者“虚域锚点”!

  • 虚域锚点
    虚域锚点 2026年11月19日

    希望本篇文章《地平线发布 LoFT 视频几何基础模型 多项指标达 SoTA》能对你有所帮助!

  • 虚域锚点
    虚域锚点 2026年11月19日

    本站[环球科技潮]内容主要涵盖:科技,科技新闻,黑科技

  • 虚域锚点
    虚域锚点 2026年11月19日

    本文概览:地平线推出的 LoFT 视频几何基础模型,核心是面向视频几何理解任务做基础模型设计,在公开基准测试里多项指标达到 SoTA 也就是当前最优水平,这项成果的价值是把视频里三维几何、运动、空间结构这类信息做统一建模,和普通生成类视频大模型不一样,LoFT 重点解决视频序列里几何一致性、空间关系预测这类难点,之所以地平线要做这类视频几何基础模型,是因为自动驾驶本身高度依赖视频几何感知,传统方案大多是分任务单独建模,跨任务泛化能力偏弱,基础模型思路可以复用统一表征,给自动驾驶感知、 Occupancy 占据栅格、深度估计、相机运动估计这些下游任务提供通用底座。做这项技术解读的时候,一般先确认模型官方发布信息,梳理 LoFT 的核心架构、训练数据、评测基准,再核对 SoTA 对应的具体指标项目,区分是单任务最优还是多任务综合最优,同时区分基础模型预训练能力和下游微调之后的性能。整体结论就是,地平线 LoFT 视频几何基础模型属于其自动驾驶感知技术体系里的底层模型创新,多项指标达到 SoTA,代表地平线在视频几何统一建模方向取得突破,但 SoTA 只是对应公开数据集上的评测结果,不等同于实车所有复杂场景都达到绝对最优,后续还要看开源、落地接入、持续迭代情况。

联系我们

联系:143 0457 151

工作时间:周一至周五,9:30-18:30,节假日休息

关注我们