面包屑图标 当前位置: 首页
AI资讯
热点详情

蚂蚁灵波科技发布新一代深度补全模型LingBot-Depth 2.0

AI热点日报
AI热点日报时间:2026-07-08
热点解读

蚂蚁灵波科技推出LingBot-Depth2 0深度补全模型,训练数据从300万扩充至1 5亿张,在16项基准测试中获12项第一。该模型采用基座模型加任务头协同架构,显著提升玻璃、镜面等透明物体感知能力,室内深度缺失场景RMSE误差从0 132降至0 062,已通过奥比中光认证。

LingBot-Depth 2.0是什么

在真实场景深度感知这个领域,蚂蚁灵波科技最近放了一个大招——LingBot-Depth 2.0。简单来说,这是一个专门为处理“现实世界复杂场景”而生的深度补全模型,同时还开源了底层的视觉基座模型LingBot-Vision。相比上一代,训练数据直接从300万张扩充到了1.5亿张,翻了50倍。效果如何?在16项深度补全基准测评中,它拿下了12项第一。一个很直观的例子是:室内大面积深度缺失的场景,RMSE误差从0.132降到了0.062,直接减半。尤其值得一提的是,在玻璃、镜面这类传统深度相机“抓瞎”的透明物体场景中,这个模型表现得相当抢眼。它已经通过了奥比中光的专业认证,核心逻辑就是把机器人的感知能力从“看懂”世界升级到“看准”世界。

LingBot-Depth 2.0的主要功能

  • 深度补全:输入一张RGB图像和稀疏的深度点,它能生成一张高精度的稠密深度图。
  • 透明物体感知:玻璃、镜面、水龙头这些让传统传感器头疼的东西,它能完整重建三维结构。
  • 边缘精细识别:具备亚像素级的边界定位能力,物体轮廓和细小结构都能精准拿捏。
  • 时序稳定性:处理视频流时,深度估计在帧与帧之间保持高度一致,不会出现“跳变”现象。
  • 跨场景泛化:室内、室外、复杂光照、各种材质,真实场景基本全覆盖。

LingBot-Depth 2.0的技术原理

  • 双模型协同架构:LingBot-Depth 2.0并非一个单一的神经网络,而是采用了“基座模型+任务头”的两级协同架构。底层的LingBot-Vision负责从RGB图像中提取边界和空间结构特征,上层的LingBot-Depth则基于这些特征,完成从稀疏或噪声深度到稠密深度图的补全映射。这种解耦设计的精妙之处在于,视觉表征和深度估计各司其职,专注于自己最擅长的环节,从而构建起从“看懂”到“看准”的完整能力链路。
  • LingBot-Vision:边界结构预训练:LingBot-Vision是业内首个将“边界结构”作为显式预训练目标的视觉基础模型。它采用几何建模方式,专门学习“物体在哪里、边缘如何分布、空间如何组织”这类结构性知识,结果就是模型具备了亚像素级的边界定位能力。一个很有意思的对比是,它只用了1.6亿张图像进行预训练,但在物体轮廓、表面交界以及细小结构的识别清晰度和稳定性上,反而优于那些依赖十亿级数据的通用视觉基础模型。
  • 深度补全机制:LingBot-Depth 2.0的深度补全网络,基于LingBot-Vision提供的边界感知特征来运作。编码器负责识别深度不连续的区域,解码器则进行多尺度特征融合,在保持物体边缘锐利的同时,对平滑区域进行合理插值。关键点在于,模型利用显式的边界结构特征作为深度传播的约束条件,有效防止了传统深度补全中常见的“深度溢出”问题——前景和背景能在物体边界处实现正确截断。此外,它还引入了时序特征对齐机制,保障视频流输入下的帧间深度一致性。

如何使用LingBot-Depth 2.0

  • 获取模型:从HuggingFace或ModelScope下载LingBot-Vision的开源权重。
  • 克隆代码:通过GitHub仓库 https://github.com/robbyant/lingbot-vision 获取代码和技术报告。
  • 环境配置:按照文档配置好依赖环境,准备好RGB-D输入数据。
  • 调用推理:加载模型进行深度补全推理,或者基于LingBot-Vision训练你自己的下游视觉任务。
  • 端侧集成:如果要用在硬件上,可以直接搭配奥比中光的Gemini 330系列相机,通过SDK接入LingBot-Depth的商业版能力。

LingBot-Depth 2.0的核心优势

  • 数据规模领先:训练数据达1.5亿,较上一代扩充50倍,覆盖的真实场景更丰富、更全面。
  • 测评成绩优异:在16项深度补全基准测评中,斩获12项第一,实力摆在那里。
  • 误差显著降低:室内大面积深度缺失场景,RMSE误差较上一代直接减半。
  • 透明场景突破:在玻璃、镜面这类传统深度相机“失灵”的场景中,表现尤为突出。
  • 硬件认证加持:通过了奥比中光深度视觉实验室的专业认证,边缘清晰度和鲁棒性都得到了显著提升。

LingBot-Depth 2.0的项目地址

LingBot-Depth 2.0的同类竞品对比

对比维度LingBot-Depth 2.0Depth Anything V2
技术路线基于边界结构预训练的视觉基座模型 + 深度补全基于DINOv2的判别模型 + 合成数据与伪标签训练
数据规模1.5亿真实场景训练数据59.5万合成图像 + 6200万伪标注真实图像
核心优势透明/反光物体、边缘精细识别、机器人场景优化单目深度估计、多尺度模型、推理速度快
开源情况LingBot-Vision四版本(ViT-G/L/B/S)已开源四版本开源(Small为Apache 2.0,其余CC-BY-NC-4.0)
产业落地与奥比中光深度合作,推出SDK及一体化相机学术研究与通用场景为主

LingBot-Depth 2.0的应用场景

  • 家庭服务机器人:在厨房、卫生间这种到处是玻璃、镜子、水龙头的地方,实现精准的导航和操作。
  • 工业质检:对透明包装、反光金属件进行三维尺寸测量和缺陷检测,传统视觉很难搞定。
  • 仓储物流:在复杂光照的仓库里,能准确识别货物边缘和细小物体,辅助机械臂进行抓取。
  • 自动驾驶:补全道路场景的深度信息,特别是提升对玻璃幕墙这类透明障碍物的感知能力。
  • 数采设备:集成在奥比中光EGO等RGB-D采集设备中,为具身智能训练提供精准的真实世界数据。
热点追踪提示词
你是一名 AI 行业编辑,请围绕下面这条热点输出一份资讯解读:
热点:蚂蚁灵波科技发布新一代深度补全模型LingBot-Depth 2.0要求:
1. 先用一句话解释这条热点在讲什么
2. 再总结它为什么重要
3. 说明会影响哪些 AI 产品或内容方向
4. 最后给出 3 个适合资讯站使用的标题
来源:https://ai-bot.cn/lingbot-depth-2-0/
机器人

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关热点
AI热点2026-07-08 20:13
Craftman AI聊天机器人构建工具

最近留意到一款AI聊天机器人构建工具——Craftman,它的核心思路很有意思:让企业或个人能用自己已有的数据来训练ChatGPT,然后直接嵌入到网站上做智能客服或问答助手。简单来说,就是把通用大模型变成你的专属知识库响应系统。什么是Craftman?Craftman是一个AI聊天机器人构建平台,允

AI热点2026-07-08 20:13
Vidu长视频AI大模型一键生成16秒1080P高清视频

如果告诉你,现在借助AI技术就能一键生成时长16秒、分辨率达1080P的高清视频,并且画面流畅自然、物理规律真实可信,你是不是觉得有些不可思议?事实上,这就是Vidu——由中国生数科技与清华大学联合打造的全球首个长时长、高一致性、高动态性视频大模型。它采用独创的Diffusion与Transform

AI热点2026-07-08 20:13
Hansei通过AI聊天帮助用户高效便捷简化知识库访问流程

想象一下,你拥有一个庞大而复杂的知识库,里面堆满了各类文档、PDF文件以及YouTube视频教程。过去想要查找某份资料,往往需要翻遍目录、反复尝试关键词搜索,效率低下令人困扰。如今,借助Hansei这款知识库管理工具,一切变得轻松高效——你只需像与朋友聊天一样,用自然语言提出需求,AI助手就能从你的

AI热点2026-07-08 20:13
Blinkn ChatGPT智能购物助手

Blinkn是基于ChatGPT的智能电商购物助手,具备语义理解、精准产品推荐与比较、多语言支持等功能,可与主流平台无缝集成并个性化定制,提供7×24小时实时客服,高效解决购物疑问,显著减少决策摩擦,提升转化率与用户体验。

延伸阅读