新型3D传感器实现亚毫米精度可同时探测镜面与墙面

让机器人识别一面普通的墙壁，对现有的3D传感技术而言并非难事。然而，一旦面对镜子、玻璃或高光金属等强反射表面，绝大多数先进的3D传感器便会瞬间“失明”，无法生成准确的深度信息。

问题的根源在于物体表面的反射特性。墙面等漫反射表面会将光线均匀散射至各个方向；而镜面或抛光金属等镜面反射表面，则像台球一样严格遵循反射定律。传统的3D传感技术，如结构光或ToF，其算法模型通常基于理想的漫反射假设设计，因此在镜面与漫反射混杂的复杂场景中，往往顾此失彼，导致深度图出现大片空洞或严重失真。

如今，这一困扰光学测量领域多年的经典难题取得了关键性突破。来自美国亚利桑那大学、莱斯大学和西北大学的联合科研团队，成功研发了一种全新的3D传感器方案。其核心创新在于摒弃了昂贵笨重的外部显示屏，转而将整个测量环境本身转化为一个“虚拟屏幕”。该系统巧妙结合事件相机与扫描激光，能在短短70毫秒内，同步完成对漫反射与镜面反射物体的高精度三维重建，精度达到亚毫米级别。

图丨相关论文（来源：Nature Communications）

这项3D传感技术的重大意义在于，它无需预先标定物体材质，也无需依赖额外的专用设备，仅利用环境中的现有物体，即可实现对复杂混合反射场景的快速3D建模。其应用前景极为广阔：无论是自动驾驶汽车需要感知的复杂街景（包含车窗、车漆与路面），医疗手术机器人面对的反光器械与湿润人体组织，还是工业质检中涵盖玻璃、塑料、金属等多种材件的成品检测，它都能提供可靠的解决方案。未来，该技术甚至有望拓展至微观血管成像与宏观建筑数字化测绘等更广泛的领域。这项突破性研究成果已发表于顶级期刊《自然·通讯》。

当镜子遇见墙面：一个经典的3D传感难题

人类视觉系统能够毫不费力地同时解析镜子中的影像与其背后的墙面，实时构建出精确的动态三维场景。但对于机器的“眼睛”——3D传感器而言，这却是一个长期存在的技术瓶颈。

目前主流的高精度3D传感器，其底层算法大多建立在理想漫反射模型之上。当光线照射到镜面等高反射物体时，要么因信号被直接反射而丢失，要么因产生多重反射引入巨大噪声，最终导致生成的深度图出现大块缺失或严重畸变。用户可以轻易验证：用常见的消费级深度摄像头对准一面镜子，屏幕显示的多半是漆黑一片或扭曲失真的数据。

（来源：Nature Communications）

然而，现实应用的需求迫在眉睫。在精密外科手术中，机器人需要同时清晰“看见”反光的金属手术器械和具有漫反射特性的人体组织；在智能制造产线上，视觉检测系统必须能处理高光汽车漆面与哑光橡胶、塑料零部件。传统的妥协方案往往成本高昂，例如为整车漆面检测搭建布满可控光源的巨型隧道，不仅造价昂贵，也极大地限制了应用的灵活性。

化环境为屏幕：一种巧妙的3D重建思路

研究团队的灵感来源于光学测量中的经典技术——偏折测量法。该方法通常用于测量镜面形状，原理是观察已知图案的屏幕在待测反射面上产生的畸变。但其固有局限在于，测量复杂曲面需要尺寸巨大、能覆盖所有反射方向的物理屏幕。

这项新研究的核心突破，正是跳出了“必须依赖物理屏幕”的传统思维框架。团队提出了一个革命性的构想：直接利用场景中已有的漫反射物体，将它们作为天然的“虚拟屏幕”。

为实现这一目标，系统集成了两种关键设备：一台神经形态事件相机和一个双轴扫描激光投影仪。事件相机的工作原理模仿生物视网膜，它不逐帧捕获完整图像，而是异步记录每个像素点的亮度变化事件，因而具备极高的时间分辨率与动态范围，特别擅长捕捉快速运动。

（来源：Nature Communications）

具体的工作流程分为两个阶段：首先，扫描激光快速扫过整个场景。当激光照射到墙面、纸板等漫反射表面时，光线发生散射，事件相机同步捕捉这些亮度变化事件。通过三角测量原理，系统首先重建出这些漫反射部分的三维形状。

随后，进入精妙的第二阶段。系统将这些已重建的漫反射表面识别为已知的“虚拟屏幕”。当激光打在镜面物体上时，光线会先射向虚拟屏幕的某一点，再反射回事件相机。这条“激光→镜面→虚拟屏幕→相机”的间接光路，在几何上与激光直接照射漫反射表面产生的直接光路是可区分的。

正如论文第一作者、莱斯大学博士生Aniket Dashpute所阐释的：“我们先用激光扫描仪捕获场景中的所有物体，包括镜面、光泽和哑光表面。随后，算法将漫反射部分与镜面反射部分分离开来。最终，所有测量到的漫反射场景都成为了虚拟屏幕，用于对镜面部分进行偏折测量。”通过解析间接反射光路的几何关系，可以求解出镜面表面的法向量，进而通过优化算法恢复出完整的高精度深度图。

亚毫米精度与高帧率的性能验证

图丨实验室中的原型机（来源：Nature Communications）

该方法的显著优势在于其强大的环境适应性与硬件简约性。任何漫反射表面，即便是一块普通纸板、一面白墙，甚至是一个雕塑的背面，都能即刻转化为测量光源，无需任何额外硬件改造。

在实验验证中，原型系统的表现卓越。对于纯漫反射的白色平板，系统仅需4毫秒即可完成一次扫描（相当于250帧/秒），重建误差约为210微米。

面对更为复杂的混合反射场景——例如包含漫反射大卫雕像石膏模型、镜面气球和金属锁扣的组合——系统在70毫秒（约14帧/秒）的扫描时间内，依然能够清晰、同步地重建所有物体的三维形态。在动态测试中，气球的旋转和纸巾被快速抽离的动作均被准确捕捉。

定量精度测试表明，对于漫反射球体，重建精度约为310微米；对于镜面球体，精度约为450微米。这一性能显著优于同类技术：一些基于事件相机的现有方法在类似条件下的深度误差可能高达6毫米。而像英特尔RealSense或微软Kinect v2这类商用深度传感器，在面对镜面时，通常表现为大面积的深度数据缺失或严重错误。

总体而言，这项研究为混合反射场景的3D视觉感知开辟了一条新颖且高效的路径。其核心智慧在于利用了不同反射特性之间的互补关系：粗糙的漫反射表面充当了光滑镜面物体的天然“参照系”。同时，事件相机卓越的高速与高动态范围性能，有效弥补了激光扫描在空间采样上可能存在的稀疏性。这种软硬件协同创新的思路，为攻克现实世界中诸多复杂的机器视觉难题提供了关键启示。

参考资料：
1.Dashpute, A., Wang, J., Taylor, J. et al. Accurate and fast event-based shape measurement of mixed reflectance scenes. Nat Commun 17, 4407 (2026). https://doi.org/10.1038/s41467-026-72254-6
2.https://techxplore.com/news/2026-05-virtual-screen-machines-3d.html