ZED相机——SDK 3.7引进下一代立体深度感知技术

信息来源:www.cnbytec.com | 发布日期:2022-5-30 | 点击数:1313次
  

Stereolabs是专业的基于立体视觉的双目3D深度相机供应商,2022年5月24日宣布发布ZED 2i最新的SDK,其中包含Stereolabs基于神经网络的新型深度感知软件模块,用于高级机器人和空间分析应用。

颠覆性的神经深度映射

新的神经深度模式可生成高达 2k 分辨率的密集、高保真深度图。该深度能够准确地捕捉具有挑战性的环境,如反射表面和无纹理区域它还提供高深度完整性和前所未有的边缘精度,以实现高级空间分割。

Stereolabs最新的深度相机ZED 2i相结合,新的神经模式可在室内室外工作,范围可达40米,视野为120度,使其成为市场上最先进的深度相机之一

 

新的神经深度模式依赖于将高级计算机视觉与专门在立体图像上训练的自定义 CNN(卷积神经网络)相结合,以改善提取、匹配和成本聚合。这种组合可生成超精确的深度图,同时保持实时工作流程。

Stereolabs首席执行官Cecile Schmollgruber表示:“构建经济实惠的工业级3D感知解决方案,可以大规模部署下一代机器人和智能分析。“我们基于相机的解决方案已经以合适的价格点达到了所需的可靠性和成熟度,可以为任何机器添加3D视觉。

ZED SDK 提升到新的水平

由于深度图是每个 ZED SDK 模块的核心,因此用户可以从整体卓越的性能中受益,通过改进的深度感应、跟踪(也称为视觉测距、映射对象检测骨架跟踪)都使用深度,并从神经深度模式提供的改进中受益。 

启用新应用程序

生成高精度密集深度图的能力是许多应用程序的游戏规则改变者与以前的版本相比,NEURAL深度模式可生成明显更好的边缘分割,并在低照度曲面中带来更高的稳定性它还提供更光滑和更平坦的表面。这些改进允许在各种应用中进行许多具体的增强,例如移动机器人的动态障碍物检测,工业武器的拾取和放置以及混合现实应用。

针对 NVIDIA Jetson AGX Orin 进行优化

ZED SDK 3.7 已针对最新的 NVIDIA JetPack 5.0 和 Jetson AGX Orin™ 开发者套件进行了优化。在此配置中,神经深度模式在最新的NVIDIA Jetson AGX Orin上以34 fps的速度运行,而在Jetson Xavier NX和JetPack 4.X上则以12 fps的速度运行。

新型Jetson AGX Orin的性能开启了新功能,如处理来自多个ZED 2i深度相机3D数据,使其成为自主机器人和边缘分析解决方案的理想组合。

 

ZED 2i Stereo Camera 和 NVIDIA Jetson Orin AGX Developer Kit