Stereolabs ZED 系列相机应用:具身智能与自主机器人系统视觉感知

为具身智能注入物理世界的高清三维感知引擎

赋予机器人精准的深度、运动和空间理解能力,以毫米级精度导航、感知和执行——安全且自主地在任何环境中

作为 Physical AI 的视觉感知层,Stereolabs 将先进的神经深度感测、硬件同步惯性运动数据(IMU)、出厂自动化标定与丰富的软件生态深度融合。

从具身机器人、自主移动机器人(AMR)到农业与工业自动化系统,ZED 系列相机为动态非结构化环境提供安全、精准且高可靠的三维感知支撑。

ZED | 具身智能与自主机器人系统

EGO Data Collection

EGO数据采集

Embodied Perception

具身本体感知

AMRs

自主移动机器人

Agricultural Robots

农业机器人

Technical Resources

技术资源

Related Products

相关产品

立刻咨询/购买

具身智能EGO数据采集

Customer case

具身智能数据采集与遥操作的
高保真第一视角感知引擎

在数据采集与遥操作应用中,ZED 系列相机为具身大模型与 Physical AI 系统提供了高保真的第一视角三维感知引擎。通过将以下能力深度融合:

超低延迟 GMSL2 极速传输

全局快门防抖

厘米级手物交互深度感知

ZED 能够完美捕捉人类示范者自然视角下的真实运动轨迹与精细操作,彻底消除遥操作中的图传延迟与视觉眩晕感,助力开发者高效构建高鲁棒、易泛化的具身智能基座数据集。

具身本体深度感知

Customer case

具身本体的“原生视觉皮层”

ZED 系列 3D 深度相机为具身本体(以人形机器人或机器狗为代表)赋予媲美人类的物理世界感知能力,使其能够在以人为中心的复杂环境中实现安全、自然的物理交互。通过将厘米级高精度深度感知与硬件同步的视觉惯性里程计(VIO)深度融合,ZED 为具身本体提供以下核心支撑:

精准实时定位

步态平衡控制

姿态控制支撑

即使面对剧烈光照变化、高反光材质或密集拥挤人群,ZED 依然能保障具身本体保持平稳、鲁棒的自主运动,助力机器人实时理解三维空间、精准避障,并做出毫秒级动作响应——在动态物理世界中自信感知、精准破局。

自主移动机器人(AMR)

Customer case

AMR 高精度三维感知与厘米级定位引擎

ZED 系列相机为 AMR 提供高精度三维环境感知与厘米级空间定位能力,其核心在于融合以下技术:

高密度点云构建

双目 Neural Depth 深度神经网络

视觉惯性里程计(VIO)

基于此,ZED 能精准识别低矮障碍物、悬空结构、环氧树脂高反光地面及货物堆叠细节,并在物流仓储、智能工厂与商业服务场景中,赋予 AMR 实时避障、动态路径规划与货架/托盘高精度对准能力。

农业机器人导航视觉引擎

Customer case

车规级户外非结构化导航视觉引擎

面对农田与果园极高复杂度的户外环境,ZED 工业级视觉系统凭借高动态范围(HDR)与全局快门感光元件,在强光直射与复杂树阴交错下仍能保持高质量成像与高密度 3D 点云输出。其核心能力体现在:

内置硬件级同步 IMU 配合 ZED VIO 算法,确保机器人在颠簸泥泞的垄沟行驶时依然具备厘米级定位建图能力;

结合 IP67 防尘防水外壳与 FAKRA 工业锁扣线缆,保障农业机器人在恶劣户外环境中实现 24/7 全天候稳定自主导航

ZED 助力农业机器人在非结构化户外环境中实现稳定自主导航。即使在强光、树阴、泥泞与颠簸等挑战下,也能保持可靠感知与持续作业

客户案例

Customer case

0 +

服务企业

0 +

研究者

0 +

科学研究

客户需求

友思特合作客户研发工规级具身智能机器人,专为汽车、3C电子、仓储等复杂工业环境打造,对核心感知元件深度相机提出了极高的要求。机器人需通过双目或3D深度相机实时获取三维环境数据,精准识别复杂零部件和不规则产品对象,以满足高精度抓取、规划和码垛等任务需求。因此,深度相机必须具备IP67级以上工业防护等级,耐受粉尘、震动、油污及宽温工作环境,确保在机器人复杂电磁环境下仍能输出稳定的高帧率深度数据,为机器人的具身智能大模型提供可靠的三维环境感知输入,实现自主作业与安全交互。
除此之外,相机还需提供充足的API以及ROS兼容的示例程序,以降低集成进具身智能机器人现有开发环境的难度,助力项目快速落地和机器人实施部署。

友思特解决方案

利用友思特ZED X系列深度相机,提供30fps、1920*1200全局快门、2m内±0.8%或0.4%的深度精度,为具身智能机器人提供实时、高精度的3D数据,满足客户机器人的三维感知需求。ZED X系列深度相机具备IP67防护等级,且采用GMSL2协议,满足机器人在耐受粉尘、震动、油污、宽温工作环境和复杂电磁环境下仍能输出稳定的高帧率深度数据的需求。 友思特ZED深度相机以十几年的技术积累,提供非常丰富的软件开发生态,包括C++/Python/ROS示例程序,兼容现有机器人开发、仿真平台工具如NVIDIA IsaacSim、Unity 3D、Foxglove等。

友思特与ZED相机合作客户互动

友思特与安徽聆动通用机器人(科大讯飞旗下子公司)的具身机器人核心团队
签订战略合作协议,ZED X搭载在其具身智能机器人中

ZED相机更多合作客户

相关产品

Customer case

ZED X One

全局快门、GMSL2接口、多种S卡口镜头,适合工厂自动化、物流和类人机器人的高分辨率感知

配同型相机可组定制双目立体系统,灵活实现深度感知

快速移动物体无畸变三维成像;配合ZED SDK,专为需可靠深度感知和语义理解的机器人设计

ZED X One S 紧凑型版本

比ZED X One GS小且轻35%,性能与可靠性不变

新增鱼眼镜头实现全景感知,可选IP69K广角版适应恶劣环境,窄视场版优化远景与目标视觉任务

超紧凑轻量外形,适合空间受限的机器人,从拣选机械臂到下一代仿真机器人

ZED X One Core 紧凑型

从4 × 100GigE链路抓取,支持多摄像头,支持链路聚合

无帧丢失,支持ROI采集,采集带宽高达400gb /s

集成了嵌入式Tensor模块和集成的HBM2内存,提供了前所未有的处理和内存带宽性能,比强大的Stratix 10 MX多15倍的计算性能

ZED X

全局快门,动态环境下画面清晰、无运动伪影

搭载ZED SDK,支持碰撞避免、实时3D感知、精准定位和语义场景理解,适合严格自动化任务

120mm立体基线,全局快门,2×1920×1200@60fps,高性能IMU,GMSL2接口同步

ZED X Mini

紧凑精准,融合超深度感知、视觉惯性运动追踪与简易集成,适合高级三维建图与感知

适用于农业、物流、建筑等任务,尤其适合自动化和拣货短距离应用

50mm立体基线,全局快门,2×1920×1200@60fps,高性能IMU,GMSL2接口同步

ZED X Nano

先进手腕式立体相机,超紧凑轻量,专为机器人操作、人形机器人和物理AI设计

230万像素全局快门、零拷贝捕获、神经深度引擎、加固型GMSL2,亚毫米级空间智能

18mm立体基线,全局快门,2×1920×1200@60fps,高性能IMU,GMSL2同步

ZED X

广角深度感应+AI空间感知,适合室内外部署

模块化设计,可换镜片,可选IP66防护外壳

双高分辨率RGB传感器,最高120°广角;集成IMU、气压计、磁力计和温度传感器,增强环境感知

120mm立体基线,USB 3.1,1080p@30fps

ZED X Mini

超深度感应+运动追踪,紧凑设计,适合AR、3D地图和机器人应用

内置6轴IMU精准动作追踪,高清深度感应,新增超高模式

小巧机型,63mm立体基线,USB 3.1,1080p@30fps

ZED X

广角深度感应+AI空间感知,适合室内外部署

模块化设计,可换镜片,可选IP66防护外壳

双高分辨率RGB传感器,最高120°广角;集成IMU、气压计、磁力计和温度传感器,增强环境感知

120mm立体基线,USB 3.1,1080p@30fps

ZED X Mini

超深度感应+运动追踪,紧凑设计,适合AR、3D地图和机器人应用

内置6轴IMU精准动作追踪,高清深度感应,新增超高模式

小巧机型,63mm立体基线,USB 3.1,1080p@30fps

ZED X Mini

超深度感应+运动追踪,紧凑设计,适合AR、3D地图和机器人应用

内置6轴IMU精准动作追踪,高清深度感应,新增超高模式

小巧机型,63mm立体基线,USB 3.1,1080p@30fps

立刻咨询/购买 Stereolabs

Contact us

产品选型与硬件适配:
● 传感器选型:ZED 2i/ZED X全系列选型,覆盖室内外、远近程复杂工况
● 边缘计算集成:NVIDIA Jetson平台深度适配,提供多相机硬件级同步采集

核心算法与二次开发:
● 空间定位与SLAM方案,优化机器人/无人机的轨迹追踪精度
● AI感知算法集成:自定义算法模型集成,实现3D目标检测与物体追踪等应用
● SDK定制与驱动调试:API封装、ROS2节点开发、驱动适配与性能优化服务

一站式方案设计:
● 自动驾驶/巡检机器人:提供“感知+定位+避障”一体化方案,实现复杂环境下稳定导航与自主运行
● 工业自动化/体积测量:体积测量、机械臂引导
● 数字孪生与AR/VR:实时环境3D重建

填写信息,我们的团队将与您联系:

0 +

服务客户

0 +

服务行业

0 +

关键项目落地

0 +

专利技术认证