
友思特案例 | ZED X 助力 InDro Robotics 革新自主导航技术
InDro Robotics是加拿大无人机、地面及海洋机器人研发企业,专注于复杂作业、数据采集与监控等领域的自主机器人解决方案,旗舰产品「哨兵巡检机器人」可实现自主导航与基础设施监测。四年来,其全系列平台采用友思特合作伙伴Stereolabs视觉相机技术,通过部署ZED X系统,在性能、成本效益与作业能力上实现显著提升。
物理人工智能
物流自动化
越野自动驾驶
数字孪生
技术资源
ZED相机为具身机器人提供动力——从数据工厂到实时自主
在从自动化系统向真正智能机器的转型中,ZED 摄像头提供了塑造未来物理人工智能的空间感知架构。
ZEDX相机支持在光照、物体放置位置和任务参数标准化的受控环境中进行大大量集中式数据采集。这确保了不同演示数据之间的一致性,降低了噪声,并为可扩展的机器人学习和世界模型训练实现精确的动作标注。
ZED X One 凭借紧凑外形,可配置为头戴式或胸戴式设备,从演示者的自然视角捕捉任务。通过记录真实动作及手与物体的交互,它为仿人机器人和通用物理人工智能系统生成高质量的第一人称视角数据集。
ZED X 专为近距离部署而设计,可集成至腕戴式装置,以捕捉装配、工具使用及协调性双手操作任务中的精细动作细节。这种以动作为中心的视角支持精确标注,并加速灵巧运动策略的学习。
具身智能的感知基础
具身智能在现实世界中运行——这是一个动态变化、非结构化且与人类共享的环境。
具身智能,是指能够在三维空间中完成感知、推理与行动的的智能系统。
感知能力必须具备空间理解能力、实时性、鲁棒性与可扩展性——既要实现真正的三维环境理解,又要支持高速的 “感知一决策一执行” 闭环,同时能够在运
动、强光、振动及复杂杂乱环境下保持稳定可靠,并覆盖从模型型训练到实际部署的完整流程。
当感知能力可靠运行时,自主智能才能真正发挥价值。因此,空间智能(Spatial Intelligence)正是具身智能的核心基基。
用于机器人手臂数据采集的参考设计:ZED X 相机可无缝集成到机器人工作单元中——安装在工作区域上方、框架上,或直接安装在机器人手臂上。
配备全局快门,即使在动态环境中也能捕捉清晰无运动伪影的画面。
搭载ZED SDK技术,具备先进的碰撞避免、实时3D感知、精准定位和语义场景理解,非常适合要求严格的自动化任务。
120毫米立体基线,全局快门,2x(1920x1200)60帧/秒,高性能IMU,GMSL2 接口同步
设计紧凑、测量精准,融合了超深度感知、视觉惯性运动追踪以及简易集成能力,适用于高级三维建图与感知任务。
ZED X Mini是农业、物流和建筑等操作任务的理想选择。该相机特别适合自动化和拣货等短距离应用。
50毫米立体基线,全局快门,2x(1920x1200)60帧/秒了,高性能IMU,GMSL2 接口同步
比ZED X One GS小且轻35%,性能和可靠性保持相同
配备全新鱼眼镜头,提供全景感知,IP69K广角选装,专为恶劣环境设计,以及针对远景或目标视觉任务优化的窄视场配置
以超紧凑轻量化的外形呈现强大的视觉,非常适合空间受限的机器人,从可挑选的手臂到下一代类人生物
该套件由集成 GMSL2 采集功能的 ZED Box Orin NX 16GB 驱动,将立体深度感知与扩展的单目相机覆盖范围相结合,能够在复杂的真实环境中捕捉同步的多视角数据集。
非常适合训练具备真正 3D 理解能力及快速感知-行动循环的 VLA 模型。
Wi-Fi 6E、蓝牙(可选)
GNSS RTK 模组(可选)
赋能空间智能的工业级硬件
超高速流式传输结合高带宽 NV12 原始视频流,可实现极低延迟的视觉感知,为嵌入式 AI 处理提供流畅的机器人运动控制及对移动物体的实时响应。
全局快门可同时捕捉整帧图像,即使在高速运动场景下也能保持几何结构不失真。这对于高速运动的机构戒臂、动态行走机器人以及移动机器人的运动控制至关重要——全局快门不可或缺。
多种镜头选项可供选择,包括超广角鱼眼镜头,可将视野扩展至前方视线之外,减少盲区,提高复杂环境中的空间感知能力。
紧凑的外形设计、工业级接口以及灵活的集成方案,使其能够无缝部署于各种机器人形态和生产环境中,支持可靠的性能与可扩展性。
物理 AI 需要具备部署级可靠性。加固型设计与GMSL2接口可在长距离传输条件下,实现高带宽、低延迟的视频数据传输——这对于复杂的机器人架构至关重要。
摄像头可与外部硬件(如频闪灯)同步,确保精确的图像采集时序,在兼容配置下可提升操作任务中的感知准确性与一致性。
鱼眼镜头选项支持环绕感知。凭借超广角 200° 视场,您可以实现完整的环境感知、SLAM 以及结合多台 ZED 相机的物体检测,从而简化机器人架构。
广角镜头提供平衡的视场,可同时捕获空间上下文和深度信息。它非常适合通用的物理 AI 数据采集,能够在结构化和半结构化环境中实现可靠的导航、场景理解及交互感知。
窄角镜头专为短距离毫米级精度的数据采集而设计。通过缩小视场,它能够精确检测和跟踪附近的物体,是物理 AI 数据集中需要极致细节的应用的理想选择。
通过3D视觉解锁安全、高效且可扩展的仓库自动化
仓库是动态且空间紧凑的环境,自动化设备必须在狭窄的通道中导航,应对不断变化的布局以及频繁的人员活动。为了在大规模作业中保持可靠运行,机器需要精确的三维视觉技术来实现 实时感知、安全移动和高效执行任务。
仓库内的货架、设备和人员流动情况不断变 化,需要持续进行重新布局。自主系统需要 具备灵活、精确的三维感知能力,以便实时 适应变化并平稳运行。
人机协作是仓库运营的核心。视觉技术必须实时检测和跟踪人员和车辆,防止碰撞,确保人机安全共处。
物流环境要求系统不间断运行。为了支持大规模自动化,感知必须在所有班次和操作条件下提供一致的准确性和稳定性。
Stereolabs 如何应对这些挑战?
Stereolabs 提供先进的3D视觉技术,支持物流环境中的高性能自动化。从AMR、叉车到机械臂和监控系统,它实现了实时感知,实现了精确导航、持续可靠以及在动态高通量仓库中的安全操作。
在高强度环境中实现安全自主运行
在现代物流中心,机器与工人、叉车及设备一同在狭窄、高流量区域运行。Stereolabs 使机器能够清晰感知复杂的室内环境,帮助它们智能响应周围活动,自信地在共享空间中导航。
环境变化的视觉空间感知
在货架位置变动、托盘重新摆放以及路径频繁重新规划的环境中中,机器不能依赖静态地图,而必须持续保持对环境的感知,Stereolabs 让系统能够持续以三维视角解读其所处环境,即使布局在一天中中不断变化,也能维持空间感知。
推动可靠且优化的物流自动化
高通量物流要求稳定高效的性能。Stereolabs支持对货物、设备和工作流程的持续视觉监控。在整个过程中保持一致的可视化,视觉驱动的自动化有助于减少错误并优化所有塔斯克的执行。
一个平台,无限应用:Stereolabs的视觉系统支持多种仓库自动化解决方案,包括AMR、叉车、机械臂和架空监控设备。它能够精准感知导航、拣选物品和基础设施监控等任务,能够轻松适应不同系统,并根据运营需求进行扩展。
专为仓库和配送部署而打造:适用于动态室内环境,Stereolabs相机和边缘平台可在复杂、拥挤且快速移动的空间中提供精确的3D感 知。我们的硬件专为应对多变的光照和不间断的作业而设计,能够无缝融入物流工作流程。
配备全局快门,即使在动态环境中也能捕捉清晰无运动伪影的画面。
搭载ZED SDK技术,具备先进的碰撞避免、实时3D感知、精准定位和语义场景理解,非常适合要求严格的自动化任务。
120毫米立体基线,全局快门,2x(1920x1200)60帧/秒,高性能IMU,GMSL2 接口同步
设计紧凑、测量精准,融合了超深度感知、视觉惯性运动追踪以及简易集成能力,适用于高级三维建图与感知任务。
ZED X Mini是农业、物流和建筑等操作任务的理想选择。该相机特别适合自动化和拣货等短距离应用。
50毫米立体基线,全局快门,2x(1920x1200)60帧/秒了,高性能IMU,GMSL2 接口同步
一款功能强大的嵌入式计算单元,支持多达 4 路 GMSL2 或 3 路 USB 3.1 相机输入。具备以太网供电(PoE+)功能,并可选配 GNSS RTK 模组,实现高精度定位
4 路 GMSL2 相机输入,3 路 USB 3.1 相机输入
Wi-Fi 6E、蓝牙(可选)
GNSS RTK 模组(可选)
稳健的深度感测
在低光区、反光地板、重复图案和部分遮挡等复杂条件下,提供精准的3D测量。
精确的室内定位与制图
支持在GNSS信号受限的室内环境中,基于视觉SLAM技术实现厘米级定位。
人员和物体的探测与追踪
检测并跟踪运动中的人员、机器和物体,以支持安全运行和优化操作。
身体追踪用于活动和行为意识
监测人体运动模式,支持活动追踪,检测风险行为,提升行为意识。
ID Logistics
Stereolabs 的技术帮助 ID Logistics 提高仓库订单准备的效率和准确性。
通过确保叉车装载包裹的一致性,我们的感知系统帮助工人节省时间并最大程度地减少错误。
——驱动平台:ZED Mini、ZED CONNECT、ZED SDK 及 ZED BOX
Stereolabs 为机械提供强大的 3D 感知能力,使其能够在具有挑战性的户外环境中安全、高效地运行
越野环境给机器视觉系统带来了独特的挑战。从不可预测的地形到极端天气,机器必须在严苛且多变的条件下安全高效地运行。无论是实现自主能力还是增强操作员的感知,视觉技术都必须提供一致且高性能的传感。
越野环境变幻莫测,地面不平、陡坡和自然障碍物随处可见。机器需要先进的感知能力,才能在并无清晰路径的地形上安全导航。
振动、灰尘、雨水和极端温度对传感器构成严峻考验。可靠的自主性需要坚固耐用且高性能的视觉系统,能够日复一日承受恶劣的环境。
越野条件随着天气、植被和人类活动而不断变化。自主机器需要实时感知与智能,绝不能仅依赖静态地图或过时的数据。
Stereolabs 如何应对这些挑战?
越野自动驾驶技术正在快速发展,但要在这些环境中实现可靠性能,取决于能够跟得上的感知系统。Stereolabs 助力建筑、农业、采矿和国防领域的创新者,以智能 3D 视觉为核心,打造更安全、更强大的自主机器。
更加智能的实时响应
越野自动驾驶需要感知系统能够在泥泞、雨水、振动和极端温度下持续工作。Stereolabs的技术可支持在传统传感器失效的场景中进行部署,帮助机器在任何环境中都能保持感知能力。
环境变化的视觉空间感知
野外环境变化迅速。无论是地形变化、移动车辆还是意外障碍,Stereolabs 都能使自主系统凭借安全运行所需的实时智能,即时感知并做出反应。
实现实时地形理解
从陡坡到松软地面和茂密植被,在非结构化地形中导航需要精确的 3D 视觉。Stereolabs 帮助越野系统实时构建空间感知,以支持自主运行。
一个平台,无限应用:Stereolabs 的视觉系统可适配各种尺寸和类型的越野机器。无论是用于实现自主操作,还是增强操作员的监督与安全,该平台都能针对每台机器的独特需求,提供一致且高性能的 3D 感知
专为越野部署而建:Stereolabs摄像头和边缘平台在振动、灰尘和极端天气下提供可靠的3D感知。该系统无缝集成于农业、采矿、建筑和国防等多个应用领域。
配备全局快门,即使在动态环境中也能捕捉清晰无运动伪影的画面。
搭载ZED SDK技术,具备先进的碰撞避免、实时3D感知、精准定位和语义场景理解,非常适合要求严格的自动化任务。
120毫米立体基线,全局快门,2x(1920x1200)60帧/秒,高性能IMU,GMSL2 接口同步
设计紧凑、测量精准,融合了超深度感知、视觉惯性运动追踪以及简易集成能力,适用于高级三维建图与感知任务。
ZED X Mini是农业、物流和建筑等操作任务的理想选择。该相机特别适合自动化和拣货等短距离应用。
50毫米立体基线,全局快门,2x(1920x1200)60帧/秒了,高性能IMU,GMSL2 接口同步
一款功能强大的嵌入式计算单元,支持多达 4 路 GMSL2 或 3 路 USB 3.1 相机输入。具备以太网供电(PoE+)功能,并可选配 GNSS RTK 模组,实现高精度定位
4 路 GMSL2 相机输入,3 路 USB 3.1 相机输入
Wi-Fi 6E、蓝牙(可选)
GNSS RTK 模组(可选)
该一体化套件可为任何机器人带来环视感知与自主能力。它将内置 GMSL2 四路采集卡的 ZED Box Orin NX 16GB 与四台 ZED X 相机及延长线集成于一体。套件包含:
2 台 ZED X 立体相机
1 台 ZED Box Orin NX 16GB
1 条 4 合 1 GMSL2 线缆
4 条 1.5 米 GMSL2 Fakra 延长线(母对母)
该机器人感知套件可为任何机器带来 360° 感知与障碍物检测能力。它包含 Syslogic RPC RML 系统,以及四台 ZED X 相机和延长线。
4 台 ZED X(2.2mm 镜头)
1 台 Syslogic Jetson AGX Orin 64GB GNSS
4 条 GMSL2 线缆
稳健的深度感测
在困难的光线和天气条件下,精确捕捉地形和障碍物的3D测量。
物体探测与跟踪
实时探测和跟踪物体,提升安全性和操作信心。
传感器融合以实现可靠定位
结合视觉与GPS和IMU数据,在各种条件下提供精确可靠的定位。
地理定位映射
生成带有真实世界定位的精确3D地图,支持导航、覆盖和地形分析。
Monarch 拖拉机
Stereolabs 的技术为 Founder Series MK-V 提供视觉支持,这是全球首款全电动、可选驾驶员模式的智能拖拉机。由 Monarch 拖拉机公司打造的 MK-V 可增强农民现有的作业能力,缓解劳动力短缺问题,并最大限度地提高产量。
——驱动平台:ZED X、TERRA AI 及 ZED SDK
获取可操作的洞察以改善运营:通过精细复制物理世界,我们能够提供实时且敏锐的洞察,助您实现目标。
Stereolabs 利用多重融合技术,为空间分析系统提供任何特定时间空间的全面视图
只要有人距离你的深度摄像头20米以内,就可以在3D中探测和追踪任何人物,并收集空间洞察。
建模人员、场所和物体之间的空间关系,创建基于地图的物理世界表示。
管理并融合来自多相机集群的数据,构建大规模环境监测解决方案。
结合空间上下文检测物体,利用地面平面检测将其放置在地图上,并追踪物体的3D运动。自ZED SDK 3.6起,支持通过API使用自定义检测器。
为Unity和虚幻引擎带来实时3D感知能力,创造虚实融合的创新体验。
在任何室内或室外环境中,构建并部署令人兴奋的多用户体验方案。
适用于任何空间:ZED相机几乎可以安装在任意环境中,无论是室内还是室外,也不受天气条件影响。这些相机及其他传感器采集的数据,将由ZED Box进行融合,从而实现人员或物体的检测与追踪,并提供详实的空间分析数据。
配备全局快门,即使在动态环境中也能捕捉清晰无运动伪影的画面。
搭载ZED SDK技术,具备先进的碰撞避免、实时3D感知、精准定位和语义场景理解,非常适合要求严格的自动化任务。
120毫米立体基线,全局快门,2x(1920x1200)60帧/秒,高性能IMU,GMSL2 接口同步
一款功能强大的嵌入式计算单元,支持多达 4 路 GMSL2 或 3 路 USB 3.1 相机输入。具备以太网供电(PoE+)功能,并可选配 GNSS RTK 模组,实现高精度定位
4 路 GMSL2 相机输入,3 路 USB 3.1 相机输入
Wi-Fi 6E、蓝牙(可选)
GNSS RTK 模组(可选)
一款功能强大的嵌入式计算单元,支持多达 4 路 GMSL2 或 3 路 USB 3.1 相机输入。具备以太网供电(PoE+)功能,并可选配 GNSS RTK 模组,实现高精度定位
4 路 GMSL2 相机输入,3 路 USB 3.1 相机输入
Wi-Fi 6E、蓝牙(可选)
GNSS RTK 模组(可选)
“Stereolabs 是我们身体追踪系统开发过程中的优秀合作伙伴。他们提供了全面的指导与实际支持,帮助我们集成多台相机,并确保数据同步的完美无误。感谢他们助力我们整个系统的顺利运行与部署!”
—— MARIUS JABLONSKIS,NORCONSULT 公司数字化转型负责人
无需标记点,实时捕捉并分析运动
利用我们特别设计的空间分析模块,从噪声中提取有效信号。ZED相机及ZED SDK专为无标记点追踪而设计,是一套即插即用的系统,可部署于任何空间环境。
互动镜像
借助 ZED 相机及 ZED SDK,了解人员如何在空间中移动。
ZED 相机通过其身体追踪模块,能够提供每个检测到的关键点的 2D 和 3D 信息,该模块可输出三种不同的身体格式:Body 18、Body 34 和 Body 38。此外,ZED SDK 还能输出三个级别的信息:2D/3D 身体检测、3D 身体追踪和 3D 身体拟合。
房间级数字孪生
增加更多相机,在房间级环境中追踪运动。请探索我们的标定与融合应用程序,以完成此配置。
世界级数字孪生
利用 ZED SDK 的 3D 物体检测模块,升级您的物体检测能力。
激活 3D 物体追踪模块,为每个物体分配唯一 ID,并持续追踪其运动。可无缝集成 TensorFlow 和 PyTorch,方便部署实现。
为开发者和创作者设计
用ZED配合你喜欢的平台和库。请务必查看我们的文档和GitHub页面,获取最新的集成内容!使用 ZED SDK 在 Windows PC 上构建高端增强现实应用。兼容Oculus Rift、Rift S、HTC Vive和Vive Pro。
Unity
使用 Unity 实现高级运动追踪,并创建第一人称或第三人称视角的交互体验。
Unreal
通过 LiveLink 将 Unreal 与高级运动追踪相结合,打造第一人称或第三人称视角的交互体验。
多相机标定与融合
构建多相机系统以覆盖更大区域。使用我们现成的标定与数据融合工具,仅需几分钟即可完成部署。
Technical Resources
Stereolabs致力于赋予机器类人化的视觉能力。自2010年创立以来,公司始终专注于通过先进的立体视觉与深度感知技术,让机器不仅能“看见”高分辨率、全彩色的世界,更能深度理解环境中的纹理、空间与语义信息。
Stereolabs的技术旅程始于巴黎光学研究所,早期通过为《阿凡达》等电影提供3D影像稳定处理技术奠定了行业声誉。此后,Stereolabs自主研发的ZED系列深度相机以坚固、高性价比的特性成为行业标杆。如今,Stereolabs正推动视觉技术进入新阶段,通过融合多源数据的先进感知系统,为自主机器人与空间分析领域提供不间断、高精度的环境理解解决方案。公司在旧金山、纽约和巴黎设有分支机构,与全球跨地域、跨行业的团队合作,提供即用型的软硬件产品。
友思特和Stereolabs合作,致力于让前沿视觉技术服务于从国内农业自动化到城市空间分析的广泛场景。
Stereolabs 确保与多种软硬件选项兼容。这种灵活性让你能够无缝将我们的技术整合到现有设备中,并利用你喜欢的工具和工作流程。

InDro Robotics是加拿大无人机、地面及海洋机器人研发企业,专注于复杂作业、数据采集与监控等领域的自主机器人解决方案,旗舰产品「哨兵巡检机器人」可实现自主导航与基础设施监测。四年来,其全系列平台采用友思特合作伙伴Stereolabs视觉相机技术,通过部署ZED X系统,在性能、成本效益与作业能力上实现显著提升。

友思特合作伙伴Stereolabs ZED SDK 5.1 突破机器人平台实时多相机感知技术极限,全新重构采集与录制管道,升级增强型位姿追踪功能,新增近距深度感知能力,且官方原生支持 Jetson Thor 平台。本次版本迭代让 ZED 全生态体系,在工业场景中运行更高速、更稳定、更全能。

人形机器人、移动机器人及自主决策系统正从实验室走向工厂、仓库和公共区域。为可靠运行,机器人需具备实时处理多传感器的高性能感知管道。NVIDIA Jetson AGX Thor提供所需边缘计算能力,友思特合作伙伴 Stereolabs 将 ZED 相机 空间感知视觉引入该平台,为现实应用提供完整方案。
【GMSL双目摄像头使用经验分享】
Stereolabs ZED系列:
产品介绍、开发环境配置、应用实战
(点击跳转可查看更高清视频)
Contact us

产品选型与硬件适配:
● 传感器选型:ZED 2i/ZED X全系列选型,覆盖室内外、远近程复杂工况
● 边缘计算集成:NVIDIA Jetson平台深度适配,提供多相机硬件级同步采集

核心算法与二次开发:
● 空间定位与SLAM方案,优化机器人/无人机的轨迹追踪精度
● AI感知算法集成:自定义算法模型集成,实现3D目标检测与物体追踪等应用
● SDK定制与驱动调试:API封装、ROS2节点开发、驱动适配与性能优化服务

一站式方案设计:
● 自动驾驶/巡检机器人:提供“感知+定位+避障”一体化方案,实现复杂环境下稳定导航与自主运行
● 工业自动化/体积测量:体积测量、机械臂引导
● 数字孪生与AR/VR:实时环境3D重建
Related product

多功能单目感知相机
在高分辨率、低延迟与全天候可靠性之间实现出色平衡

GMSL2双目感知相机
ZED X专注于障碍物检测和导航,ZED X Mini则专注于近距离应用如拾取

IP66 防护等级卷帘快门双目立体相机
专为空间分析和沉浸式体验设计,由
Neural Depth Engine 2 提供
支持

紧凑且强大的嵌入式边缘算力盒
由NVIDIA Jetson Orin驱动的边缘3D感知和AI计算