友思特技术 | 如何用AI视觉助力质量检测
2024年8月21日
AI视觉是一种基于计算机视觉和人工智能技术的前沿技术，可应用于各种质检场景。友思特为用户提供了友好的软件工具和智能相机硬件，这样，即使用户没有经验，也可以使用AI视觉来处理项目应用，并以直观简易的方式部署实施。
NXT系列 一体化推理相机 rio&rome
简单易用、基于人工智能的一体式视觉系统，实现机内AI图像分析
由智能、可编程的相机和多功能的软件环境组成，在相机中运行硬件加速卷积神经网络(CNN)
配备 REST 和 OPC UA 的 GigE 工业相机，传感器类型多样
简单易用，另所有行业的每个人都可以快速、轻松、经济高效地使用深度学习的方法
Previous
Next
NXT系列 一体化推理相机 rio&rome
友思特合作伙伴IDS 提供的 NXT rio&rome是一个嵌入式视觉平台，采用紧凑型工业相机的形式，由于集成了专门开发的人工智能核心（”深海核心”），可以执行推理时间只有几毫秒的神经网络。使用IDS NXT lighthouse 训练软件，特别容易实现基于AI的图像处理功能。
具有C-mount、串行RS232接口和带 M12连接器的千兆以太网网络连接等功能，相机能够通过REST网络服务和OPC UA进行通信。rio&rome在防护等级上有所不同，但特别坚固耐用。这可以保护相机不受污垢、灰尘和溅水的影响。
- 相机内置AI进行图像分析：在相机中运行硬件加速卷积神经网络(CNN)
- 应用范围广泛：配有多种传感器、工业应用接口和坚固的外壳，可以轻松集成到工业应用中，是工业环境的理想之选
- 通过“边缘设备”进行图像处理：可通过FPGA（预）处理数据并将其传送给机床控制系统。嵌入式解决方案可降低（或甚至节省）主机PC的负载、能耗和系统成本
- 通用的人工智能视觉组件：轻松完成从捕捉训练图像到实际执行的全部应用开发步骤
产品优势特点
轻松应用深度学习
NXT是一款简单易用、基于人工智能的一体式视觉系统，由智能可编程相机和多功能软件组成。
涵盖了从捕捉和标记训练图像到训练网络、创建用于评估的应用以及实际运行应用的整个工作流程。
这意味着，即使不具备深度学习或应用编程的知识，也可以在各种行业和应用场景中应用具备人工智能的图像处理。
您可以随时调整各种相机的功能。例如：改进目视检查和质量控制、确保工作场所安全、优化产出、支持物流流程、小批量自动化生产
应用范围广泛，工业环境的理想之选
该系列相机配有多种传感器、工业应用接口和坚固的外壳，如C-mount、RS-232接口、
带RJ45接头的千兆以太网网络连接、REST网络服务和OPC UA服务器等，因此可以轻松集成到工业应用中，也可应用于更多行业场景中。
配备通用人工智能视觉组件，无需专业知识储备即可进行图像处理
NXT包含所有必要的 IDS lighthouse 软件和硬件组件，它们可以高效协同工作，在云端帮助您将想法转化为现实。
这意味着您无需事先掌握深度学习、图像处理或应用编程的专门知识，即可完成从第一张图像到最终应用的整个开发工作流程。
NXT 相机应用实例
对象分类、对象检测和异常检测：IDS NXT提供了种类繁多的应用和非常灵活的使用方式。
这样能很好地应对包含高度变化的对象和过程的场景，硬编码图像处理应用则难以实现。
相机数据
| 智能相机 | NXT rome/rio GS29016 | NXT rome/rio GS18031C-HQ | NXT rome/rio GS23050C-HQ | NXT rome/rio RS18064C-HQ | ||||
|---|---|---|---|---|---|---|---|---|
| 快门 | 全局快门 | 全局快门 | 全局快门 | 卷帘快门 | ||||
| 分辨率 | 1.56 百万像素 | 3.15 百万像素 | 5.01 百万像素 | 6.41 百万像素 | ||||
| 分辨率（水平 x 垂直） | 1440 x 1080 像素 | 2048 x 1536 像素 | 2448 x 2048 像素 | 3088 x 2076 像素 | ||||
| 光学传感器等级 | 1/3" | 1/1.8" | 2/3" | 1/1.8" | ||||
| 光学尺寸 | 4.968 mm x 3.726 mm | 7.066 mm x 5.300 mm | 8.446 mm x 7.066 mm | 7.411 mm x 4.982 mm | ||||
| 光学传感器对角线 | 6.21 mm (1/2.58") | 8.83 mm (1/1.81") | 11.01 mm (1/1.45") | 8.93 mm (1/1.79") | ||||
| 像素尺寸 | 3.45 µm | 3.45 µm | 3.45 µm | 2.4 µm | ||||
| 生产商 | Sony | Sony | Sony | Sony | ||||
| 传感器型号 | IMX273LQR-C | IMX265LQR-C | IMX264LQR-C | IMX178LQJ-C | ||||
| 自由运行模式下帧率 | 34 | 20 | 12 | 5 | ||||
| 曝光时间（最小值 - 最大值） | 彩色：0.035 ms - 2000 ms 黑白：0.025 ms - 2000 ms |
彩色：0.042 ms - 2000 ms 黑白：0.030 ms - 2000 ms |
彩色：0.048 ms - 2000 ms 黑白：0.033 ms - 2000 ms |
彩色：0.048 ms - 2000 ms 黑白：0.031 ms - 2000 ms |
||||
| I/O连接器 | 12芯M12连接器 (Attend 216A-12MSR) | 12芯M12连接器 (Attend 216A-12MSR) | 12芯M12连接器 (Attend 216A-12MSR) | 12芯M12连接器 (Attend 216A-12MSR) | 12芯M12连接器 (Attend 216A-12MSR) | |||
| 接口连接器 | GigE M12，螺丝锁紧式 | GigE RJ45，螺丝锁紧式 | GigE M12，螺丝锁紧式 | GigE RJ45，螺丝锁紧式 | GigE M12，螺丝锁紧式 | GigE RJ45，螺丝锁紧式 | GigE M12，螺丝锁紧式 | GigE RJ45，螺丝锁紧式 |
| 功耗 | 5.3 W - 12 W | 5.4 W - 10 W | 6 W - 11 W | 6 W - 10 W | 5.3 W - 11.7 W | 5.6 W - 9.8 W | 6 W - 12 W | 6 W - 10 W |
| 防护等级 | IP65/67 | IP30 | IP65/67 | IP30 | IP65/67 | IP30 | IP65/67 | IP30 |
| 尺寸 高/宽/长 | 41.0 mm x 53.0 mm x 75.0 mm | 34.0 mm x 44.0 mm x 73.0 mm | 41.0 mm x 53.0 mm x 75.0 mm | 34.0 mm x 44.0 mm x 73.0 mm | 41.0 mm x 53.0 mm x 75.0 mm | 34.0 mm x 44.0 mm x 73.0 mm | 41.0 mm x 53.0 mm x 75.0 mm | 34.0 mm x 44.0 mm x 73.0 mm |
| 总重量 | 281 g | 169.5 g | 282 g | 168.5 g | 281.5 g | 168 g | 281 g | 169 g |
| 产品规格下载 | 彩色：NXT rome GS29016C-HQ 黑白：NXT rome GS29016M-GL |
彩色：NXT rio GS29016C-HQ 黑白：NXT rio GS29016M-GL |
彩色：NXT rome GS18031C-HQ 黑白：NXT rome GS18031M-GL |
彩色：NXT rio GS18031C-HQ 黑白：NXT rio GS18031M-GL |
彩色：NXT rome GS23050C-HQ 黑白：NXT rome GS23050M-GL |
彩色：NXT rio GS23050C-HQ 黑白：NXT rio GS23050M-GL |
彩色 ：NXT rome RS18064C-HQ 黑白：NXT rome RS18064M-GL |
彩色：NXT rio RS18064C-HQ 黑白：NXT rio RS18064M-GL |
技术文章
友思特案例 | 搭载AI相机的机器人玩“石头、剪刀、布”
2024年8月21日
IDS NXT一体化推理相机是一个用于智能图像处理的完整系统，在人工智能的帮助下，无需额外的PC，就可以在相机内或者借助相机完成对图像的评估和结果传输，从而实现手势识别，并进行进一步处理，成功让机器人也能玩“石头、剪刀、布”。
友思特分享 | NXT智能AI系统：简单实现AI视觉集成的新选择
2024年8月14日
AI图像处理在检测、分类、计数应用中克服人工操作缺陷的同时，也因技术专业性高导致了广泛普及的困难。友思特NXT借由完整的智能AI系统，仅需几个步骤即可完成AI视觉集成，有效降低了新技术在各行业的应用门槛。
演示视频
技术支持
友思特专业技术支持，助您项目成功
作为专注于机器视觉和光电检测解决方案的供应商，友思特致力于为您提供一系列该产品相关的付费技术服务，旨在以最具成本效益的方式助力您的项目成功。如您需要该产品相关的技术服务，请联系我们！
测试服务
按需进行样品测试与效果评估验证
硬件培训
全方位覆盖硬件产品使用的各环节
软件培训
帮助您迅速掌握软件使用技巧
集成开发
根据您的需求制定完整集成解决方案
更多相关产品
NXT malibu
视频流中的实时AI
首款配备OnCamera AI并可以实现压缩和流媒体功能的工业相机
NXT Experience Kit
完整的推理相机解决方案
包含用户在其生产环境中搭建、训练和运行神经网络所需的所有组件
NXT lighthouse
通用人工智能视觉组件
基于云的软件解决方案，管理训练图像、完成人工智能化图像处理任务
3D立体相机 Ensenso系列
快速、精准、低成本的3D图像捕捉
5个系列，专为不同行业需求而打造，多种外壳和工作距离型号可选
常见问题解答
NXT智能相机的优势?
- 简单的操作流程：我们为新一代易于使用和灵活的工业应用视觉系统创建了一个平台，通过该平台可以完成搭建视觉解决方案的所有任务，从图像采集、图像分析和处理到工业生产机器的控制。通过Lighthouse训练平台，无需掌握任何关于深度学习或编程的知识便能高效、快速地完成训练过程。
- 一体化推理相机：我们为客户开发了专用人工智能芯片“深海芯片”支持硬件加速，将推理功能集成到相机端，只需几毫秒即可完成推理。同时节省了额外的处理硬件、空间和成本。
- 工厂自动化的“即插即用”：相机支持OPC UA，可以用同一种语言与机器和控制器进行通信，并直接交换任务或结果。使用这项关键技术可以将智能相机集成到工厂自动化中，高效推进工厂自动化生产，大大节省开发时间及成本！
友思特IDS Lighthouse软件平台的图像数据安全性如何？
我们的托管合作伙伴微软(Azure Cloud)都遵守严格的安全规范和一系列ISO标准，这意味着您的数据非常安全。谁可以访问您的数据完全由您决定。关于使用托管商的信息友思特IDS lighthouse的更多信息，请参阅我们的使用条款。
友思特卷积神经网络是否也可以在任何其他相机上运行？
ANN不能在任意相机上使用。友思特IDS lighthouse软件平台是专门为训练神经网络执行图像处理任务而开发的，可以我们的2D相机一起使用。rio/rome系列NXT相机配备了我们开发的AI核心，能够以硬件加速的方式执行推理。我们的malibu型号使用Ambarella推出的特殊AI加速器。
NXT智能相机可以支持输出压缩视频流吗？
NXT智能相机系列中的Malibu型号，可以在机内实现基于AI的图像处理、视频压缩、视频流并输出结果。
这款支持AI的工业相机配备索尼Starvis 2系列8 MP滚动快门感光元件IMX678。这样可以实现极佳图像质量和卓越的低光性能，并具备通过相机实时生成4K视频流的能力。可通过MJPEG压缩的HTTP流显示相机的实时图像，可以提供H.264压缩RTSP视频流。
我可以使用智能手机拍摄图像来训练吗？
是的，您也可以使用智能手机拍摄的图像在友思特IDS lighthouse中进行训练，因为导入图像可以通过简单的文件夹存储完成。
我们可以在NXT智能相机上运行并非在lighthouse软件平台中创建的神经网络吗？
rio/rome系列NXT智能相机可以实现这一功能，但必须转换成合适的格式。
如果您已借助Keras（TensorFlow后端）进行训练，则可轻松实现MobileNet等网络架构的转换。我们为此提供了一些专用工具，包NXT ferry。
如果您在转换方面需要更详细的信息或帮助，请联系我们的技术支持团队。
NXT智能相机需要接入计算机设备吗？
不需要，NXT智能相机集成了1.3 GHz Dual Core ARM Cortex-A53 CPU处理芯片，内部有独立的操作系统，图像传入相机后可以直接在边缘端计算处理图像，输出结果。进一步的，可以通过RS232、OPC UA等通信协议与其他主机设备进行数据通信。
友思特 合作伙伴和客户
信任来自日积月累的专业知识和丰富经验
