友思特 新型医疗检测设备的嵌入式视觉解决方案
使用NVIDIA Jetson嵌入式计算机,与高端图像采集的实时图像处理结合
可以实现从4台10 GigE Vision、或4台CoaXPress、或Camera Link 相机进行图像采集和处理
具有高性能的FPGA处理能力,为各类应用场景带来更高的处理速度和更高带宽选择
开放式架构,可灵活自定义图像处理
为什么使用友思特嵌入式视觉设备?
随着工业与医疗领域对实时性、高精度及智能化需求的提升,传统嵌入式视觉系统在带宽、算力和数据处理三大方面面临显著挑战。友思特嵌入式视觉设备通过创新技术,解决了这些瓶颈问题,推动嵌入式视觉系统的进一步发展。
带宽瓶颈的突破
在带宽方面,目前嵌入式视觉平台大多采用易于集成的MIPI接口,再者是USB或1GigE。但此类视觉协议带宽有限,而对于更高带宽的10GigE、CameraLink、CoaXPress协议,似乎没有更优解。而友思特的方案,通过整合10GigE Vision、CoaXPress等高带宽协议,提升数据传输效率。
嵌入式系统的算力提升
在算力方面,随着NVIDIA、NXP等各类应用于专业板载处理器的发展,传统机器视觉和嵌入式视觉之间的区别逐渐减小,并且由于嵌入式视觉系统具有尺寸小、功耗低、低成本等众多优势,被越来越多工业应用选择。
边缘端数据处理挑战
在内存方面,常见的采用云部署的方法由于开发成本高,因此如何实现大量数据在边缘端的处理与系统的稳定运行是亟待解决的问题。友思特的FantoVision边缘计算机能够采用高效的内存管理和数据处理策略解决这个问题。
友思特新型医疗检测设备&高速工业检测嵌入式解决方案
友思特推出的嵌入式视觉设备为工业与医疗检测提供了一个高速、智能、全面的解决方案,
结合了NVIDIA Jetson嵌入式计算机与高端图像采集系统,满足多场景的高效数据处理需求。
集NVIDIA Jetson与图像采集卡于一体的系统
该方案的架构使用NVIDIA Jetson嵌入式计算机,与高端图像采集的实时图像处理结合起来,可以实现从4台10 GigE Vision、或4台CoaXPress、或Camera Link 相机进行图像采集和处理。
高性能的FPGA处理能力
使用Altera Arria 10 FPGA 进行高速图像处理应用,同时可定制各类图像压缩IP。提供丰富的IO接口,支持高达2 TB以上的固态硬盘,为各类应用场景带来更高的处理速度和更高带宽选择。
开放式架构,灵活自定义图像处理
该方案可在GPU和FPGA上实现嵌入式AI/图像处理。用户使用CUDA C/C++和NVIDIA的库在GPU 上对算法进行编程。此外,便捷式FPGA开发套件ProcVision使在FPGA上开发和部署可选的预处理块变得简单快捷。
友思特嵌入式成像系统
作为为高带宽成像而设计的紧凑型嵌入式视觉解决方案,FantoVision 的尺寸为 134 x 90 x 60 mm,因此可以轻松集成到医疗设备外壳中。
支持主流的高带宽相机接口10GigE、CoaXPress 和 Camera Link,最高可达50Gb/s 的速度进行图像采集和处理,15个数据流同时以每秒30-60帧的速度捕获高分辨率图像,
通过在FantoVision边缘计算机上集成专有的压缩算法,实现数据流的压缩,然后传输到AI模组/云端进行 AI 处理。
方案优势
高带宽采集
支持10GigE、CoaXPress2.0和Camera Link
边缘AI推理
NVIDIA Jetson Orin/Xavier系列,可高达100TOPS AI计算
FPGA芯片
Altera Arria 10 FPGA
AI图像处理
支持JetPack SDK,使用CUDA C/C++和NVIDIA AI库
简化开发
FPGA套件支持自动生成HDL、C++代码和接口文档,能够共享相同的接口和数据库
多相机采集
使用InfiniVision™开放式图像采集流程,100多个传感器可以同时同步和处理
客户案例:基于多模态传感技术的生物医疗检测
新型医疗检测设备为充分考虑患者的舒适性和隐私性,其独特的结构特点是在胸部高度有一个大环,连接到控制台,装有多个红外和深度传感器,捕捉患者全身 180° 各个身体部位视图。
这些图像通过部署在FantoVision上复杂的 AI 算法进行实时分析,为医生提供实时可观察、可操作图像画面,例如血管映射和代谢异常检测,从而显著增强临床决策。
集成了长波红外 (LWIR)、近红外 (NIR) 和3D成像等成像技术的检测设备,可以实现收集患者身体组织中热、血管和结构变化的详细数据,
由FantoVision边缘计算机上提供的专有图像压缩算法进行数据流的压缩。然后传输到AI组件/云端分析捕获的数据以识别癌症的数字生物标志物,从而协助风险评估并简化诊断过程。