友思特案例
应用于大型洗衣房自动化项目的高精度3D相机
前言导读
sewts研发的新型智能系统采用友思特合作伙伴提供的IDS相机进行图像处理,该系统的技术现在可用于实现单个生产步骤的自动化,例如给脏污纺织品分类或者给折叠机投料。
应用于洗衣房的智能机器人填补了自动化在该领域的应用鸿沟
纺织和服装产业目前正面临的主要挑战是供应链和能源问题。劳动力和设备数量不足等妨碍生产的因素同时也对未来的产能回复造成威胁,而这进一步加剧了纺织和服装业面临的压力。在全球化背景下,该行业的竞争力取决于受影响的公司如何应对这些挑战。有一种解决方案是以经济上可行的方式将服装生产制造转移回欧洲。更短的运输路线以及因此节约下来的巨大运输成本和减少的温室气体排放都证明了这一方案的优势。但另一方面,纺织业必须设法解决相应的高人工成本和国内普遍的熟练工人人手不足的问题。后者需要纺织业加工进一步实现自动化。
来自慕尼黑的德国科技密集型初创公司 sewts GmbH 已开始关注这一目标背后巨大的需求潜力。这家公司开发的解决方案使机器人可以像真人一样预判纺织品生产工序,从而相应地调整其动作。首先,sewts将目标锁定在工业洗衣应用。凭借一套使用IDS Imaging Development Systems GmbH 2D和3D相机的系统,这家初创企业正对大规模工业洗衣房里仅剩的几个人工步骤中的纺织物展开工序实现自动化。尽管90%的工业洗衣工序已经实现自动化,但剩余的人工操作仍占30%的人工成本。从这一点来看,实现自动化可以节约潜在的巨大成本。
友思特 应用方案
工业洗衣房的确已在高度自动化环境下处理大量的洗涤任务。其中的折叠工序由机器完成。但是,每一台机器通常需要一名工人手动展开需要折叠的纺织物并抚平褶皱后上料到机台。这种上料操作单调繁重,而且效益与付出的人力成本不成比例。此外,合格的员工并不容易找到,这对工业洗衣机产能的利用以及盈利能力都有影响。洗衣业的季节性特点要求较高的灵活性。sewts研发的新型智能系统采用IDS相机进行图像处理,该系统的技术现在可用于实现单个生产步骤的自动化,例如给脏污纺织品分类或者给折叠机投料。
“其中最大的挑战是纺织品的柔顺性,”联合创始人兼技术总监Tim Doerks解释道。借助机器人和AI解决方案,对像金属这些固形材料的加工工序自动化改造相对而言没什么问题,但是可用的软件解决方案和一般的图像处理方法对易形变材料处理仍存在局限性。因此,商用机器人和抓取系统目前仅能执行像抓取一条毛巾或一块布料等简单操作,这对于实现单一工序自动化来说远远不够。但sewts的系统VELUM则可以胜任这项任务。借助智能软件和易于集成的IDS相机,sewts可以分析纺织品这类尺寸不稳定的材料。多亏有全新技术,机器人能够实时预测这些材料在抓取过程中的运动轨迹。它使VELUM能够轻松地将毛巾或用毛圈布制成的亚麻织物送入现有的折叠机,且保证没有褶皱,这填补了低成本自动化应用这一空白。
本软件套装由sewts开发,能够与商用机器人、夹持器和相机组合成一套智能系统。“在寻找合适的相机模块时,除了工业适用性这一必不可少的指标之外,这家慕尼黑公司还需要考虑其他几项关键性指标:我们需要具有成本效益的3D相机,因为根据系统配置,将会用到两到三台相机。除了以上要求外它还必须确保深度数据的高精确度,”Tim Doerks解释道。
“另外,我们系统中所用的2D相机必须具备高感光度和高动态范围,而且可在多相机系统中使用。” 最终,公司的创始人从IDS系列产品中找到了心仪的相机:对于VELUM多相机系统,sewts将选择锁定在IDS全新的Ensenso S10 3D相机以及uEye CP系列相机。它们的任务是在2D和3D模式下识别纺织品上料到系统时的抓取点特征,这些纺织品在之前的洗涤烘干工序被无序地置于容器中或传送带上。单个物体的形状和位置均无法预测。相机捕到捉纺织品不同的面料质感。并区分出毛巾的卷边和四角。
“我们将2D和3D相机拍到的图像进行匹配并根据3D数据获得更高的2D分辨率。也就是说在这个过程中我们分别利用2D相机的高分辨率和3D相机的精确深度数据。“”
— sewts 的联合创始人兼技术总监Tim Doerks —
配备了160万像素Sony传感器的Ensenso S10相机基于结构光运用了以下3D过程:即使面对目标复杂表面或弱光环境,窄频红外激光投影仪也可将一个高对比度点状图案投影到目标物体上面。每一个被160万像素Sony传感器捕捉到的图像能提供一个多达85,000个深度点的完整点云。通过人工智能,相机可靠地将捕获的激光点映射到投影的硬编码位置。这提供了充分的3D数据,加之必要的深度精确度,VELUM可以从中提取到抓取点的坐标。
配套安装了GigE Vision固件的GV-5280CP-C-HQ工业相机配有Sony IMX264 2/3″全局快门CMOS传感器。在变化的光照条件下,它在应用中用全速率以22 fps的帧率传送几乎无噪点、高对比度的500万像素 5:4 尺寸图像。凭借内置用于缓冲图像序列的120M图像内存,这些uEye CP相机功能非常强大并自带大规模像素预处理功能,因此非常适合这种多相机系统。这款相机仅重50克,而且小巧的镁合金外壳轻质耐用,因此特别适合在对空间要求极高的应用场景或机械臂上使用。
友思特 方案软件
根据客户需求或配置,将用到两到三台uEye 2D或 Ensenso 3D相机。这两款相机均可无缝集成到VELUM系统中。“在准备生成数据方面,我们是专家,这一点对于处理3D点云数据而言尤为重要。这种预处理是我们系统的一个重要组成部分,它为人工智能提供合适的输入数据,”Tim Doerks 强调。sewts开发的AI会处理uEye CP或Ensenso S相机提供的数据。智能软件可以根据线缝走向、局部起伏或线缝相对位置分析纺织品的结构,并根据不同的材质和刺绣图案划分纺织品的类型和等级,并将这些结果转换成机器命令。
数据经由卷积神经网络(CNN)和常规图像处理过程处理。“我们使用IDS的开发工具包IDS peak。我们通过Python和IDS库连接至我们的系统,”sewts的联合创始人兼制造总监Till Rickert透露。“IDS软件包的附加价值主要在于其易于校正和集成到我们的High Tech Vision系统,”他继续道。
“AI是我们技术的核心。需要智能算法来构建适当的系统以应对非确定性自动化处理工序。因而我们利用最新AI研究成果,根据我们的需要进行改良并将各部分继承以最终形成一个大的整体方案,”Till Rickert补充道。它接收各种传感器数据(比如光学信息),以近似人类的认知水平得出结论并将其转换成机器命令。这样,像VELUM这样的系统就能够执行以前需要人脑来判断的任务。这正是sewt的企业理念所在:“我们的目标是将复杂的人力作业转换成流畅的自动化流程”。
友思特 方案应用前景
凭借像VELUM这样的系统,洗衣房可以显著地提升产能,而无需考虑人员配置,进而提高盈利能力。“通过填补了自动化应用的巨大鸿沟,我们几乎可以让一条纺织品洗涤产线的产能翻一番,”sewt总裁Alexander Bley说道。
IDS相机未来还可用于像衬衫和裤子这类服装。“理解这些材质特点很重要,这样才能稳扎稳打地实施我们的流程。我们通过成熟的材料模拟技术达到了这个目的。为了模拟纺织品的运动轨迹,我们用有限元分析方法创建了特殊的FE模拟方式,”Alexander Bley解释道。但这家慕尼黑公司还有更长远的愿景:“我们要让服装生产的自动化改造成为可能,并以符合成本效益的方式将其投入使用。因此,我们会缩短运输距离,建立更可靠的供应链,减少二氧化碳排放并解决产能过剩问题。”
此外,我们也计划将其扩展至非纺织品材料方面的应用。这种技术有许多潜在的应用场合,图像处理始终在其中发挥重要作用。人工智能会加速这一开发过程。
友思特 方案产品套装介绍
Ensenso S相机
● 超小巧且性价比高
● AI支持的高3D数据传输率和高精确度
● 即使在弱光环境下亦可获得的稳健的3D数据
● 基于AI的激光点图形三角测量技术的结构光法
● 适用于物流行业自动化、机器人视觉、障碍物检测与监控和园艺作业自动化等的应用场景
uEye 工业相机
● 传感器类型:CMOS
● 生产商:Sony
● 帧率:24.0 fps
● 分辨率(水平x垂直):2448 x 2048像素
● 快门:全局快门
● 分辨率:501万像素
● 尺寸:29 x 29 x 29 毫米
● 重量:52 g
● 连接器:GigE RJ45,螺丝旋紧式
● 应用范围:工业图像处理、机械工程、表面检查、医学技术、交通运输、品质保证等。