智能工业机器看到了前所未有的未来

结合先进的操作员显示器和摄像系统,可以创建ADAS和更智能的机器控制,以提高操作员的工作效率。

改进的CCpilot显示器的处理能力允许先进的机器控制和改进的操作洞察力。
改进的CCpilot显示器的处理能力允许先进的机器控制和改进的操作洞察力。
CrossControl

换班——操作员看着她的屏幕,通过面部识别登录,并读出一组新的指令。一旦她读完了说明书,面向她的摄像头就会感应到她已经读完了这一页,然后切换屏幕,显示机器的前置摄像头发出的视频。屏幕上显示了一条路径,叠加在摄像机馈线上,沿着仓库的地板,她驾驶着她的机器。当她走近一组又高又宽的货架时,在一条由又高又宽的货架组成的小巷的尽头,屏幕上用亮绿色突出了第三个货架上的一个托盘;叠加路径在托盘的正前方完成,上面有一个小正方形,表示这是她要检索的对象。当她到达广场时,屏幕切换到机器顶部的摄像头馈电,并聚焦在高亮显示的负载上。当她启动升降叉时,她看到引导线显示她的工具尖端与她头顶上方15英尺(4.6米)的托盘一致;当与托盘对齐时,机床的刀具控制自动停止。

像这样的场景在无数科幻小说和电影中出现过,包括34年前的《异形》的片头。尽管这部电影的背景设定在150多年后,但它所预言的未来- - - - - -至少在材料处理和ADAS(高级驾驶辅助系统)方面是如此- - - - - -已经来了。

在机器智能平台中加入先进的电子设备可以帮助创建智能系统,帮助操作员更有效地完成上述场景中的任务。例如,CrossControl新推出的CCpilot V700就是其核心功能基于iMX8的ARM应用处理器.这是最新一代NXP处理器,它比上一代iMX6芯片组强大得多。CrossControl在V700中使用的iMX8版本的图形性能是基于iMX6的显示器的三倍。这种性能的提升与扩展的API和软件支持相结合,为系统采用者提供了解锁和交付运营商支持工具所需的工具,而无需昂贵的定制系统。

新支持的关键计算机api之一是Vulkan。Vulkan提供了对机载GPU的高效访问,从而更好地分配资源。这使得系统可以在更低的温度下运行更多的应用程序,从而获得更大的性能收益。此外,需要对Vulkan的支持来充分利用Qt 6完全重新设计的图形后端,预计Qt 6将在今年年底推出。Qt一直是在嵌入式设备上创建图形用户界面的最佳类工具链之一。

iMX8系列应用处理器将成为恩智浦未来10年的旗舰产品,确保在此期间提供10年的支持和软件增强。这意味着使用这个核心的任何设备都可以支持一台新的或正在开发中的机器的整个生命周期。此外,芯片组还增加了对硬件加速视频编解码器的支持,不仅包括H264,还包括H265(高达4k分辨率和每秒60帧),允许开发人员在如何将视频纳入其应用程序方面具有更大的设计灵活性。它还允许Gstreamer- - - - - -一个用于创建媒体应用程序的开源多媒体框架——以较低的资源需求提供更流畅的播放。

V700中使用的iMX8的图形性能是以前版本的3倍。 V700中使用的iMX8的图形性能是以前版本的3倍。 CrossControl

摄像头增加了智能机器的功能

随着以太网摄像头的发展,复杂的摄像头系统可以部署在车辆上,以提供增强的视觉解决方案。以太网摄像头可以与更先进的计算单元配对,对机器的日常任务产生更大的影响。例如,部署多个摄像头的大型机器可以利用更先进的显示器在单个单元中呈现所有摄像头流。这种方法利用了将多个以太网摄像机连接到单个系统的便利性。操作员可以在feed之间滑动,将多个feed安排到他们首选的网格中,加载网格预设以适应特定的常见任务,甚至可以通过基于触摸的平移、旋转和缩放功能直观地控制feed,以支持需要精度和准确性的更集中的任务。

Stoneridge-Orlaco EMOS摄像机可提供30-180度的视角,这是一种以太网摄像机,可以与其他组件结合使用,以创建先进的视觉系统。

EMOS摄像机与CCpilot V700等先进显示器的集成可以利用机器学习派生的解决方案来部署生产力辅助设备。在过去的几年里,CrossControl的工程师一直致力于将这些解决方案集成并优化到公司的系统中。曾经需要最强大的系统才能实现的功能,现在可以利用新一代芯片组和现代架构来实现相同的结果。由此产生的基于机器学习的ADAS可以帮助提高机器操作员的生产力,并减少新员工的学习曲线。

以太网摄像头的发展使复杂的摄像头系统能够部署在车辆上,以提供增强的视觉解决方案。 以太网摄像头的发展使复杂的摄像头系统能够部署在车辆上,以提供增强的视觉解决方案。 Stoneridge-Orlaco

来自前向EMOS摄像机的馈电可以显示在CCpilot显示器上,并覆盖显示引导线。这有助于经验不足的操作人员遵循优化的驾驶路线,引导机器避免危险或轻松导航复杂路线。该系统甚至可以包含危险警告,通过结合用于识别潜在危险的附加算法来识别机器路径上的人员或障碍物。

虽然非常有经验的操作员可能在第一次尝试时就能完美地对准他们的工具,或者挖一个精确的深度和周长,但大多数车辆操作员依赖于某种形式的外部检查。通过正确的外部摄像头实现,甚至可以控制工具本身,特别是当工具在操作人员的视野之外使用时,尤其是在叉车和起重机的情况下。通过多年的实践,知道如何以及在哪里操作机器是一种罕见的技能,而因为相机提供了完美的视点而知道是一种很容易获得的技能。

阅读更多:无反光镜汽车比它们看起来更近

虽然大多数EMOS摄像头都部署在机舱外,但越来越多的制造商将内部摄像头作为完整系统的一部分。这使得平台可以利用内部摄像头来确保安全。就像现在使用某种形式的面部识别的高级手机和笔记本电脑一样,这些车内摄像头可以让设备利用面部识别作为车辆正常启动顺序的一部分,确保只有授权人员才能操作给定的车辆。一旦操作员通过了安全检查,一个积极的ID还可以让机器根据用户的工作时间表和个人喜好自动设置自己。

虽然在大多数情况下,不需要显示来自内部摄像头的提要,但提要仍然可以在整个工作日使用,帮助生产力时,自动移动到下一个屏幕信息consumed-allowing运营商保持他们的手在控制,提高整体安全监控运营商现在疲劳或缺乏集中的机器学习人工智能(人工智能)系统可以监控和分析眼球运动和训练,必要时,发出警告,如果检测到驱动程序是否累足够关注手头的任务。

通过利用这些新工具,系统开发人员可以让他们的机器看到比以前更多的东西。利用这些工具收集的信息,可以创造更智能的机器,从而提高从仓库到山腰的生产力。

Stoneridge-Orlaco EMOS摄像机的视角为30-180度。 Stoneridge-Orlaco EMOS摄像机的视角为30-180度。 Stoneridge-Orlaco


本文由CrossControl软件开发主管Ken Lindfors和Stoneridge-Orlaco内容营销人员Thieme Wels撰写和贡献。

本文涉及的公司
最新的