工业互联网下的增强现实

news/2024/5/10 22:27:09

工业互联网下的增强现实

1、 概述

增强现实(Augmented Reality,简称AR),增强现实技术也被称为扩增现实,AR增强现实技术是促使真实世界信息和虚拟世界信息内容之间综合在一起的较新的技术内容,其将原本在现实世界的空间范围中比较难以进行体验的实体信息在电脑等科学技术的基础上,实施模拟仿真处理,叠加将虚拟信息内容在真实世界中加以有效应用,并且在这一过程中能够被人类感官所感知,从而实现超越现实的感官体验。真实环境和虚拟物体之间重叠之后,能够在同一个画面以及空间中同时存在。 增强现实技术不仅能够有效体现出真实世界的内容,也能够促使虚拟的信息内容显示出来,这些细腻内容相互补充和叠加。在视觉化的增强现实中,用户需要在头盔显示器的基础上,促使真实世界能够和电脑图形之间重合在一起,在重合之后可以充分看到真实的世界围绕着它。增强现实技术中主要有多媒体和三维建模以及场景融合等新的技术和手段,增强现实所提供的信息内容和人类能够感知的信息内容之间存在着明显不同。

工业互联网(Industrial Internet)是新一代信息通信技术与工业经济深度融合的新型基础设施、应用模式和工业生态,通过对人、机、物、系统等的全面连接,构建起覆盖全产业链、全价值链的全新制造和服务体系,为工业乃至产业数字化、网络化、智能化发展提供了实现途径,是第四次工业革命的重要基石。工业互联网不是互联网在工业的简单应用,而是具有更为丰富的内涵和外延。它以网络为基础、平台为中枢、数据为要素、安全为保障,既是工业数字化、网络化、智能化转型的基础设施,也是互联网、大数据、人工智能与实体经济深度融合的应用模式,同时也是一种新业态、新产业,将重塑企业形态、供应链和产业链。当前,工业互联网融合应用向国民经济重点行业广泛拓展,形成平台化设计、智能化制造、网络化协同、个性化定制、服务化延伸、数字化管理六大新模式,赋能、赋智、赋值作用不断显现,有力的促进了实体经济提质、增效、降本、绿色、安全发展。

随着2021年元宇宙概念爆发以来,关于工业元宇宙的话题讨论一直层出不穷,尽管众说纷纭,但工业元宇宙已经从“话题”变为“趋势”,人们对于工业元宇宙的讨论也从“是否可行”变为“如何落地”。而AR +工业互联网成为工业元宇宙的初探,《工业元宇宙白皮书》指出:工业元宇宙推动工业互联网叠加 XR、人工智能、区块链等技术,按照分布式设计、生产,以去中心化的经济运转模式往前发展和演进[1]。

2 、技术概览

2.1 增强现实技术简介

增强现实是一种基于计算机实时计算和多传感器融合,将现实世界与虚拟信息结合起来的技术。该技术通过对人的视觉、听觉、嗅觉、触觉等感受进行模拟和再输出,并将虚拟信息叠加到真实信息上,给人提供超越真实世界感受的体验。目前广泛接受的一种定义是Azume在1997年提出的,他认为AR应该具有三个特征:(1)结合真实与虚拟;(2)实时交互;(3)支持三维注册

我们所要讨论的增强现实,主要是视觉增强现实技术,核心在于虚拟信息和真实世界在物理空间中的匹配以及可视化。增强现实是一个多学科交叉的研究领域,内容纷繁复杂,选取其中某个点深入下去都可以作为长久的研究课题。一个完整的AR系统至少有三个部分:跟踪、注册和显示。

img

增强现实与虚拟现实、混合现实的关系:根据一个系统中虚拟与现实的占比,可以将系统分为4类:真实现实、增强现实、增强虚拟、虚拟现实。而增强现实和增强虚拟又可以合称混合现实。

img

从上图可以看出,橙色代表虚拟成分,蓝色代表真实成分。当只有真实世界信息的时候,属于纯粹的真实现实,典型的就是我们带摄像功能的手机,以及我们佩戴的普通眼镜。当系统中既有真实信息又有虚拟信息的时候,叫做混合现实。此时,如果虚拟信息是服务于真实世界的,且数量较少,占次要地位,则归为增强现实,典型系统是手机导航系统;如果虚拟信息是主体,而真实信息是为虚拟信息服务的,那就叫增强虚拟。最后,如果信息全为虚拟,则是虚拟现实,典型系统是各类虚拟现实游戏。

2.2增强现实技术起源

Sutherland在1968年完成了第一台头盔显示器,堪称头盔显示器的开山祖师。不过由于当时技术限制,该设备非常笨重,需要悬挂在房顶上使用,于是被戏称为“达摩克利斯之剑”。

img

70年代、80年代也有很多研究者做了相关的研究工作,但是直到90年代初期,“Augmented Reality”这个词汇才首次诞生。渐渐地,增强现实脱去虚拟现实的外衣,成为一个独立的研究领域。

随着21世纪初期智能手机的兴起,增强现实有了天然的开发载体,视频式的增强现实迅速发展起来。这也得益于ARToolKit和Vuforia等基于图像的跟踪定位工具的相继推出。如下图,使用智能手机和平板电脑作为平台的增强现实应用,目前已经非常普遍。

img

但是,智能手机和平板电脑毕竟只是视频式的增强现实,相比于光学式的来说,还是少了一点科技感和刺激感。于是谷歌在2012年发布了Google Glass,为增强现实的发展注入了新的活力。它对于AR发展的作用应该就像是Facebook的Oculus Rift之于虚拟现实一般。2014年3月26日,Facebook宣布将以约20亿美元的总价收购沉浸式虚拟现实技术公司Oculus VR。这一事件极大地推动了虚拟现实的发展。

类似地,Google等商业巨头投身AR,也必将对AR起到巨大作用。尽管后来GoogleGlass停产,但是其作用不可忽视。之后,又有更多的公司推出了自己的光学式增强现实眼镜,最著名的是Microsoft Hololens和Maigc Leap。

img

2.3 显示技术

1、近眼式显示设备:

近眼显示设备主要是指头盔显示器。头盔显示器主要分为两种:光学透射式头盔显示器和视频透射式头盔显示器。当然如果按照显示器件数量,也可以划分为单目头盔显示器和双目头盔显示器。这里主要讨论光学式(左)和视频式(右)的区别。

img

光学透射式头盔显示器是直接透射外界的光线,并且反射微投影器件产生的虚拟图像到人眼中,达到虚实融合的效果。优点是可以保证正确的视点和清晰的背景,缺点是虚拟信息和真实信息融合度低,且人眼标定比较复杂。目前市面上典型的光学透射式头盔显示器有Hololens和Meta2等。

img

而视频透射式头盔显示器,是将固定在头盔上的摄像头所捕获的图像,通过视点偏移来显示到眼前的显示器上。优点是虚实融合效果好,无需标定人眼,缺点是视点难以完全补偿到正确的位置,且与镜片范围外的环境不能完美衔接。将上面的光学透射式头盔显示器,加上摄像头,并且把带有增强信息的视频直接全屏显示,就成为了视频透射式设备了。很巧的是,很多光学透射式设备,确实在其上加装了这种摄像头,但是它们的本意是用摄像头来作为跟踪模块的。

2、手持式显示设备:

手持式显示设备,顾名思义就是拿在手上的显示设备。最常见的就是我们的智能手机和平板电脑。这类设备具有很好的便携性,是一种天然的AR设备。它们有摄像头作为图像输入设备,有自带的处理器,有显示单元,具备了进行AR开发的所有条件。在目前市面上,很多增强现实APP都是围绕这类设备开发的。

3、固定式显示设备:

桌面级显示器,这是我们日常生活中最常见的一类显示器了。给它添加一个网络摄像头,就可以完成AR任务了。该摄像头可以捕捉空间中的图像,然后估计摄像头的位置和姿态,最后计算生成虚拟信息,并进行虚实融合,输出到桌面显示器上。这类设备适合做一些科研类的开发,对于商业应用显得有些笨重,比起手机和平板来说稍逊一筹。

虚拟镜子,这是利用摄像头对着人进行拍摄,然后输出到一个类似于镜子的大型显示器上,给人一种照镜子的感觉。同时,还可以进行虚拟换装,或者添加一些虚拟物件,达到AR效果。

还有一些固定显示器,类似于雾幕、水幕、全息膜等,在上面投影出增强信息,可以实现AR效果。

img

4、投影式显示设备

投影机是一种重要的虚拟现实和增强现实设备。最常见的基于投影的增强现实系统是在展会上的各种绚丽的投影展品,包括虚拟地球、汽车表面投影等。这类系统属于空间增强现实系统。另外,柱幕、球幕、环幕投影也可以归为基于投影的空间增强现实。

投影机还可以用于构建CAVE系统。手持式投影机结合图像捕捉设备,还可以建立动态的空间增强现实系统。

img
5、小结与分析

增强现实中主要的显示设备就是以上这些。如果要开展关于显示技术的研究,从硬件方面来讲,就是显示材料、器件的研发。当然这与增强现实并没有高度相关性,只能说显示设备参数的提升,可以间接促进增强现实系统性能提升。但是显示方面,软件还是可以有些值得做的东西,并且与增强现实体验息息相关。那就是头盔显示器的显示畸变校正和投影机画面拼接融合,这些技术都直接影响着增强现实系统虚实融合精度和整体可用性。

研究增强现实技术的人,很多是侧重于系统集成和应用测评,或者是直接将AR系统应用在其他的研究领域。因此,这些人一般不会研究显示元器件的细节,而更加关注如何拿现有的材料或者设备来构建新型显示系统。如果能够做出新的AR系统,并且具有实用意义,也是非常有研究价值的。

2.4跟踪技术

跟踪理论会涉及到一些空间坐标转换的基础知识,以摄像机跟踪为例,分为模型坐标空间、世界坐标空间、摄像机坐标空间和图像坐标空间。由于比较细节,这里不展开讨论,相关知识可以查阅计算机视觉书籍即可。这里以不同种类的跟踪系统为例来讨论跟踪技术。

1、固定式跟踪系统:

机械跟踪器通过控制机械臂各个关节的转动来跟踪机械臂末端的空间位置,属于比较老的跟踪方式,但是精度可以控制得比较高。

img

电磁跟踪器是通过一个固定的发射源发射出三维正交的电磁场,接收端通过检测接收到的电磁场的方向和强度来确定位姿。

超声波跟踪器则是通过测量一个声音脉冲从发射源到传感器的飞行时间来测量距离。

2、移动式传感器:

GPS,全称是全球定位系统。这个系统在智能手机上应用很普遍。它通过接收多颗卫星信号来确定当前所处的位置。对于户外大范围增强现实有着重要意义。

img

无线网是通过检测移动设备接入点信息来粗略确定移动设备所处位置的。它可以配合GPS使用。

img

磁力计,也称电子罗盘,通过检测地球的磁场来确定方向。

img

陀螺仪和线性加速度计都是依靠惯性来进行测量的。陀螺仪测量三轴角度变化,线性加速度计测量位置变化。它们通常会配合使用,并且常以微机电系统(MEMS, Micro-Electro-Mechanical System)的形式存在。

img

里程计是通过轮式或者光电编码器来测量所走过路程的一种传感器,常用在机器人或者交通工具中。

3、光学跟踪技术:

(1)跟踪模式

有些跟踪需要对被跟踪的目标预先建模,例如一些图像跟踪工具箱。有的则不需要提前建模,例如同步定位与跟踪技术(SLAM)。多数跟踪是需要提前建立一个待跟踪模型数据库的,然后在运行中实时提取特征并且与数据库中的数据进行比对。而SLAM则可以实时根据获得的特征,自主建立空间地图,并且确定摄像头相对于环境的位置。

目前研究的比较火热的是SLAM。因此,可以研究SLAM中的各个环节,从跟踪、建图、回环检测等角度研究如何提升SLAM系统的精度,以及面对复杂环境的稳定性问题。

img

(2)照明种类

跟踪的稳定性与环境光有关,尤其是基于视觉的跟踪。有些跟踪系统不需要自主添加光源,只是利用环境光,称为被动照明;有些跟踪需要主动发射某种照明光线,来实现其跟踪,称为主动照明。被动照明是比较常见的,例如平面标志跟踪就是在普通的环境照明下实现的。主动照明最典型的就是结构光照明,例如Kinect。还有一种主动发射红外光的OptiTrack系统,做姿态跟踪效果很好。

img

(3)人工标志与自然特征

人工标志指的是人造的用于跟踪的图像标志等。例如二维码、棋盘格等。自然特征指的是自然环境中本身就有的特征,不是人为放置用来跟踪的特征。普通的室内环境、街边的楼宇都可以认为是自然特征。人工标志根据其种类不同,需要特定针对性算法进行检测和跟踪,自然特征通常使用SIFT、SURF、ORB等特征描述子来进行特征提取和跟踪。

img

4、传感器融合

互补式融合:不同的传感器测量的是不同种类的参数,可以互相补充。

竞争式融合:不同传感器测量的是同一个种类的参数,则使用某种方式将它们结合起来,产生一个更好的测量结果.

协作式融合:不同传感器之间是协作关系,其中某个传感器可能依赖于其他的传感器才能得出结果。

5、小结与分析

纯粹的跟踪技术研究,不仅可以服务于增强现实,也可以服务于虚拟现实,以及其他需要用到该技术的领域。研究跟踪技术,可以从多视图几何方向入手,通过几何的方式来估计位姿。也可以从特征角度入手,针对特定的问题,设计不同的特征表述方式,解决问题。

SLAM研究者们通常会考虑怎样建立更加稳健的SLAM系统,怎样对抗真实环境中的噪声,怎样进行更好的回环检测等。研究惯性测量单元(IMU)与视觉融合进行SLAM的也大有人在,多传感器数据融合对于SLAM来讲有重要的意义。

在研究基于视觉的跟踪技术时,会用到很多计算机视觉算法。计算机视觉本身就是一个很庞大的学科,感兴趣的读者可以根据自己的兴趣,选择相应的书籍进行展开阅读。这里推荐两本书,一本是《计算机视觉——算法与应用》,另一本是《计算机视觉中的多视图几何》。

2.5标定和注册

跟踪、标定和注册是AR系统研究的三个核心问题。前面我们已经讲了跟踪技术,这里将对标定和注册进行叙述。

img

1、摄像机标定

(1)标定内参数

摄像头是基于视觉的AR系统的重要组件。所以在使用中必须先标定摄像头的内参数。对于普通的摄像头,可以采用matlab自带的摄像头标定工具箱来标定。不仅可以标定出摄像头的内参数,还能标定出镜头畸变。该工具箱采用的是棋盘格标定法。

img

(2)校正镜头畸变

镜头畸变可以分为径向畸变和切向畸变两种。它们也都可以通过标定来确定畸变参数。镜头畸变是普遍存在的,所以在使用之前要记得先进行标定。

2、显示器标定

(1)单点主动对准法

对于光学透射式头盔显示器,要进行AR开发的话,必须加上一个摄像头。摄像头与头盔显示器之间的位置关系需要标定。最常用的一种方法是单点主动对准法(SPAAM)。这个方法要求用户佩戴头盔显示器,并且将屏幕上的一些十字光标与真实世界中的物体进行多次对齐,多次对齐需要通过头部转动完成。数据获取后,通过DLT方法构建方程组求解投影矩阵。

img

(2)使用瞄准转置

该方法需要将瞄准装置与显示器上的十字叉丝对准,而不是使用在SPAAM中用到的静止标定点。这种瞄准装置经常是作为AR设备的一部分,并且包括一个触发器来确认对准完成。瞄准装置有一个优势,用户不必再移动头部来完成对准,取而代之的是,可以通过移动手臂来完成。

3、注册

跟踪系统在进行测量的时候,会存在测量误差,导致位置估计不准。这种误差会导致注册的虚拟物体与真实物体之间会存在不匹配的情况。所以,在每一个步骤要严格控制误差,不要让误差在后面的环节中传播。

对于光学透射式增强现实来说,还有另一个非常重要的问题,那就是延迟。由于真实的环境背景是直接透射进人眼的,可以认为是零延迟的。但是虚拟信息是通过摄像头捕捉环境,建立跟踪注册信息,然后渲染输出到头盔显示器上。这个回路的处理时间导致虚拟信息的渲染比头部转动会有延迟。一个比较有效的方法是在视觉跟踪的基础上,加入高反应速度的IMU,对这种延迟进行补偿。头部的快速运动可以根据IMU的反馈来渲染图像。

4、小结与分析

摄像头标定本身已经是一个很成熟的领域了,除非有什么新的摄像头类型推出。光学透射式头盔显示器的标定也比较成熟,但是还是存在问题。比如标定程序复杂,不同用户之间通用性低。所以可以根据人眼与HMD之间的特殊性,研究提升标定效果的方法。另外,还可以考虑减小延迟,比如考虑视觉IMU融合。这种方法已经在Hololens上获得成功应用。减小延迟的方法除了使用视觉IMU融合,应当还有别的途径,这些都是值得研究的地方。

2.6视觉一致性

1、几何一致性

增强现实系统呈现的效果应该是虚实高度融合的,让人分不清哪里是虚的,哪里是实的。高度融合体现在虚拟物体被放置在正确的位置上,没有与真实物体产生错误的重叠。几何一致性还要求在时间变化中保证几何一致。例如,在光学透射式头盔显示器中,快速的头部运动会导致虚拟图像的渲染落后于真实的环境,导致图像延迟现象。这就违反了几何一致性要求。

另外,虚实遮挡也要保持一致。有的时候虚拟的物体在空间上应该被渲染到真实物体的后面。但是默认情况下,虚拟的物体总会挡在真实物体的前面。因此,必须使用额外的传感器,探测出真实物体的空间位置,然后决定哪些虚拟图像是应该被遮挡起来的。

还有一些研究人员对增强现实头戴式显示器的深度感知一致性做了研究。他们分析了使用双目头盔显示器看到的虚拟物体与真实物体在深度感知上的一致性。

img

2、光照一致性

虚拟世界的光线往往是人为设定的,但是真实世界的光线是非常复杂的。因此渲染的虚拟物体怎样保持与真实环境一致的光照效果,也是需要注意的。光照效果如果不一致,尤其是阴影的渲染不一致的话,会导致非常糟糕的效果。解决这个问题的途径是,通过某个方式获得真实环境中的光源分布,然后在虚拟世界中模拟这个光照效果。

img

3、小结与分析

视觉一致性分析实际上主要是对增强现实系统的表现进行评价。一旦涉及到用户研究,就有很多值得研究的工作。比如研究AR系统的几何一致性对用户使用头盔效率的影响,以及图像呈现与环境配合关系。尤其是光照研究,自然光照是非常复杂的,要想完全模拟自然光是非常难的。所以这个点上还是有很多值得研究的东西的。

2.7交互技术

交互听起来有些陌生有些抽象,但是确是一个非常常见的过程。比如,我们日常使用鼠标键盘就是在与计算机进行交互。人机交互就是人与机器之间进行信息沟通的过程。按照交互方式的不同,增强现实中的人机交互技术可以分为多种,下面一一介绍。

1、设备交互

传统的交互最被大众熟知。鼠标键盘的几十年发展证明这种人机交互方式非常有效。但是对于增强现实应用,却不一定是最好的结果。一些被广泛用于虚拟现实的设备,例如数据手套、力反馈装置、数据衣等,也可以应用在增强现实中,但是加入这些装置后,会明显觉得环境不协调,对增强现实应用的效果有影响。

img

2、肢体交互

随着Kinect等设备的推出,肢体交互在投影式增强现实中获得广泛应用。肢体交互不仅解放了双手,而且促进了全身的均衡运动,可以理解为一种非常健康时尚的交互方式。因此,肢体交互在游戏娱乐领域获得了广泛的应用。

img

3、手势交互

很多桌面级的应用,也可以选择手势交互作为一种交互方式。手势交互依赖于手势检测设备,现有的手势检测设备有LeapMotion和RealSense等。这类设备极大地促进了手势在人机交互中的推广。

img

4、语音交互

随着人工智能技术的发展,语音识别准确度和效率明显提升。因此,语音交互也变得越来越普遍。

img

5、触摸交互

触摸交互是针对专门的触摸设备来的。其实触摸交互也算是比较早发展起来的了。大部分智能手机手势触摸屏,而且有些智能眼镜也在镜框上设置了触摸区域。

img

6、 眼动交互

通过图像设备捕捉人眼运动,也可以实现人机交互。只不过这种方式仅仅适用于非常特殊的情况下,长时间的眼动交互会比较疲惫。

img

7、脑机接口

最新的人机交互方式莫过于脑机接口。它通过读取人大脑的活动,来产生控制信号,对外界的设备进行控制。目前还只能实现比较初级的控制,完全解读人脑意念信息还是任重而道远。

img

8、小结与分析

人机交互是一个非常大的研究领域,在增强现实中涉及到的人机交互技术也有很多。我们可以针对某种交互形式展开研究,无论是建立人机交互接口,还是评测交互性能,都是一个不错的切入点。相信很多读者都会有兴趣构建一套属于自己的人机交互系统吧。

2.8可视化

增强现实中的可视化,主要是对场景中的物体进行标注和解释。对于标注和解释的合理性和正确性,需要经过仔细探究。一个场景中可能有很多东西可以标注,也有很多来自数据库的信息可以呈现。但是如果不加选择全部显示出来,还是会发成数据冗余、屏幕混乱的情况。因此需要对数据进行过滤,考虑两个方面的问题:第一,标注的合理性;第二,数据推送智能性。

img

3 、主要应用

1、创作:

增强现实可以用于创作小故事,运用该技术可以尽情发挥个人想象力,构建出自己的各种物品、房间乃至城市。

img

2、导航:

增强现实技术可以应用于导航。将虚拟的导航信息叠加在真实的道路信息上,甚至可以将信息投影在汽车的玻璃上,最大程度为用户提供方便。

img

3、协作

增强现实技术可以为多个用户创建一个统一的协作平台,构建出一个虚拟的共享空间。多个用户不论是否在同一地点,都可以通过增强现实的方式实现资源和信息共享。

img

4 、增强现实在工业互联网下的应用

1、远程诊断协作:

能够让员工连接远程专家,共享同一环境的实时视图,具有高清视频通话、AR笔迹标注、模型投放的功能。远程专家通过移动端设备,就能将指导信息绘制在屏幕中物体的表面上,仿佛锚定在真实物体表面上一样,让员工在远程高效掌握知识技能和操作步骤,现场人员与专家实时共享AR采集的画面,并支持多位专家同时远程绘制数字注释,精准定位物理对象,让专家一步步指导现场完成设备操作过程[2]。

img

远程AR标记现场人员与专家实时共享AR采集的画面,并支持多位专家同时远程绘制数字注释,精准定位物理对象,让专家一步步指导现场完成设备操作过程。

img

AR模型投放:将三维模型带到一线设备现场,可视化精密设备内部构造,为员工降低复杂问题理解难度,迅速定位问题点,高效解决问题。

img

通过远程专家指导系统,将现场工作人员的第一视角画面分享至远端专家,从而为现场工作人员提供“一对一、手把手”的技术支持。远端专家可通过语音、在画面对应位置进行标注的方式,对现场工程师的工作进行指导,并且指导内容在云端进行记录、存储,从而便于其他使用者进行溯源或者回看。

img

2、设备可视化巡检维修指导系统:

img

为工作人员的日常设备巡检提供智能化辅助支持。通过人工智能视觉识别的方式,对设备的压力表指针或者读数进行采集分析,一旦系统判别指针位置或系统读数超过预定的范围,则系统会自动告警,显示故障,从而有效帮助现场巡检人员智能化判断各设备的运行状态。

img

img

通过AR+AI技术,构筑智慧大脑,系统通过派单功能自动给相关工作人员进行派单,派单完成后,现场工作人员佩戴设备抵达现场,设备基于地理位置或者图像识别技术完成签到,签到后系统按照巡检规范,指引现场工作人员到达对应设备前完成各设备运行压力等数据的采集,采集完成系统自动判别设备现阶段运行的状态,一旦发现问题,系统会自动告警,提示现场工作人员进行处理或者呼叫专家[3]。

img

3、AR设备管理沙盘

AR设备管理沙盘一款工业企业专属的可视化设备统一管理工具,通过实时监控整体设备资产的运行状态,更可结合AR远程沟通工具,远程查看或进行远程专家咨询,提高问题解决速度,降低企业生产运维风险。资产实时状态监控:对整体设备虚拟化并纳入统一的可视化展示系统中,管理者可即时了解所有设备的运行情况,对生产线各设备实时状态了如指掌,远程监控资产;在线高效远程协同:在线高效协同沟通,在线报修后流转到维修部门派工,及时现场对问题设备进行检查和维修,确保每个问题都得到快速响应和落实;批量导入设备模型:企业可以通过ALVA Editor 批量导入设备模型,快速生成设备数字沙盘,降低操作成本。

img

img

4、工件装配检测

在汽车生产过程中,需要花费大量时间用于工件装配的检测,确保汽车生产质量。因此,在保证检测质量的同时缩短检测时间成为提高生产效率的关键因素,SuPAR 扩增实境(AR)检测方案就完全符合了這方面的需求了。

img

SuPAR 是利用IPAD Pro的LiDAR原深感测镜头来实现AR检测,通过输入3D CAD与影像对比,至此,问题将直观呈现在您的面前。

img

除了汽车行业, SuPAR还可以用在不同行业, 包括零部件及模具。

img

另外由于此SuPAR是实时的AR检测,所以用于夹具检测时,可以即时修正,快速处理。

img

5、AR培训

新员工入职,使用AR培训与传统的PPT岗前培训相比,通过可视化的AR标注及清晰的步骤指示,能够帮助新员工快速上手业务,从而提升培训质量和效率。

当涉及到如何处理位于偏远地区的大型设备时,AR使受训者能够学习并创建难忘的联想。事实证明,通过书面语言、视频或手册来学习是不太实际的。未来五年,一半的工厂员工将退休,快速高效的员工教育变得至关重要,这就是增强现实技术的用武之地。

梅赛德斯·奔驰培训计划的参与者使用Microsoft HoloLens来研究车辆的内部零件组件而无需拆卸。福特使用类似的解决方案在现有车辆上投影汽车设计的全息图。 创新的方法改变了原型的创建和更改方式,并促进了设计和工程团队之间的协作。

在汽车行业以外的培训中应用AR的其他示例包括波音和AGCO。波音公司的技术人员转向沉浸式技术,以在飞机上正确安装电线。农业设备制造公司爱科(AGCO)自2014年以来一直在使用Google Glass培训员工,以对机械进行复杂的维护。该解决方案帮助公司将检查时间减少了30%。

img

在没有引入AR技术之前,百事可乐位于南非德班的Prospecton工厂需要员工掌握四种以上的语言才能保证工作的顺利进行,这对普通一线员工来说几乎是不可能的。然而,通过在日常培训中引用AR技术,多国语言已经不再成为工作障碍了,只要佩戴上AR眼镜,不具备外语能力的当地工人,就可以在车间接受培训和开展工作。

与此同时,借助AR眼镜内置的视频会议软件Zoom,各地工厂及团队可以随时沟通,互相学习先进技术,交流经验。在疫情影响严重的百事爱尔兰工厂,管理人员需要在减少厂内操作人员数量的同时维持工厂的正常运转。他们借助AR眼镜内置的Zoom应用,就可实现居家办公人员与现场人员远程沟通,让工人可以便捷开展工作交流,最终提升生产效率。

img

5、 总结

​ 工业互联网和 AR在工业场景中的结合,不仅可以让我们在日常生活和工作中更加方便快捷,还可以让我们更好的掌握和了解产品设计过程中的每个细节。工业互联网是基于互联网、云计算、物联网等技术手段实现的制造过程智能化,能够大幅提高生产效率。它以数字化的方式来提升制造过程的效率,从而推动制造业转型升级,同时也能进一步提升制造业产品的品质和竞争力。具体来讲,工业互联网主要解决工业制造企业之间、制造商与零售商、供应商之间以及制造和服务之间实现互联互通。首先是实现产品制造过程智能化:工业互联网可以帮助产品设计人员将设计方案转化为真正意义上的实物;还能够通过 AR技术将虚拟物品与真实世界进行交互;同时也能够通过 AR技术来将虚拟信息植入到制造业生产设备中,让客户可以看到设备在实际工作环境中如何运行。其次是实现企业间互联互通:企业间实现互联互通后,可以促进企业生产效率提升和资源优化配置,还能够帮助企业降低生产成本,提高经济效益。再次是实现业务流程线上化:工业互联网在帮助企业实现业务流程线上化后,还能大幅提升企业运营效率与服务水平;同时也能够进一步降低运营成本。最后是提升消费者体验: AR技术可以通过增强现实(Augmented Reality)技术手段将产品展示更直观清晰、互动体验更好、交互体验更加流畅;同时增强现实也可以将数据信息以 AR眼镜的形式展示出来。

参考文献

[1]徐欣, 付玉敏, 钱光璞,等. 基于工业互联网平台的Cloud VR数字孪生制造产线架构及其构建方法:, CN112363478A[P]. 2021.

[2]曹伟智. 工业设计领域下VR和AR技术的新融合[J]. 美术大观, 2018(11):2.

[3]孙贺王超孙明尹炳鹏. 新型智能人机交互系统在工业互联网平台的研究与应用[J]. 工业控制计算机, 2021, 34(10):141-143.


http://www.mrgr.cn/p/48074433

相关文章

[转帖]比黄金更贵的显卡,疯狂H100

https://zhuanlan.zhihu.com/p/654361974 华尔街和硅谷联袂奉上了一件震撼业界的大事:让一家创业公司拿到23亿美元的债务融资,抵押物则是当前全球最硬的通货——H100显卡。 这个大事件的主角叫做CoreWeave,主营业务是AI私有云服务,简单说就是通过搭建拥有大量GPU算力的数据…

Godot.NET C# 工程化开发(1):通用Nuget 导入+ 模板文件导出,包含随机数生成,日志管理,数据库连接等功能

文章目录 前言Github项目地址,包含模板文件后期思考补充项目设置编写失误环境visual studio 配置详细的配置看我这篇文章 Nuget 推荐NewtonSoft 成功Bogus 成功Github文档地址随机生成构造器生成构造器接口(推荐) 文件夹设置Nlog 成功!Nlog.configNlogHe…

[转帖]PCIe7.0宣布即将2025推出

https://zhuanlan.zhihu.com/p/532935941 jiu导言 在2022年的PCI-SIG的开发者大会上,PCI-SIG总裁庆祝了PCI-SIG成立30周年并宣布PCIe技术的下一代技术展望,并且计划在2025年向成员发布PCIe7.0标准。而在未来3年中即将推出的PCIe7.0再次提供速度提升(相比较PCIe6.0翻倍,X16双…

SystemServer 启动流程

SystemServer 启动流程 一、介绍SystemServer 是 Android 进入 Launcher 前的最后准备,顾名思义,它提供了众多由 Java 语言编写的服务 在 Zygote 自启动过程中,参数 bool startSystemServer 为真的话,那么在 ZygoteInit.java/main() 就会调用函数 forkSystemServer() 生成 …

Python爬虫学习完整版

一、什么是爬虫 网络爬虫,是一种按照一定规则,自动抓取互联网信息的程序或者脚本。由于互联网数据的多样性和资源的有限性,根据用户需求定向抓取相关网页并分析也成为如今主流的爬取策略。 1 爬虫可以做什么 你可以爬取网络上的的图片&#…

[转帖]Arm更新Neoverse产品路线图:N3/V3内核曝光,能效及AI性能大涨

https://new.qq.com/rain/a/20240222A0495O00 +关注2月22日,半导体IP大厂Arm宣布推出新一代 Arm Neoverse 技术。其中包括,通过性能效率更优异的 N 系列新 IP 扩展 Arm Neoverse 计算子系统 (CSS) 产品路线图。与 Neoverse CSS N2 相比,Neoverse CSS N3 的每瓦性能可提高 20…

js 回调 callback

<html> <head> <title>按钮点击事件示例</title> <script> function a(callback) { console.log("执行函数a!"); console.log("调用回调函数"); callback(); // 调用回调函数 }function b(){ console.log("回…

【AI漏洞】人工而后智能

注&#xff1a;公众号暂时不再使用了 本文主要内容&#xff1a; 1、主题&#xff1a;AI漏洞 2、过程&#xff1a;测试步骤 3、笔者&#xff1a;寄语 &#xff08;重点&#xff1a;本文只做技术研究&#xff0c;请遵守相关法律法规&#xff0c;发现自身单位有漏洞请及时修复&…

openssl AF_ALG引擎使用

cmd AF_ALG是Linux提供的一种虚拟接口&#xff0c;用于访问内核中的加密算法。在Linux中&#xff0c;可以使用AF_ALG接口配合加密算法框架&#xff08;Crypto API&#xff09;来进行加密操作。 以下是一个使用AF_ALG和openssl进行加密操作的例子&#xff1a; # 加密 openssl…

前端学习之用css和html做一个仿淘宝的导航栏

代码 <!DOCTYPE html> <html lang"en"> <head><meta charset"UTF-8"><title>仿淘宝界面案例</title><style>/* 最外层盒子 */.container{width: 270px;height: 385px;border: 1px solid rgb(255, 208, 0);bord…

基于云计算的前端资源管理系统的设计与实现

hello宝子们...我们是艾斯视觉擅长ui设计和前端开发10年经验&#xff01;希望我的分享能帮助到您&#xff01;如需帮助可以评论关注私信我们一起探讨&#xff01;致敬感谢感恩&#xff01; 随着互联网的快速发展&#xff0c;前端资源管理成为了一个重要的课题。本文旨在设计并实…

阿里云账号注册流程_2024年最新阿里云账户注册和实名认证流程

阿里云账号怎么注册&#xff1f;阿里云账号支持手机号注册、阿里云APP注册、淘宝、支付宝和钉钉多种注册方式&#xff0c;账号注册后需要通过实名认证才可以购买或使用云产品&#xff0c;使用淘宝、支付宝或钉钉注册方式可以免去实名认证步骤&#xff0c;阿里云百科aliyunbaike…

计算机网络(二)物理层

物理层 一、通信基础1.奈氏准则、香农定理2.编码与调制3.电路交换、报文交换、分组交换 二、 传输介质、设备1.导向性传输介质&#xff1a;1.1双绞线1.2 同轴电缆1.3光纤 2.非导向性传输介质&#xff1a; 一、通信基础 信道带宽&#xff1a;信道能通过的最高频率和最低频率之差…

MobileVIT原理详解篇

&#x1f34a;作者简介&#xff1a;秃头小苏&#xff0c;致力于用最通俗的语言描述问题 &#x1f34a;专栏推荐&#xff1a;深度学习网络原理与实战 &#x1f34a;近期目标&#xff1a;写好专栏的每一篇文章 &#x1f34a;支持小苏&#xff1a;点赞&#x1f44d;&#x1f3fc;、…

台灯护眼灯哪个牌子好?明基、书客、爱德华医生旗舰款护眼灯推荐

今日&#xff0c;我为大家深入评测了数款旗舰护眼台灯&#xff0c;目的在于帮助大家避开选购误区&#xff0c;为我们的双眼营造一个既健康又安全的照明环境。每一款台灯都经过严格的实测数据对比&#xff0c;从而揭示出它们各自的优劣。无论是从照明效果、舒适性还是使用寿命等…

记一次 .NET某防伪验证系统 崩溃分析

一:背景 1. 讲故事 昨晚给训练营里面的一位朋友分析了一个程序崩溃的故障,因为看小伙子昨天在群里问了一天也没搞定,干脆自己亲自上阵吧,抓取的dump也是我极力推荐的用 procdump 注册 AEDebug 的方式,省去了很多沟通成本。 二:WinDbg分析 1. 为什么会崩溃 windbg有一个非…

MappedByteBuffer VS FileChannel:从内核层面对比两者的性能差异

本文基于 Linux 内核 5.4 版本进行讨论自上篇文章《从 Linux 内核角度探秘 JDK MappedByteBuffer》 发布之后,很多读者朋友私信我说,文章的信息量太大了,其中很多章节介绍的内容都是大家非常想要了解,并且是频繁被搜索的内容,所以根据读者朋友的建议,笔者决定将一些重要的…

SpringCloud(三)统一网关 -- GateWay

gateway官网:https://cloud.spring.io/spring-cloud-static/spring-cloud-gateway/2.2.1.RELEASE/reference/html/网关的作用: 1、对用户请求做身份认证、权限校验 2、将用户请求路由到微服务,并实现负载均衡 3、对用户请求做限流搭建网关服务 基本使用只配置 1、2 步就可以 …

【机器学习】包裹式特征选择之序列前向选择法

&#x1f388;个人主页&#xff1a;豌豆射手^ &#x1f389;欢迎 &#x1f44d;点赞✍评论⭐收藏 &#x1f917;收录专栏&#xff1a;机器学习 &#x1f91d;希望本文对您有所裨益&#xff0c;如有不足之处&#xff0c;欢迎在评论区提出指正&#xff0c;让我们共同学习、交流进…

pytorch如何向tensor结尾添加元素或维度--torch.cat()、torch.unsqueeze()的用法

目录 示例1 矢量后增加元素 示例2 tensor维度增加1 示例3 另一种替代unsqueeze的方法 示例1 矢量后增加元素 使用torch.cat()函数 ptorch.Tensor([1,5,0]) ptorch.cat((p, torch.Tensor([4])), 0) 结果&#xff1a; 这里&#xff0c;cat的第一个输入变量用()包绕&#xf…