AR下通信机房运维巡检技术研究

AR下通信机房运维巡检技术研究

基于通信机房运维巡检工作智能化需求的提升,对基于AR(增强现实)技术在通信机房巡检中的应用进行了研究。该项技术成果通过注册跟踪技术、显示技术、虚拟物体生成技术等关键技术的研究开发,奠定AR技术实现的基础。同时,又通过对相关模型的建立,巡检指令信号、数据上传和分析构建实现了AR技术在通信机房辅助巡检的目的。该系统经过实际应用证明,可以实现标示牌识别、人机互动、信息记录以及远程专家会诊等功能。“十三五”期间,电网规模将迎来爆发式增长,电网运行安全性要求也越来越高,电网的通信机房的规模也越来越大,依靠人力为主的传统运维检修模式导致运维能力提升有限,已经无法满足“十三五”期间迅猛增长的电网通信机房运维巡检工作需求;同时传统的运维检修模式无法实现资源的优化配置,运检资源分配随意性较大,制约了运检效率的进一步提高。为了提升设备运检工作效率和效益,需要充分发挥新技术的优势和效能,提升运维和检修的信息交互水平,从而提高运维检修工作效率,降低检修成本,提升大电网安全运行保障能力。以互联网技术为核心、以“工业4.0”为代表的新一轮科技革命和产业变革正在深刻影响传统产业,类似的“互联网+”、“中国制造2025”首次写入政府工作报告,并上升为国家战略,为当前运检技术变革升级提供了历史机遇。国家电网公司已经制定了“十三五”运检物联网技术顶层设计方案,确定了以智能传感技术、视觉感知技术为代表的新一代物联网技术发展趋势,这些新兴技术构成了智能电网信息感知的基础,全方面提高了智能电网各个环节信息感知深度、广度及密度。将AR(增强现实)等新技术全面引入智能电网的建设,实现电网生产作业中的可视化虚实结合,提供直观便捷的作业指导和协作支持,提高电网作业工作质量、工作效率及标准化水平、安全作业水平,这将是智能电网发展的必然趋势。随着AR技术的持续进步,AR技术未来在电力系统的运用,将会为智能巡检和保电任务带来更多的便利,比如利用AR虚实结合显示特性,可以将巡检时的电气设备台账信息、实时环境数据、实时的运行数据、以及相关的历史数数据及时交互融合呈现眼前,提高巡检作业现场信息获取速度和完整度,极大增强运维巡检人员在现场对设备的感知和判断能力,能极大提升运维巡检的效率。

一、增强显示关键技术

在AR智能眼睛的增强显示技术中,比较关键的技术主要包括以下三项技术:跟踪注册技术,显示技术和虚拟物体生成技术等。

1.跟踪注册技术。跟踪注册技术主要目的是实现虚拟信息和真实环境进行匹配注册,进而将虚拟的信息和现实中真实环境场景结合起来。该项技术主要的技术原理是通过机器学习,实现对跟踪物体的特征的预处理、增强处理。通常情况下,该技术的实现是通过BP神经网络和支持向量机(SVM)对图像的处理,完成跟踪注册的。BP神经网络是一门成熟的技术,可以通过其强度值向量、矩阵向量等特征数据,提高跟踪注册的精度。而SVM主要通过其强大的图像处理技术,通过对构建海量的数据样本的非线性数据充分挖掘来为跟踪注册提供支撑的。

2.显示技术。显示技术是智能AR眼睛系统中比较重要的组成部分之一,该项技术主要目的是为了实现较为真实的虚实相结合技术,使AR眼睛在实际应用中的方便程度得到大幅度的提升;显示技术,可以为使用者提高相关环境信息录入,虚实相融合的场景。该项技术在应用过程中可以与使用者的交互接口、显示通道以及图像融合技术综合集成在一起,并采用更为真实有效的环境出展现真实的场景,将对通过摄像机拍摄的外部环境的图像信息处理之后,与真实环境融合,并将两者的图像信息进行叠加,进行显示。

3.虚拟物体生成技术。在智能AR眼睛的增强显示技术在具体应用过程中,其主要的目标是讲虚拟世界中的相关信息在真实的环境中叠加处理,并采用相关算法程序实现对真实环境中物体的动感操作,因此在实际应用中,能否为使用者提供优秀的物体动感模型,是增强显示技术在应用效果的一个关键因素。在现在技术环境下,三维建模技术是虚拟物体生成的一个关键技术,它能够充分的将虚拟物体的真实感给展现出来。在生成虚拟物体的过程中,自然交换是其中一项关键的技术,该技术的成果应用不仅仅可以实现辅助增强现实和信息注册,而且还可以利用图像标记功能,进而能够实时的监控外部的输入信息。为了增加3D动画的建模效果,就需要利用自然交互技术中的特征提取、模式识别、事件触发等功能,通过序列化增量式的操作达到追求的建模目标。

二、AR智能巡检实现方法

1.相关模型的建立。在通信机房巡检过程中,首先需要根据通信机房的设备状况建立相应的模型,其模型的创建主要便于在利用AR智能眼睛巡检过程中便于进行计算机的自动识别。通信机房设备模型的建立主要包括设备的判定模型,图形的辨识模型以及相关的巡检流程的制定。在这些模型中,图形的辨识模型的建立主要依据时设备及仪表等的外观外貌等的识别,便于在巡检过程中能够自动识别,而判定模型和巡检流程的制定,主要为运维巡检人员在巡检过程中提供便利,通过对运维巡检人员的巡检的设备信息,时间,路线等的设定,提供在巡检过程中的安全性。

2.巡检的指令信号。智能AR眼睛在通信机房巡检过程中的巡检指令信号是其利用管理系统向巡检人员发送操作质量。该操作指令的管理功能包括运维巡检流程过程的管理确定,相关判定原则和通信设备参数的管理。在通信机房运维巡检过程中,运维巡检人员可以通过AR智能眼睛对需要巡检的设备进行识别,设备的相关参数会直接呈现在运维人员的眼睛里面。同时AR智能眼睛也可以对通信机房里面设备的各种物理参数进行识别,并根据AR眼睛里面内置的判定模式对采集到的各种参数进行判定,并将判定的结果通过AR眼睛直接反馈到运维巡检人员,以提高运维巡检人员的工作效率。

3.相关巡检数据上传。在运维巡检人员进行通信机房的巡检工作过程中,利用AR技术完成的相关运维巡检工作后,会将相关的巡检数据和运维数据上传到服务器,以方便后台进行分析和监控。

4.巡检数据分析。利用AR智能眼睛增强现实技术可以实现对运维巡检数据的收集,同时,可以对运维巡检数据进行分析,通过对数据的分析,并结合设备的历史运行数据,发现在巡检过程中设备潜在运行风险,最终为通信机房的安全运行提供强力支撑。

三、AR增强现实技术在通信机房巡检中的应用

1.通信设备标示牌识别。基于标识物的增强现实本质上是把三维虚拟模型组件嵌入真实环境中,因此对标识物的识别是AR技术实现的关键点。本文采用的识别技术原理就是采用“图形识别法”,利用AR眼镜上的高清摄像机对机房设备的标示牌进行OCR扫描来进行识别机房设备信息。

2.辅助运维巡视。该项技术的实现是通过在真实场景中识别机房设备信息,并在设备真实场景中叠加虚拟组件(电子导航菜单)对通信机房运维巡检人员的巡视流程和方法进行指导。当系统通过标示牌的图像识别后,自动在真实场景中叠加虚拟导航菜单栏,运维人员可以通过与虚拟组件进行交互实现运维巡视辅助的各项功能。运维人员可以查阅设备基础信息、设备巡视标准和设备检修记录,并且还能通过调阅设备运行数据判断设备运行状态。

3.人机互动的界面操作。为了实现AR技术中的人机互动,采用了AR设备的动态追踪特性技术,实现了基于手势的互动体验,通过人体手指的运动实现界面操作,将实现最基本的点选、拖拽操作,比如点选菜单实现人机互动操作,通过拖拽改变虚拟组件物体在真实场景中成像位置。

4.信息记录。由于AR技术中人机交互的方式相对比较单一,智能识别简单的手势点选或拖拽操作,不能满足通信机房运维巡检现场的实际需求,因此本文还采用了语音命令和语音输入的方式实现更为复杂的交互体验,比如在巡视过程中通过语音命令快速调阅设备信息和巡视标准,当运维人员发现设备缺陷时可以通过语音命令快速进入记录缺陷的界面并通过语音录制缺陷内容描述信息,再利用云端STT语音引擎将录音转成文字进行保存。

5.远程专家会诊。当设备出现严重和危急缺陷时,公司各级各层面能够快速召集相关人员召开故障、缺陷分析会。与会分管领导、技术专家、制造厂代表等无需到达事故现场,也无需到指定会议室参会,远程的专家可以通过智能手机随时随地查看现场的画面,并可以通过在屏幕上圈画标注的方式指导远程的作业人员。通过先进的AR(增强现实)技术使分处不同城市的人员如同在同一现场。

四、小结

在通信机房运维巡检作业中,目前有许多辅助的技术手段,比如远程视频辅助监控系统、手持PDA等,但是都存在着一定的问题,信息展现的形式比较单一,对于通信设备相关信息的解读不够全面。本文通过对基于增强现实技术智能AR眼睛在通信机房运维巡检的应用和研究,该技术能够比较全面的在巡检过程中通信设备的信息以较高的效率展现在用户的眼中,可以显著提高运维巡检效率,同时该项技术在标识牌识别,人机互动,信息记录和远程专家协助等方面也能够提供深层次的技术支撑。AR技术在电力通信行业的推广应用,可以很好改进当前通信机房运维巡检的状况,能够显著提高运维巡检效率,为电力企业的安全生产提供强力的技术支撑,因此,AR技术具有很高的推广价值。

作者:杜冠军 潘海囤 王鹏展 尤秉文 高予军 单位:国网河南省电力公司郑州供电公司 河南九域腾龙信息工程有限公司