本发明涉及设备维修技术领域，具体涉及一种基于增强现实的设备检修与维护方法、装置、系统及计算机存储介质。
背景技术：
增强现实技术是将真实世界的信息和虚拟信息进行“无缝”集成，把现实世界在一定时间和空间范围内无法同时呈现的信息，通过数字技术进行模拟仿真并实时叠加至真实空间，将虚拟信息应用到真实世界，实现两种信息相互补充和互动，从而达到超越现实世界的信息体验。这种交互式增强信息显示技术在设备信息管理与维修保障中有越来越广泛的应用。例如：专利号为201610409713.2的《基于增强现实技术的电力设备信息提取与展示方法及系统》，虽然建立电力设备模型的数据中心，解决了可快速提取设备信息并生动的进行展示，但是这个数据中心的模型数据是标准状态无故障的数据信息库，并不支持维护过程中数据的实时录入。并且采用电力设备的正面图片作为该设备的识别目标，由于现有电力设备的外观可能存在相同的情况，采用正面图片作为识别目标，存在信息匹配错误的风险。
例如：论文《基于增强现实的装备诱导维修系统设计与实现》提供的一套装备维修系统，该系统包括跟踪注册、人机交互、数据管理、诱导信息生成与输出四个模块，通过跟踪注册模块的增强现实头盔负责获取维修者头部位姿发送到诱导信息生成与输出模块，以完成虚拟信息和真实世界的自然融合；通过人机交互模块将维修人员的手势语音发送至诱导信息生成与输出模块使得系统能够理解维修者意图以作出合适的响应，该维修系统根据跟踪注册和人机交互现场采集的信息生成提示信息，智能化程度高，适用于高精度操作。且该增强现实头盔由视觉传感器、陀螺仪、加速度和地磁感应计等组成，结构复杂，成本高，该增强现实头盔受数据线连接的制约，能够实际应用的场景非常有限，如不同楼层间消防设施的检修就难以实施。并且上述两个系统都没有维护系统状态信息录入及存储信息进行管理的功能。
对于检修周期短，检修频次高，操作精度要求相对较低的设备，如：分布广的消防设施，该设备现有的检修操作较为复杂，维修人员必须具备一定的专业技能，检修效率低，不利于维修，并且设备维护与检修过程中不便于对故障数据实时录入以及历史故障数据随时进行查看。
技术实现要素：
鉴于上述问题，本发明提出了一种基于增强现实的设备检修与维护方法、装置、系统及计算机存储介质以便解决上述问题。
依据本发明的一个方面，提供一种基于增强现实的设备检修与维护方法，包括：
通过摄像头扫描预定设备，提取特征图片；
将提取的所述特征图片与预先构建的数据管理中心存储的特征图片进行匹配；
在匹配成功的情况下，在屏幕上显示所述特征图片相关联的增强现实信息，其中，所述增强现实信息用于提示维修人员按照所述增强现实信息中的设备维修条目数据对所述预定设备进行维修；
在完成所述预定设备维修的情况下，在所述增强现实信息的预定条目中录入内容。
可选地，本发明所述方法中，在所述通过摄像头扫描预定设备之前，还包括：
构建增强现实信息库和特征识别图片库，所述增强现实信息库中的信息包含设备维修条目和三维模型，还包含音频和/或视频；
将所述增强现实信息库中的信息和所述特征识别图片库中的特征图片进行关联，将关联后的数据存储在所述数据管理中心，通过历史信息查询调用存储在所述数据管理中心的预定条目中的内容。
可选地，本发明所述方法中，所述特征识别图片库采用vumark特征识别图片库。
可选地，本发明所述方法中，在所述增强现实信息的预定条目中录入内容之后，还包括：
将录入所述预定条目中的内容发送至所述数据管理中心，以在所述数据管理中心进行存储，通过历史信息查询调用存储在所述数据管理中心的预定条目中的内容。
可选地，本发明所述方法中，在所述通过摄像头扫描预定设备之前，还包括：进行用户身份验证。
依据本发明的第二个方面，提供一种基于增强现实的设备检修与维护装置，包括：
信息采集模块，用于通过摄像头扫描预定设备，提取特征图片；
信息处理模块，用于将提取的所述特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示所述特征图片相关联的增强现实信息，其中，所述增强现实信息用于提示维修人员按照所述增强现实信息中的设备维修条目数据对所述预定设备进行维修；
信息录入模块，用于在完成所述预定设备的维修的情况下，在所述增强现实信息的预定条目中录入内容。
可选地，本发明所述装置中，所述信息录入模块，还用于通过摄像头扫描预定设备之前，构建增强现实信息库和特征识别图片库，所述增强现实信息库中的信息包含设备维修条目和三维模型，还包含音频和/或视频；将所述增强现实信息库中的信息和所述特征识别图片库中的特征图片进行关联，将关联后的数据存储在所述数据管理中心。
可选地，本发明所述装置中，所述信息录入模块，还用于将录入所述预定条目中的内容发送至所述数据管理中心，以在所述数据管理中心进行存储，通过历史信息查询调用存储在所述数据管理中心的预定条目中的内容。
依据本发明的第三个方面，提供一种基于增强现实的设备检修与维护系统，包括：数据管理中心和移动终端，
所述数据管理中心，用于存储特征图片和所述特征图片相关联的增强现实信息；
所述移动终端，用于通过摄像头扫描预定设备，提取特征图片；将提取的所述特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示所述特征图片相关联的增强现实信息，其中，所述增强现实信息用于提示维修人员按照所述增强现实信息中的设备维修条目数据对所述预定设备进行维修。
依据本发明的第三个方面，提供一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如上述基于增强现实的设备检修与维护方法的步骤。
与现有技术相比，本发明的效果如下：
本发明提供的基于增强现实的设备检修与维护方法、装置、系统及计算机存储介质，通过利用增强现实技术实现了便捷高效的对消防设施进行故障检修，提高了维护检修的效率，同时降低了对作业人员专利技能的要求；并且通过维修信息录入与增强现实显示相结合，便于进行检修信息录入，及对装备状况实时进行查询，实现了检修信息的数据化管理。本发明的整个操作简单、成本低廉。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的基于增强现实的设备检修与维护方法的流程图；
图2是本发明第二实施例提供的基于增强现实的设备检修与维护方法的流程图；
图3是本发明第三实施例提供的基于增强现实的设备检修与维护装置的原理框图；
图4是本发明第五实施例提供的基于增强现实的设备检修与维护系统的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为了解决现有技术中的问题，在本发明的第一实施例中，提供一种基于增强现实的设备检修与维护方法，参见图1所示，包括如下步骤：
步骤s101:通过摄像头扫描预定设备，提取特征图片。
本实施例中，摄像头是安装在移动终端上，通过移动终端的摄像头扫描预定设备即待检查设备，提取特征图片；提取特征图片的方法是现有提取图片特征的方法，该移动终端可以是手机、平板电脑等智能终端。
步骤s102:将提取的所述特征图片与预先构建的数据管理中心存储的特征图片进行匹配。
本实施例中，该预先构建的数据管理中心存储有特征图片及该特征图片相对应的增强现实信息，该增强现实信息采用现有增强现实技术实现，增强现实信息包括设备维修条目、三维模型或者视频，设备维修条目包括检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。
步骤s103:在匹配成功的情况下，在屏幕上显示所述特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修。
本实施例中，若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
步骤s104:在完成预定设备维修的情况下，在增强现实信息的预定条目中录入内容。
本实施例中，维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
进一步地，为了便于后续对设备进行维护，在增强现实信息的预定条目中录入内容之后，还包括：将录入预定条目中的内容发送至数据管理中心，以便在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容。
本实施例，数据管理中心中设有检修信息历史数据和检修信息实时存储数据库，通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心的检修信息历史数据和检修信息实时存储数据库中，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行查看。
在本发明的一可选实施例中，为了确保信息的安全，需要对维修人员的身份进行验证，在通过摄像头扫描预定设备之前，还包括：进行用户身份验证。用户身份验证方法采用现有常用方法。并且数据管理中心通过用户身份验证的方式，确保信息安全。
综上可知，本发明实施例运用增强现实技术便捷高效的对设备进行故障检修和记录，将维修情况录入到预定条目中，以便后续查询管理，弥补了设备实时信息录入和查询的空白，实现了检修信息的数据化管理，及对设备进行全周期的检修。并且可利用手机等移动终端实现数字化信息录入、查询和存储，具有较高的实用价值。
在本发明的第二实施例中，提供一种基于增强现实的设备检修与维护方法，参见图2所示，包括如下步骤：
步骤s201：构建增强现实信息库和特征识别图片库，增强现实信息库中的信息包含维修信息和三维模型，还包含音频和/或视频；
本实施例中，增强现实信息库中的信息包含设备维修条目和三维模型，还包含音频和/或视频，设备维修条目包括登录用户信息、检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。特征识别图片库用于存储特征识别图片。
步骤s202：将增强现实信息库中的信息和特征识别图片库中的特征图片进行关联，将关联后的数据存储在数据管理中心。
步骤s203：通过摄像头扫描预定设备，提取特征图片。
本实施例中，摄像头是安装在移动终端上，通过移动终端的摄像头扫描预定设备即待检查设备，提取特征图片；提取特征图片的方法是现有提取图片特征的方法，该移动终端可以是手机、平板电脑等智能终端。
步骤s204：将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配。
步骤s205:在匹配成功的情况下，在屏幕上显示特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修。
本实施例中，若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，利用现有增强现实技术，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
步骤s206:在完成预定设备维修的情况下，在增强现实信息的预定条目中录入内容。
本实施例中，维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
进一步地，为了便于后续对设备进行维护，在增强现实信息的预定条目中录入内容之后，还包括：将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容。
本实施例，数据管理中心中设有检修信息历史数据和检修信息实时存储数据库，通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心的检修信息历史数据和检修信息实时存储数据库中，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行查看。
在本发明的一可选实施例中：为了提高特征图片识别的准确率，特征识别图片库采用vumark特征识别图片库。
在本发明的又一可选实施例中，为了确保信息的安全，需要对维修人员的身份进行验证，在通过摄像头扫描预定设备之前，还包括：进行用户身份验证。用户身份验证方法采用现有常用方法。并且数据管理中心采用用户身份验证的方式，确保信息安全。
本实施例将结合具体应用示例，对本实施例方法进行阐述，需要指出的是，本实施例中公开的大量技术细节用于解释本发明，并不用于唯一限定本发明。
下面是采用本发明基于增强现实的设备检修与维护方法进行消防实施进行维护的示例。
示例一：步骤1：构建增强现实信息库，该增强现实信息库包含消防设施检修条目数据库、三维模型及视频数据库，具体的，在电脑上安装mysql和navicat软件，创建一个消防设施检修条目数据库，命名为extinguish，包括登录用户信息表、检修条目信息表及提示操作信息表，接着创建user(用户)表，构建属性包括name(姓名)、password(密码)，用于储存用户登录信息，以便在登录时验证使用者的合法性；另外创建equipment检修条目信息表(设备)表，构建属性包括place(设备安放地点)、code(设备编号)、condition(设备状态)、checkday(检查日期)，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。以及提示操作信息表，该提示操作信息表中录入各维修步骤需要操作的内容。在检查过程中提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作，例如在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域。同样的手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型，例如在检查灭火器仪表盘时手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。
步骤2：构建消防设施的特征识别图片库，该特征识别图片库采用vumark特征识别图片库，简称vumark数据库，vumark的设计是根据vuforia官网教程进行设计，其中主要图层包括边界图层、空白图层、亮图层、暗图层；边界图层规定了整个标识的形状，空白图层中用户可以添加自己需要添加的图标，亮图层需要添加规定数量的亮元素(数量根据vumark包含的信息的长度和类型决定)，暗图层中需要添加和亮元素相同数量、形状和位置的暗元素，亮暗元素的颜色色差必须很大。灭火器编号输入则是在vuforia开发者网页中选择自己上传的vumark，填入灭火器的编号，点击生成，再选择pdf格式保存，这样就生成了一个含有灭火器编号的vumark。将制作好的vumark特征图片和增强现实信息库中的信息进行关联，将关联后的数据存储在数据管理中心。
步骤3：移动终端通过摄像头采集需识别图片的信息，移动终端采用手机，在手机上通过摄像头扫描当前灭火器对应的vumark图片信息，提取图片特征与数据管理中心的特征识别图片库中的特征图片相匹配。移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，将匹配后所获得的三维模型以及对应提示操作信息显示在移动端屏幕，并保持跟随状态；具体的，在unity编译器中设置arcamera关联自己的vumark数据库(在vuforia开发者官网下载，导入unity)，这样手机在运行app时就会根据vumark的特征找到标识，从而显示模型；编号则是根据扫描的vumark的亮暗元素的排序读出。因为在unity编译器中已经设置了vumark和模型的相对位置，所以当vumark贴在灭火器规定区域时就会在对应位置出现模型，并保留图像的已知信息进行跟踪。本发明借助vuforiasdk及其开发平台，将增强现实来显示的信息和3d模型加载带特征图片里，通过识别特征图片来加载其对应的增强现实显示的信息和3d模型。
步骤4：根据移动终端的屏幕上所显示的ui按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；设有“完成”按钮，在检查完成后点击“完成”按钮，会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，并设有“记录”，“取消”按钮，用户点击前者则会和数据管理中心进行通信，数据管理中心根据返回的信息，更新数据库extinguish表中的condition条目。
步骤5：根据移动终端的屏幕提示操作信息，遵循所设置的检修流程完成消防设施的故障信息检查，在完成检查后，系统中将会记录当前消防设施的编号、所在位置、检查状态以及检查时间等信息，这些信息将录入数据管理中心的数据库。本实施例对消防设施的编号及位置进行数字化存储，为整个消防设施系统优化提供数据支持。
步骤6：在完成检查和信息录入后，用户可以点击对应的ui按键显示数据库中对应编号的消防器材是否检查合格。
综上可知，本发明实施例利用通用增强现实平台及开发环境构建基于增强现实的设备维护检修信息录入方法，实现了便捷高效的对消防设施进行故障检修和记录，实现检修信息的数据化管理，对消防设施进行全周期的检修，具有较高的实用价值。
在本发明的第三实施例中，提供一种基于增强现实的设备检修与维护装置，参见图3所示，该装置包括信息采集模块1、信息处理模块2和信息录入模块3：
信息采集模块1，用于通过摄像头扫描预定设备，提取特征图片；
本实施例中，摄像头是安装在移动终端上，通过移动终端的摄像头扫描预定设备即待检查设备，提取特征图片；提取特征图片的方法是现有提取图片特征的方法，该移动终端可以是手机、平板电脑等智能终端。
信息处理模块2，用于将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修；
本实施例中，该预先构建的数据管理中心存储有特征图片及该特征图片相对应的增强现实信息，该增强现实信息采用现有增强现实技术实现，增强现实信息包括设备维修条目、设备三维模型或者视频，设备维修条目包括检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。
若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
信息录入模块3，用于在完成预定设备的维修的情况下，在增强现实信息的预定条目中录入内容。
本实施例中，维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
进一步地，为了便于后续对设备进行维护，信息录入模块3，还用于在增强现实信息的预定条目中录入内容之后，将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容。
本实施例，数据管理中心中设有检修信息历史数据和检修信息实时存储数据库，通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心的检修信息历史数据和检修信息实时存储数据库中，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行实时查看。
在本发明的一可选实施例中，为了确保信息的安全，需要对维修人员的身份进行验证，信息处理模块2，还用于在通过摄像头扫描预定设备之前，进行用户身份验证，用户身份验证方法采用现有常用方法。数据管理中心通过用户身份验证的方式，确保信息安全。
本发明实施例运用增强现实技术便捷高效的对设备进行故障检修和记录，将维修情况录入到预定条目中，以便后续查询管理，弥补了设备实时信息录入和查询的空白，实现了检修信息的数据化管理，及对设备进行全周期的检修。并且可利用手机等移动终端实现数字化信息录入和存储，具有较高的实用价值。
在本发明的第四实施例中，提供一种基于增强现实的设备检修与维护装置，该装置包括：
信息采集模块1，用于通过摄像头扫描预定设备，提取特征图片；
本实施例中，摄像头是安装在移动终端上，通过移动终端的摄像头扫描预定设备即待检查设备，提取特征图片；提取特征图片的方法是现有提取图片特征的方法，该移动终端可以是手机、平板电脑等智能终端。
信息处理模块2，用于将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修；
本实施例中，若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
信息录入模块3，用于构建增强现实信息库和特征识别图片库，增强现实信息库中的信息包含维修信息和三维模型，还包含音频和/或视频；将增强现实信息库中的信息和特征识别图片库中的特征图片进行关联，将关联后的数据存储在数据管理中心。以及在完成预定设备的维修的情况下，在增强现实信息的预定条目中录入内容。
本实施例中，信息录入模块3，用于构建增强现实信息库和特征识别图片库，该增强现实信息库包括设备维修条目、设备三维模型或者视频，设备维修条目包括检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。将增强现实信息库中的信息和特征识别图片库中的特征图片进行关联，将关联后的数据存储在数据管理中心。
信息录入模块3，用于维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
进一步地，为了便于后续对设备进行维护，信息录入模块3，还用于在增强现实信息的预定条目中录入内容之后，将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容。
本实施例，数据管理中心中设有检修信息历史数据和检修信息实时存储数据库，通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心的检修信息历史数据和检修信息实时存储数据库中，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行查看。
在本发明的一可选实施例中：为了提高特征图片识别的准确率，特征识别图片库为vumark特征识别图片库。
在本发明的又一可选实施例中，为了确保信息的安全，需要对维修人员的身份进行验证，信息处理模块2，还用于在通过摄像头扫描预定设备之前，进行用户身份验证，用户身份验证方法采用现有常用方法。数据管理中心通过用户身份验证的方式，确保数据安全。
本发明实施例运用增强现实技术便捷高效的对设备进行故障检修和记录，将维修情况录入到预定条目中，以便后续查询管理，弥补了设备实时信息录入和查询的空白，实现了检修信息的数据化管理，及对设备进行全周期的检修。并且可利用手机等移动终端实现数字化信息录入和存储，具有较高的实用价值。
在本发明的第五实施例中，提供一种基于增强现实的设备检修与维护系统，参见图4所示，包括：数据管理中心和移动终端，数据管理中心与移动终端相互通信。
数据管理中心4，用于存储特征图片和特征图片相关联的增强现实信息；
本实施例中，数据管理中心4采用后台服务器，该后台服务器包括挂载php文件的服务器、mysql数据库，挂载php文件的服务器用于实现移动终端和数据库的连接，mysql负责存储系统需要的数据，数据管理中心4构建有增强现实信息库和特征识别图片库，增强现实信息库中的信息包含维修信息和三维模型，还包含音频和/或视频等增强现实信息；设备维修条目包括登录用户信息、检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。特征图片存储在特征识别图片库。将增强现实信息库中的信息和特征识别图片库中的特征图片进行关联，将关联后的数据存储在数据管理中心。数据管理中心通过登录用户信息对登入人员进行身份验证，确保信息安全。
移动终端5，用于通过摄像头扫描预定设备，提取特征图片；将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修。
本实施例中，摄像头是安装在移动终端上，通过移动终端的摄像头扫描预定设备即待检查设备，提取特征图片；提取特征图片的方法是现有提取图片特征的方法，该移动终端可以是手机、平板电脑等智能终端。
将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配，若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，利用现有增强现实技术，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
在完成预定设备维修的情况下，在增强现实信息的预定条目中录入内容，维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
进一步地，为了便于后续对设备进行维护，移动终端在增强现实信息的预定条目中录入内容之后，将录入预定条目中的内容发送至数据管理中心，将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容。
本实施例，数据管理中心中设有检修信息历史数据和检修信息实时存储数据库，通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心的检修信息历史数据和检修信息实时存储数据库中，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行查看。
在本发明的一可选实施例中：为了提高特征图片识别的准确率，特征识别图片库采用vumark特征识别图片库。
在本发明的又一可选实施例中，为了确保信息的安全，需要对维修人员的身份进行验证，移动终端在通过摄像头扫描预定设备之前，还包括：进行用户身份验证。用户身份验证方法采用现有常用方法。
本发明实施例运用增强现实技术便捷高效的对设备进行故障检修和记录，将维修情况录入到预定条目中，弥补了设备实时信息录入和查询的空白，实现了检修信息的数据化管理。
在本发明的第六实施例中，提供一种基于增强现实的设备检修与维护系统，包括：数据管理中心和移动终端，数据管理中心与移动终端相互通信。
数据管理中心4，数据管理中心4采用后台服务器，该后台服务器包括挂载php文件的服务器和mysql数据库，挂载php文件的服务器用于实现移动终端和数据库的连接，mysql负责存储系统需要的数据，mysql数据库包括增强现实信息库、特征识别图片库及检修信息历史数据和检修信息实时存储数据库。增强现实信息库中存储有维修信息和三维模型，还包含音频和/或视频等增强现实信息；设备维修条目包括登录用户信息、检修条目信息、提示操作信息等需要显示的信息，检修条目信息可以包括place条目(设备安放地点)、code条目(设备编号)、condition条目(设备状态)、checkday条目(检查日期)等信息，其中place条目用来记录设备所在的地点编号，以便检察人员前去检查；code条目用于记录独一无二的设备编号信息；condition条目记录最近该设备检查后的状态，0表示未检查，1表示合格，-1表示故障。特征识别图片库存储有特征图片。将增强现实信息库中的信息和特征识别图片库中的特征图片进行关联，将关联后的数据存储在数据管理中心。通过登录用户信息实现对数据管理中心登录用户的管理，确保数据管理中心的信息安全。
移动终端5，包括身份验证模块、检修内容记录模块、历史信息查询模块、设施维护模块。
身份验证模块，用于用户信息的登录与注册，通过用户身份验证的方式，确保信息安全。
设施维护模块，用于利用增强现实信息完成维护视频的播放，通过摄像头扫描预定设备，提取特征图片；将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配；在匹配成功的情况下，在屏幕上显示特征图片相关联的增强现实信息，其中，增强现实信息用于提示维修人员按照增强现实信息中的设备维修条目数据对预定设备进行维修。
本实施例中，将提取的特征图片与预先构建的数据管理中心存储的特征图片进行匹配，若匹配成功，移动终端保留对已匹配模型的图像位置信息，并在此位置基础上通过三维渲染，利用现有增强现实技术，将匹配后所获得的三维模型、检修条目信息以及对应提示操作信息显示在移动终端的屏幕上，并保持跟随状态。维修人员按照显示的三维模型、提示操作信息等增强现实信息进行一步一步的维修操作，提示操作信息包括当前检查进行到第几步，还有在该步骤中检查人员需要进行的操作；例如：灭火器的检修，在手机屏幕通过文字提示检查灭火器仪表盘指针是否在绿色区域，同时在手机屏幕上显示的三维模型则对应是当前检查步骤中需要检查的灭火器部件的三维模型。例如：在检查灭火器仪表盘时，手机屏幕会在真实灭火器仪表盘对应位置出现等比例仪表盘三维模型。本实施例采用增强现实信息使操作人员更容易理解操作方法，以便准确无误的进行维修，降低了对维修人员专业技能的要求。该维修可以是维护和/或检修。
检修内容记录模块，用于利用增强现实信息辅助维修人员完成检查。
本实施例中，在完成预定设备维修的情况下，在增强现实信息的预定条目中录入内容，维护人员按照增强现实信息进行预定设备维修，通过移动终端的屏幕上显示的ui界面按键提示，记录当前灭火器部件的状态，并以此进行下一步骤的内容检查；其中在检查界面中会有“上一步”，“下一步”按钮，供用户选择检查步骤；根据提示信息，遵循所设置的检修流程完成设备的故障信息检查，在检查完成，点击“完成”按钮，点击后会跳转到另一个界面，总览在刚刚的检查中合格和不合格的部件，显示当前设备的编号、所在位置、检查状态以及检查时间等信息，并保存为php文件。该录入内容还可以包括设备位置信息，通过在检修信息录入时，录入相应位置信息，通过位置信息可以快速检索设备并且为本系统的优化提供数据支撑。本实施例通过ui界面提示信息完成故障信息的录入以及不同信息录入模块间的切换。
历史记录查询模块用于将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储，通过历史信息查询调用存储在数据管理中心的预定条目中的内容，把数据库中的信息在移动终端中显示，便于人员检查；
本实施例中，为了便于后续对设备进行维护，在增强现实信息的预定条目中录入内容之后，通过历史记录查询模块：将录入预定条目中的内容发送至数据管理中心，以在数据管理中心进行存储。通过ui界面设置的“记录”，“取消”按钮，用户点击记录则会和数据管理中心进行通信，将录入数据存入数据管理中心，该数据管理中心根据录入数据，更新检修条目信息中的信息，实现了录入数据通过php文件实时同步至数据库，便于后续对数据中心存储的数据进行查看
在本发明的一可选实施例中：为了提高特征图片识别的准确率，特征识别图片库采用vumark特征识别图片库。
本发明实施例运用增强现实技术便捷高效的对设备进行故障检修和记录，将维修情况录入到预定条目中，弥补了设备实时信息录入和查询的空白，实现了检修信息的数据化管理。
在本发明的第七实施例中，提供一种计算机可读存储介质，计算机可读存储介质存储有一个或者多个程序，一个或者多个程序可被一个或者多个处理器执行，以实现如本发明第一实施例或者第二实施例的基于增强现实的设备检修与维护方法的步骤。
由于在第一、二实施例中已经对基于增强现实的设备检修与维护方法做了具体说明，本实施例在此不再赘述。
本实施例中，的存储介质可以包括但不限于为：rom、ram、磁盘或光盘等。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。