一种基于图像全息处理的车辆操作说明成像方法及系统与流程

本发明涉及车辆说明领域，尤其涉及一种基于图像全息处理的车辆操作说明成像方法及系统。

背景技术：

说明书，是以应用文体的方式对某事或物来进行相对的详细描述，方便人们认识和了解某事或物。目前行业内多使用纸质文档或是电子文档作为说明书，其中，电子文档是将纸质文档转化为电子文档制成app或者装入车机。

然而，纸质说明书具有以下缺陷：不便于携带、查阅困难、说明不直观、交互性差。

电子说明书具有以下缺陷：第一，需要用户自己存储并在需要的时候查询，当未携带存储电子说明书的电子设备时，无法查询；第二，电子说明书通常是文字描述，说明不直观。

目前，增强现实技术(augmentedreality，简称ar)，将虚拟的信息元素叠加在真实世界的空间或物体上，实现人在真实世界中对这些虚拟信息元素操作和交互，将真实世界与虚拟世界“无缝”集成。

现有技术中，通常通过拍摄整车或整车前部等大面积图像，对该大面积图像进行ar处理并对该大面积图像中的所有部件整体进行说明，无法对大面积图像中的各个部件单独说明，并且，为了得到某一部件的说明时，需要拍摄包括该部件的大面积图像例如整车或整车前部等，这给用户带来不便。

因此，需要一种便于携带、交互性强、说明直观准确，并能为车辆用户提供解决方案和进一步服务的基于图像全息处理的车辆操作说明成像方法及系统。

技术实现要素：

根据本发明的一方面，提供了一种基于图像全息处理的车辆操作说明成像方法，包括以下步骤：图像采集模块对车辆的功能部件进行拍摄，将拍摄后的实时图像数据发送至车辆图像匹配模块；车辆图像匹配模块接收实时图像数据，将该实时图像数据与预存的功能部件图像数据进行匹配，并提取与实时图像数据对应的功能部件图像数据，将功能部件图像数据和实时图像数据发送至车辆图像全息处理模块；车辆图像全息处理模块将接收的功能部件图像数据和实时图像数据处理成功能部件全息图像，并发送至显示模块加以显示；当动作采集模块采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；车辆图像全息处理模块将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示。

车辆图像全息处理模块通过将功能部件图像数据和实时图像数据填入预存在车辆图像全息处理模块中的全息影像生成模块中来处理部件图像数据和实时图像数据。

功能部件图像数据存储于图像数据存储模块；功能部件使用说明数据存储于使用说明数据存储模块。

功能部件使用说明数据包括车辆图像的用途说明、信息说明、故障说明和/或解决方案。

功能部件使用说明数据的形式为文字、链接、视频中任一。

根据本发明的另一方面，提供了一种基于图像全息处理的车辆操作说明成像系统，包括：图像采集模块，用于对车辆的功能部件进行拍摄，将拍摄后的实时图像数据发送至车辆图像匹配模块；车辆图像匹配模块，用于接收实时图像数据，将该实时图像数据与预存的功能部件图像数据进行匹配，并提取与实时图像数据对应的功能部件图像数据，将功能部件图像数据和实时图像数据发送至车辆图像全息处理模块；车辆图像全息处理模块，用于将接收的功能部件图像数据和实时图像数据处理成功能部件全息图像，并发送至显示模块加以显示，还用于将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示；动作采集模块，用于当采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块，用于根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；显示模块，用于显示功能部件全息图像和功能部件使用说明全息图像。

基于图像全息处理的车辆操作说明成像系统，还包括：图像数据存储模块，用于存储功能部件图像数据；使用说明数据存储模块，用于存储功能部件使用说明数据。

本发明的有益效果为：

1.本发明的基于图像全息处理的车辆操作说明成像方法及系统通过图像采集模块、车辆图像匹配模块、车辆图像全息处理模块、动作采集模块和指令处理模块的配合使用，使得在用户不了解的车辆时，利用图像采集模块将该车辆的功能部件拍摄下来并将拍摄的实时图像数据发送至车辆图像匹配模块对该实时图像数据进行匹配，提取与实时图像数据对应的功能部件图像数据，利用车辆图像全息处理模块将实时图像数据和功能部件图像数据处理为功能部件全息图像，当动作采集模块采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；车辆图像全息处理模块将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示。

2.通过本发明的基于图像全息处理的车辆操作说明成像方法及系统，能够对拍摄的单个功能部件进行单独的具体分析说明，例如当车辆故障灯亮起时，车辆用户能够通过拍摄该故障灯，得到出现故障的原因以及解决该故障的方案，也能够将拍摄的大面积实时图像数据分割成其包含的多个功能部件，例如，当拍摄车辆方向盘和仪表盘并存的实时图像数据时，用户可以单独选择其中一个功能部件的具体分析说明。

附图说明

图1为本发明的基于图像全息处理的车辆操作说明成像方法步骤图；

图2为本发明的基于图像全息处理的车辆操作说明成像系统框图。

具体实施方式

下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的系统或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

本发明通过ar技术可以将仪表信息盘、操控按钮，甚至故障灯等汽车部件以全息的方式展示给用户，并能够以3d动画演示、视频讲解等更生动的方式向用户展示相应的信息和作用。

图1为本发明的基于图像全息处理的车辆操作说明成像方法步骤图，如图1所示，本发明提供的基于图像全息处理的车辆操作说明成像方法，包括以下步骤：图像采集模块对车辆的功能部件进行拍摄，将拍摄后的实时图像数据发送至车辆图像匹配模块；车辆图像匹配模块接收实时图像数据，将该实时图像数据与预存的功能部件图像数据进行匹配，并提取与实时图像数据对应的功能部件图像数据，将功能部件图像数据和实时图像数据发送至车辆图像全息处理模块；车辆图像全息处理模块将接收的功能部件图像数据和实时图像数据处理成功能部件全息图像，并发送至显示模块加以显示；当动作采集模块采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；车辆图像全息处理模块将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示。

其中，功能部件全息图像为动态的，具体地，当用户移动图像采集模块时，功能部件全息图像实时更新；功能部件使用说明全息图像包括被动态切换操作的功能部件使用说明数据和功能部件全息图像。

通过建立触控指令的点位与使用说明存储位置之间的映射关系将功能部件使用说明触控指令解析成使用说明存储位置映射参数，此操作运用了现有的触控技术，对此技术不再展开详细说明。

车辆图像全息处理模块通过将功能部件图像数据和实时图像数据填入预存在车辆图像全息处理模块中的全息影像生成模块中来处理部件图像数据和实时图像数据。

功能部件图像数据存储于图像数据存储模块；功能部件使用说明数据存储于使用说明数据存储模块。

功能部件使用说明数据包括车辆图像的用途说明、信息说明、故障说明和/或解决方案。其中，用途说明包括功能部件的使用方法和使用参数，信息说明包括功能部件的尺寸等规格参数，故障说明包括故障原因，解决方案包括用于解决故障的方法以及提供方法的商店链接和/或联系方式等。具体地，当车辆图像为车辆的仪表信息盘、操控按钮等图像时，功能部件使用说明数据为车辆图像的用途说明或信息说明；当车辆图像为发光故障灯等图像时，功能部件使用说明数据为车辆图像的故障说明和解决方案。运用ar技术识别故障，并为相应故障提供进一步服务或商品的销售模式。

通过本发明的基于图像全息处理的车辆操作说明成像方法及系统，能够对拍摄的单个功能部件进行单独的具体分析说明，例如当车辆故障灯亮起时，车辆用户能够通过拍摄该故障灯，得到出现故障的原因以及解决该故障的方案，也能够将拍摄的大面积实时图像数据分割成其包含的多个功能部件，例如，当拍摄车辆方向盘和仪表盘并存的实时图像数据时，用户可以单独选择其中一个功能部件的具体分析说明。这样使得用户可以根据需要拍摄车辆的某一功能部件，即使拍摄过程中拍摄的实时图像不仅包括需要的功能部件，而且包括其他功能部件时，也不影响用户查看对所需功能部件的说明。同时，用户无需为了查看对所需功能部件的说明而对车辆进行大面积拍摄。

功能部件使用说明数据的形式为文字、链接、视频中任一，例如，功能部件使用说明数据可以是以文字形式的仪表信息盘的信息说明、操控按钮的用途说明、发光故障灯的故障原因和解决方案，也可以是解决方案中的链接例如机油购买链接、车辆零部件供应商链接等等。

图2为本发明的基于图像全息处理的车辆操作说明成像系统框图，如图2所示，本发明提供的基于图像全息处理的车辆操作说明成像系统，包括：图像采集模块，用于对车辆的功能部件进行拍摄，将拍摄后的实时图像数据发送至车辆图像匹配模块；车辆图像匹配模块，用于接收实时图像数据，将该实时图像数据与预存的功能部件图像数据进行匹配，并提取与实时图像数据对应的功能部件图像数据，将功能部件图像数据和实时图像数据发送至车辆图像全息处理模块；车辆图像全息处理模块，用于将接收的功能部件图像数据和实时图像数据处理成功能部件全息图像，并发送至显示模块加以显示，还用于将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示；动作采集模块，用于当采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块，用于根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；显示模块，用于显示功能部件全息图像和功能部件使用说明全息图像。

具体地，当本发明的基于图像全息处理的车辆操作说明成像系统安装在移动终端上时，图像采集模块可以为移动终端的摄像头，动作采集模块和显示模块可以为移动终端的触控屏。

基于图像全息处理的车辆操作说明成像系统，还包括：图像数据存储模块，用于存储功能部件图像数据；使用说明数据存储模块，用于存储功能部件使用说明数据。

本发明的基于图像全息处理的车辆操作说明成像方法及系统通过图像采集模块、车辆图像匹配模块、车辆图像全息处理模块、动作采集模块和指令处理模块的配合使用，使得在用户不了解的车辆时，利用图像采集模块将该车辆的功能部件拍摄下来并将拍摄的实时图像数据发送至车辆图像匹配模块对该实时图像数据进行匹配，提取与实时图像数据对应的功能部件图像数据，利用车辆图像全息处理模块将实时图像数据和功能部件图像数据处理为功能部件全息图像，当动作采集模块采集到功能部件使用说明触控指令后，将该功能部件使用说明触控指令解析成使用说明存储位置映射参数发送至指令处理模块；指令处理模块根据使用说明存储位置映射参数调用预存的功能部件使用说明数据，发送至车辆图像全息处理模块；车辆图像全息处理模块将功能部件使用说明数据与功能部件全息图像合成功能部件使用说明全息图像，并发送至显示模块加以显示。

示例性地，本发明的基于图像全息处理的车辆操作说明成像系统的实现可以基于移动终端和云端的结合，该向导系统的图像采集模块、车辆部件图像全息处理模块、动作采集模块、指令处理模块和显示模块设置在移动终端，车辆部件图像匹配模块和存储模块设置在云端。移动终端获取用户对焦的图像目标，将经过预处理的图像头帧上传至云端，云端提供图集检索和通用物体识别功能，对终端上传的图像进行识别和反馈，车辆部件图像全息处理模块对反馈的图像附加3d展示效果，通过显示模块显示，用户可以通过显示模块的触摸屏进行点击后进入详细说明，当识别到故障例如故障灯亮起时，则在详细说明后附加解决方案和商品，在移动终端上实现识别跟踪和渲染，其中，通过内容分发网络(contentdeliverynetwork，cdn)提供高速资源库。因此，本发明的基于图像全息处理的车辆操作说明成像系统实现图像目标识别与跟踪、环境实时重建(simultaneouslocalizationandmapping，slam)和终端动态3d渲染，从而，能够运用3d物体跟踪、平面图像跟踪、slam实现对整车及内外饰的识别。

上述基于图像全息处理的车辆操作说明成像系统工作流程如下：开始-启动页-主页/说明页-车型选择页-配置选择页-识别界面-说明页面-帮助页面-商品和/或服务购买页面-结束。

本发明的基于图像全息处理的车辆操作说明成像系统便携性好、检索效率高、说明更加直观、增强交互体验、能够为用户提供常见问题的解决方案、还能够为用户提供常用物品、服务的购买链接、存储模块中存储各种车辆图像及与之对应的功能部件使用说明数据，通用性强。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。