基于实物商品和车牌识别的汽车服务项目识别系统及方法与流程

1.本发明涉及车辆服务技术领域，具体说是一种基于实物商品和车牌识别的汽车服务项目识别系统及方法。


背景技术：

2.随着信息化技术的发展，现有技术中，车辆维修厂一般也会选择使用维修软件管理日常工作，通常维修过程如下：车主开车到店服务时，维修厂的接待人员会根据车主需求在系统上开工单，工单里主要记录车主、车辆(车牌)、接待时间、服务项目及实物商品等主要信息。
3.如车主是到店要做小保养的话，工单内会记录的服务项目如更换机油更换机滤，而实物商品会记录如某种品牌机油4l，某品牌机滤1个等信息，工单开完并指派给某技师后，技师会按照工单内容对车辆进行施工；而维修厂为跟踪每个技师和每个服务项目的施工情况，一般要求技师在服务项目开始施工前点下开始施工，施工结束时点下结束施工，这样可以精确的记录每个服务项目的开始时间和结束时间，方便维修厂做数据分析以及优化流程，进而做到更精细化的管理。
4.但是在实际操作中，要求技师自己在服务项目开始前点开始施工，主要存在以下问题：
5.1、依赖技师去到系统上操作，容易忘记遗漏；
6.2、遗漏之后，再去点击操作，信息更新不够及时，记录的施工时间和结束时间不够精确；
7.3、不方便操作：在车间施工时，技师手上沾满机油或带着手套不方便操作手机。
8.因此，为了解决上述问题，需要一种可以自动识别汽车维修服务项目的系统和方法，从而不需要人工进行操作。


技术实现要素：

9.本发明的目的是针对现有技术存在的不足，提供一种基于实物商品和车牌识别的汽车服务项目识别系统及方法，其技术方案如下：
10.一种基于实物商品和车牌识别的汽车服务项目识别系统，包括数据采集单元、数据存储单元、数据处理单元以及数据展示单元；
11.所述的数据采集单元包括设置于汽车维修工位处用于采集数据的摄像头以及摄像头管理模块；
12.所述的数据存储单元包括对象存储模块以及关系存储模块；所述的对象存储模块存储工位施工视频；所述的关系存储模块存储工单信息、施工流程配置信息、实物商品和类目关系、服务项目和类目关系以及工位区域信息；
13.所述的数据处理单元包括数据预处理模块、车牌识别模块、实物商品识别模块、匹配模块以及项目状态处理模块。
14.所述的数据展示单元包括显示模块，该显示模块相应显示工单信息以及服务项目状态信息。
15.进一步地，所述的摄像头实时采集维修工位上的施工信息，并将采集到的视频流上传至后端服务器的数据存储单元中，上传方式包含wifi传输、有线传输以及蓝牙传输；
16.所述的摄像头管理模块支持划定维修工位的覆盖区域。
17.进一步地，所述的数据预处理模块接收摄像头上传的视频流信息，进行图像采样，并按工位区域设置切割成若干工位图像，然后传递至车牌识别模块和实物商品识别模块；
18.所述的车牌识别模块识别对应工位图像内的车牌信息；
19.所述的实物商品识别模块，识别对应图工位图像内的实物商品信息。
20.所述的匹配模块根据车牌信息匹配工单进而获取工单内的服务项目；根据实物商品找到商品类目进而匹配到商品类目关联的服务项目列表，把此列表和工单内的服务项目做对比匹配得出当前服务项目；
21.所述的项目状态处理模块，根据服务项目施工流程配置，将识别到的服务项目自动推进到下一个节点。
22.一种基于实物商品和车牌识别的汽车维修服务项目识别方法，包括以下步骤：
23.s1、在车辆维修厂施工车间内合适位置处安装摄像头，通过摄像头管理模块划定工位区域；
24.s2、通过摄像头实时采集视频流，采样提取图像信息；
25.s3、将图像信息按工位区域的设置切割成若干工位图像；
26.s4、识别工位图像内的车牌信息和实物商品信息；
27.s5、根据s4识别到的车牌信息去匹配工单，进而获取工单内的服务项目；
28.s6、根据s4识别到的实物商品去匹配该能用到该实物的服务项目；
29.s7、根据s5得到的工单内的服务项目和s6得到的服务项目列表，匹配出实际服务项目；
30.s8、把s7识别到的实际服务项目的状态推进到下一步；
31.s9、循环执行s4到s8，依次处理所有工位图像直到结束。
32.进一步地，所述步骤s1中摄像头安装于维修车辆车头方向上方以及车尾方向下方，服务项目的识别区域可划分为多个。
33.进一步地，所述步骤s2中摄像头实时采集工位的施工视频流，将视频流上传到至系统的对象存储模块，通过opencv读取视频流后每25帧提取一张图像。
34.进一步地，所述的s4中具体包括以下子步骤：
35.s41、将图像信息分别传递至车牌识别模块和实物商品识别模块。
36.s42、车牌识别模块识别出工位图像内的车牌信息，并记录该车牌车辆第一次出现在工位图像内的时间；
37.s43、实物商品识别模块识别出工位图像内的实物商品，识别到的实物商品，如机油、机滤、玻璃水、空气滤、空调滤以及火花塞等。
38.进一步地，所述的s5具体包括以下子步骤：
39.s51、根据车牌信息去关系存储模块匹配工单数据，一个车牌在系统中可存在多个工单，首先过滤掉已结算和已施工结束的工单，然后获取车辆进入工位的时间，再从剩余多
个工单里获取接待时间距离进入工位时间最近的工单；
40.s52、获取这些工单内的服务项目。
41.进一步地，所述的s8将识别到的实际服务项目的状态推进到下一步，因存在重复识别的问题只在第一次识别到服务项目时推进状态。
42.有益效果：本发明具有以下有益效果：本发明基于实物商品和车牌识别来判断确定当前维修工位上车辆的服务项目，两数据交汇匹配，互相印证后，识别结果更加精确，并且能够自动划分维修区域以及覆盖区域，确定服务项目后可自行推进状态，不需要技师点击确认，信息更新及时，而且维修时间记录准确，可以做到更精细管理以及优化整体流程。
附图说明
43.图1为本发明结构示意图；
44.图2为本发明流程示意图；
45.图3为本发明摄像头划定工位图。
具体实施方式
46.下面结合附图和具体实施例，进一步阐明本发明，本实施例在以本发明技术方案为前提下进行实施，应理解这些实施例仅用于说明本发明而不用于限制本发明的范围。
47.如图1和图2所示，本发明设置为一个可自动识别车辆服务项目及将识别到的服务项目自动推进状态变更的系统，其主要分为四部分：数据采集单元、数据存储单元、数据处理单元以及数据展示单元。
48.数据采集单元，包括摄像头：可实时采集工位上的施工信息，并将采集到的视频流上传到后端服务器的数据存储单元中，上传方式包含但不限于wifi传输、有线传输、蓝牙传输等；
49.摄像头管理模块：支持划定工位的覆盖区域，当一个摄像头覆盖多个工位时，可以划定工位的覆盖区域。
50.数据存储单元，包括对象存储模块：主要存储工位施工视频；
51.关系存储模块：主要存储工单信息、施工流程配置信息、实物商品和类目关系、服务项目和类目关系、工位区域信息等。
52.数据处理单元，包括数据预处理模块：接收摄像头上传的视频流并存储到外设的数据库，进行图像采样预处理后传给车牌识别模块和实物商品识别模块；
53.车牌识别模块：识别对应工位图像内的车牌信息；实物商品识别模块：识别对应图工位图像内的实物商品信息。
54.匹配模块：根据车牌信息匹配工单进而获取工单内的服务项目，根据实物商品找到商品类目进而匹配到商品类目关联的服务项目列表，把此列表和工单内的服务项目做对比匹配得出当前服务项目。
55.项目状态处理模块，根据服务项目施工流程配置，将识别到的服务项目自动推进到下一个节点(如施工中)；且将识别到的实际服务项目的状态推进到下一步时，因存在重复识别的问题，因此只在第一次识别到服务项目时推进状态。
56.数据展示单元，包含显示模块，可展示工单等服务项目状态信息。
57.本发明具体工作流程如下：
58.首先，如图3所示，在维修厂的工位合适位置处安装摄像头，划定实物商品和识别车牌各自的识别区域，摄像头安装位置为车头方向的上方，可以增加车尾方向的下方摄像头，下方摄像头有助于识别举升后底盘区域。服务项目的识别区域划定可以是多个，如更换机油机滤时主要采集发动机舱区域，更换轮胎主要采集车辆四轮区域。
59.在维修工人进行施工时，通过摄像头实时采集工位的施工视频流，将视频流上传到系统的对象存储模块，使用opencv读取视频流后每25帧提取一张图像。
60.将图像信息按工位区域设置切割成若干工位图像，然后识别工位图像信息内的实物商品信息和车牌信息，具体是将图像分别交给车牌识别模块和实物商品识别模块。
61.车牌识别模块识别出工位图像内的车牌信息，并记录该车牌车辆第一次出现在工位图像里的时间。
62.实物商品识别模块识别出工位图像内的实物商品，识别到的实物商品可能包含但不限于机油、机滤、玻璃水、空气滤、空调滤、火花塞等。
63.然后识别到的车牌去匹配工单，进而找到工单内的服务项目，先是根据车牌去关系存储模块匹配工单数据，一个车牌在系统里可能存在多个工单，首先过滤掉已结算和已施工结束的工单，然后获取车辆进入工位的时间，再从剩余多个工单里取接待时间距离进入工位时间最近的工单，再根据车牌去关系存储模块匹配工单数据，找到工单内的服务项目，如更换机油机滤。
64.根据实物商品找到对应的商品类目，再根据类目去匹配可能的服务项目，如已经识别到的实物商品为壳牌机油，找到的商品类目为机油，该类目关联的服务项目可能有更换机油机滤、更换机油等。
65.将工单内的服务项目和可能服务项目列表匹配，得出实际服务项目，工单里服务项目为更换机油机滤，但此工单也能存在其他项目如添加玻璃水等，此时不确定当前服务项目是哪个，而可能服务项目列表为更换机油和更换机油机滤，此时可匹配得到当前服务项目为更换机油机滤。
66.然后就可将工单里对应服务项目的状态推进到下一步(如自动开始施工等)，之后需要循环依次处理所有工位的图像直到结束。
67.本发明基于实物商品和车牌识别来判断确定当前维修工位上车辆的服务项目，两数据交汇匹配，互相印证后，识别结果更加精确，并且能够自动划分维修区域以及覆盖区域，确定服务项目后可自行推进状态，不需要技师点击确认，信息更新及时，而且维修时间记录准确，可以做到更精细管理以及优化整体流程。
68.上述具体实施方式只是本发明的一个优选实施例，并不是用来限制本发明的实施与权利要求范围的，凡依据本发明申请专利保护范围内容做出的等效变化和修饰，均应包括于本发明专利申请范围内。