一种可配置化的CAN数据解析方法与流程

一种可配置化的can数据解析方法
技术领域
1.本发明涉及车联网技术领域，具体涉及一种基于can数据解析规则，can数据采集需求对can数据进行可配置化的解析技术，用于提高can数据解析的效率。


背景技术：

2.智能化汽车是未来汽车的发展方向，车联网无线通信将汽车上各传感器数据上传至云端，再围绕这些数据分析挖掘出各种智能化场景。当不同车型新增或修改can数据策略，或增加一些新的车型时，can数据的采集和解析规则会产生相应的变化，通过传统方式进行人工升级或修改后台解析程序的方式，存在工作量大、沟通成本高、后期维护升级麻烦等一系列不足，缺少一定的灵活性和适配性，降低了后续can数据分析及应用的效率。
3.公开号为cn107465695a的中国发明专利公开了一种基于数据库动态更新can解析参数的方法和系统，该专利需要每次在数据库比对维护新的can解析参数，然后重启系统才能生效，虽具有一定的配置灵活性，但维护和更新生效不够便捷和自动化，对快速变化的can数据采集需求情况下，缺乏效率。


技术实现要素：

4.针对现有技术存在的上述不足，本发明的目的是提供一种可配置化的can数据解析方法，本发明实现了动态化的can数据解析，提高了can数据解析的灵活性和处理效率。
5.本发明的技术方案是这样实现的：一种可配置化的can数据解析方法，包括以下步骤，1）制定出各车型can矩阵文件，然后根据业务数据需求制定can数据采集需求文件；2）实时将can矩阵文件和can数据采集需求文件上传至can解析配置管理平台；3）云端从can解析配置管理平台读取最新的can矩阵文件和can数据采集需求文件，并通过云端的can数据解析程序实时解析出其中的can信号规则；4）车端将can报文数据发送到云端，云端利用步骤3）得到的can信号规则将can报文数据解析成多条can信号数据；5）将步骤4）解析出的多条can信号数据写入数据存储系统，以供具体业务的数据分析挖掘使用。
6.其中，can矩阵文件包括对应车型所有可以被采集的can信号及其解析规则；针对某些特殊的can信号，制定特殊的公式字段进行特定的解析计算。
7.具体地，can矩阵文件包括的字段及每个字段含义如下：canid：每个can的标识；信号名称：can上信号的中文名称，可显示出信号含义；信号标识：can上信号的英文名称，解析后的数据会附带该标识；信号起始位置：can信号在can报文中的起始位置；
信号长度：can信号在报文中的长度；倍数因子：报文解析出的值和正常值的倍数关系；偏移量：报文解析出的值和正常值的偏移量；最小值：can信号定义的最小值；最大值：can信号定义的最大值；单位：can信号的单位；计算公式：报文解析出的数据和正常数据的公式对应，也用于定义一些特殊对应关系，在程序中进行识别。
8.其中canid可以对应多个信号，每个信号有自己对应的报文解析规则。
9.其中，can数据采集需求文件包含业务采集需要的can信号的信息；can数据采集需求文件采用excel文件格式。
10.本发明中，can解析配置管理平台布置在云端，作为云端的组成部分。这样更有利于数据的传输，不会因为网络原因而影响传输，传输速率和稳定性都更好。
11.在步骤2）中，将can矩阵文件和can数据采集需求文件上传至can解析配置管理平台时，如果上传失败则进行相关原因提示，根据提示对相应文件进行修改后重新上传；上传成功后配置文件会存储至文件服务器对应目录，然后在后台数据库记录最新变化及存储路径，供查询展示。
12.这样，步骤3）云端从can解析配置管理平台读取最新的can矩阵文件和can数据采集需求文件时，云端就定时从can解析配置管理平台的后台数据库中读取到最新变化，然后根据存储路径获取最新的can矩阵文件和can数据采集需求文件，再根据这两个文件解析形成can信号规则。
13.与现有技术相比，本发明具有如下有益效果：1、本发明系统提供快速入口，仅需业务方按照指定格式定义好can矩阵文件和can数据采集需求文件，然后上传至管理平台即可，在平台进行管理和更新。后续无需专门的开发人员进行升级配置，程序重启等步骤，即可动态化的应用新的配置文件规则进行解析。解耦了业务人员及开发人员，降低双方的沟通成本及程序研发维护成本，提高了can数据解析的灵活性和处理效率。
14.2、本发明可实现can矩阵和can采集需求的动态更新，当采集规则有修改或新增时，上传最新的配置文件，即可自适应对can信号数据进行解析。
附图说明
15.图1为本发明can数据解析整体流程图。
16.图2为本发明can矩阵文件格式示意图。
17.图3为本发明can数据采集需求文件格式示意图。
18.图4为本发明配置文件上传can解析配置管理平台流程图。
19.图5为本发明can数据解析程序流程图。
具体实施方式
20.主机车厂会针对不同车型制定不同的can数据采集策略，按照定义好的频率通过
无线通信4g/5g的方式将can报文数据实时上传至云端，为此本发明提供一种可配置化的、动态更新的can数据解析技术及系统平台，业务方定义好各车型对应的can矩阵配置文件，其中包括canid，信号标识，起始bit，数据长度，偏移量，倍数因子，范围值等符合国标的字段，再根据一些专有的信号拓展出公式字段，满足某些信号独特的解析计算需求。然后定义出can数据采集需求配置文件，在平台上传定义好的配置文件，对不同车型不同配置文件进行版本的更新及管理。云端can数据解析程序实时识别最新的配置文件，读取can矩阵及can数据采集需求，解析出其中的can信号规则，根据can信号规则从can报文数据中解析出若干的can信号数据，进行存储及后续分析。
21.以下结合附图和具体实施方式对本发明做进一步详细描述。
22.图1展示了从上传can矩阵文件、can数据采集需求文件到符合需求的can信号数据被解析出来的全流程。首先，业务人员会制定出各车型can矩阵文件，具体参照图2的can矩阵文件格式，其中包括了该车型所有可以被采集的can信号及其解析规则，针对某些特殊的can信号，还会制定特殊的公式字段进行特定的解析计算。然后根据业务数据需求再制定can数据采集需求文件，其中指出了业务采集需要的can信号的信息，具体参照图3的can数据采集需求文件格式。该文件为便于业务方使用，通常采用excel文件。然后，将这两个配置文件上传至can解析配置管理平台，具体流程参照图4。can解析程序实时从can解析配置管理平台中读取最新的配置文件，解析出其中的can信号规则，再对读取的can报文数据解析成多条can信号数据，具体解析逻辑参照图5。最终将解析的多条can信号数据写入数据存储系统，以供具体业务的数据分析挖掘使用。整个流程可实现can矩阵和can采集需求的动态更新，当采集规则有修改或新增时，上传最新的配置文件，即可自适应对can信号数据进行解析。
23.图2为can矩阵文件的格式,每个字段含义如下：canid：每个can的标识；信号名称：can上信号的中文名称，可显示出信号含义；信号标识：can上信号的英文名称，解析后的数据会附带该标识；信号起始位置：can信号在can报文中的起始位置；信号长度：can信号在报文中的长度；倍数因子：报文解析出的值和正常值的倍数；偏移量：报文解析出的值和正常值的偏移量；最小值：can信号定义的最小值；最大值：can信号定义的最大值；单位：can信号的单位，例如m（米），h（小时），%（百分比）等；计算公式：报文解析出的数据和正常数据的公式对应，也可定义一些特殊对应关系，在程序中进行识别。
24.业务人员根据该格式定义，其中canid可以对应多个信号，每个信号有自己对应的报文解析规则，后续在图5的flink程序中进行读取识别。
25.图3为can数据采集需求文件格式，指定出需要采集解析的canid，为can矩阵中canid的一部分，可随业务作一定变更。can数据采集需求文件格式包括信号中文名称、信号英文名称、信号说明、采集模式、上传精度和信号周期。
26.图4为can解析配置管理平台的上传流程，业务人员制定好can矩阵文件、can数据采集需求文件后，再通过can解析配置管理平台上传，若失败会有相关原因提示，业务人员可进行修改，重新上传。上传成功后配置文件会存储至文件服务器对应目录，然后在数据库记录最新变化及存储路径，再供查询展示。
27.图5为can数据解析的程序流程，该程序为分布式flink实时程序，包括数据消费流和配置读取流两条线，其中数据消费流会实时消费车机采集的can报文数据。配置读取流，定时从can解析配置管理平台的后台数据库中读取到最新变化，然后根据存储路径获取最新的can矩阵文件和can采集需求文件，根据这两个文件形成can信号的解析规则。然后数据消费流和配置读取流两条流数据结合，实时的can报文数据会根据最新的解析规则进行解析，生成不同的can信号数据，最终数据落地至数据存储平台，以供后续数据分析之用。鉴于各个厂家的数据都有安全和保密需要，故本发明的数据存储平台设置于主机厂的私有云上，本发明所说的云端则为公有云。
28.本发明可实现不重启，根据上传的解析规则即可动态解析can报文数据，进行平台的一体化管理，提升can数据解析的效率。
29.最后需要说明的是，本发明的上述实例仅仅是为说明本发明所作的举例，而并非是对本发明的实施方式的限定。尽管申请人参照较佳实施例对本发明进行了详细说明，对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其他不同形式的变化和变动。这里无法对所有的实施方式予以穷举。凡是属于本发明的技术方案所引申出的显而易见的变化或变动仍处于本发明的保护范围之列。