数据存储和读取方法、装置、系统及存储介质与流程

文档序号:15557475发布日期:2018-09-29 01:27阅读:185来源:国知局

本发明涉及计算机应用技术,特别涉及数据存储和读取方法、装置、系统及存储介质。



背景技术:

无人驾驶车辆,是指通过车载传感系统来感知车辆周围环境,并根据感知所获得的道路、车辆位置和障碍物信息等,控制车辆的转向和速度,从而使车辆能够安全、可靠地在道路上行驶。

在无人驾驶车辆系统中,会涉及到各种数据的存储问题。

为此,现有技术中提出了一种支持各种基础类型数据的通用参数存储结构,所述基础类型数据可包括布尔(bool)类型数据、整形(int)类型数据、双精度浮点型(double)类型数据、字符串(string)类型数据以及二进制(bytes)类型数据等。

而在无人驾驶车辆系统中,还会较多的用到协议缓存(protobuf)类型数据,针对这种复杂的数据结构,可将其序列化为string类型数据后进行存储,使用时再反序列化为对应的数据类型。

但是,这种方式在实际应用中会存在一定的问题,如:必须人为对数据类型进行约束,即必须人为约束序列化后的string类型数据是由哪种具体protobuf数据类型序列化而来的,否则则无法实现反序列化,存储的数据不能自解释其类型。



技术实现要素:

有鉴于此,本发明提供了数据存储和读取方法、装置、系统及存储介质。

具体技术方案如下:

一种数据存储方法,包括:

获取待存储的第一类型数据;

获取所述第一类型数据的结构定义描述信息;

按照预先定义的通用参数存储结构,将所述第一类型数据进行序列化后得到的第二类型数据以及所述结构定义描述信息同时进行存储。

一种数据读取方法,包括:

获取按照预先定义的通用参数存储结构进行存储的第二类型数据以及所述第二类型数据对应的结构定义描述信息;所述第二类型数据为将第一类型数据进行序列化后得到的,所述结构定义描述信息为所述第一类型数据的结构定义描述信息;

依据所述结构定义描述信息,对所述第二类型数据进行反序列化,得到所述第一类型数据。

一种数据存储装置,包括:第一获取单元、第二获取单元以及存储单元;

所述第一获取单元,用于获取待存储的第一类型数据;

所述第二获取单元,用于获取所述第一类型数据的结构定义描述信息;

所述存储单元,用于按照预先定义的通用参数存储结构,将所述第一类型数据进行序列化后得到的第二类型数据以及所述结构定义描述信息同时进行存储。

一种数据读取装置,包括:第三获取单元以及处理单元;

所述第三获取单元,用于获取按照预先定义的通用参数存储结构进行存储的第二类型数据以及所述第二类型数据对应的结构定义描述信息;所述第二类型数据为将第一类型数据进行序列化后得到的,所述结构定义描述信息为所述第一类型数据的结构定义描述信息;

所述处理单元,用于依据所述结构定义描述信息,对所述第二类型数据进行反序列化,得到所述第一类型数据。

一种无人驾驶车辆数据处理系统,包括:如以上所述的数据存储装置,以及,如以上所述的数据读取装置。

一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现如以上所述的方法。

一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如以上所述的方法。

基于上述介绍可以看出,采用本发明所述方案,在获取到待存储的第一类型数据后,可进一步获取第一类型数据的结构定义描述信息,之后可将第一类型数据进行序列化后得到的第二类型数据以及结构定义描述信息同时进行存储,这样,后续当需要时,可直接根据结构定义描述信息完成反序列化操作,无需像现有技术中一样进行人为约束,从而简化了用户操作等。

【附图说明】

图1为本发明所述数据存储方法实施例的流程图。

图2为本发明所述数据读取方法实施例的流程图。

图3为本发明所述数据处理过程具体示例示意图。

图4为本发明所述数据存储装置实施例的组成结构示意图。

图5为本发明所述数据读取装置实施例的组成结构示意图。

图6示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的框图。

【具体实施方式】

为了使本发明的技术方案更加清楚、明白,以下参照附图并举实施例,对本发明所述方案进行进一步说明。

显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。

图1为本发明所述数据存储方法实施例的流程图。如图1所示,包括以下具体实现方式。

在101中,获取待存储的第一类型数据。

在102中,获取第一类型数据的结构定义描述信息。

在103中,将第一类型数据序列化为第二类型数据。

在104中,将得到的第二类型数据以及结构定义描述信息同时进行存储。

第一类型数据具体为何种类型数据可根据实际需要而定,比如,可为protobuf类型数据,相应地,第二类型数据可为string类型数据。

以下即以protobuf类型数据为例,对本实施例所述方案进行进一步说明。

本实施例中,针对待存储的protobuf类型数据,可首先获取其结构定义描述信息。结构定义描述信息中包括对数据的类型定义(即数据类型)描述、各字段描述等。如何获取结构定义描述信息为现有技术。

另外,还需要将protobuf类型数据序列化为string类型数据。之后,可将序列化后的string类型数据以及结构定义描述信息,按照预先定义的通用参数存储结构,同时进行存储。

通用参数存储结构至少还支持以下类型数据的存储:bool类型数据、int类型数据、double类型数据、bytes类型数据等。

本实施例所述通用参数存储结构可如下所示:

基于上述数据存储方法,图2为本发明所述数据读取方法实施例的流程图。如图2所示,包括以下具体实现方式。

在201中,获取按照预先定义的通用参数存储结构进行存储的第二类型数据以及第二类型数据对应的结构定义描述信息;第二类型数据为将第一类型数据进行序列化后得到的,结构定义描述信息为第一类型数据的结构定义描述信息。

在202中,依据结构定义描述信息,对第二类型数据进行反序列化,得到第一类型数据。

较佳地,第一类型数据可为protobuf类型数据,第二类型数据可为string类型数据。

如前所述,在对protobuf类型数据进行存储时,可首先获取其结构定义描述信息,并需要将protobuf类型数据序列化为string类型数据。之后,可将序列化后的string类型数据以及结构定义描述信息,按照通用参数存储结构,同时进行存储。

通用参数存储结构至少还支持以下类型数据的存储:bool类型数据、int类型数据、double类型数据、bytes类型数据等。

这样,当需要读取protobuf类型数据时,可分别获取所存储的protobuf类型数据进行序列化后得到的string类型数据以及结构定义描述信息,进而可依据获取到的结构定义描述信息,对获取到的string类型数据进行反序列化,从而得到所需的protobuf类型数据。

现有技术中,针对protobuf类型数据,必须人为对数据类型进行约束,以便当需要对存储的数据进行读取等操作时,完成反序列化等,而本发明所述方案中,可同时对protobuf类型数据进行序列化后得到的string类型数据以及结构定义描述信息进行存储,这样,后续即可依据结构定义描述信息,直接对protobuf类型数据进行序列化后得到的string类型数据进行反序列化操作,从而简化了用户操作,方便了用户使用等。

另外,现有技术中,需要由用户将protobuf类型数据序列化为string类型数据进行存储等,而本发明所述的数据存储和读取方法可在框架层实现,由框架层自动地完成序列化和反序列化等操作,对于用户来说不可见,从而进一步简化了用户操作。其中,框架层可以理解为包含一系列接口和工具等的软件集合。

此外,现有方式中,针对protobuf类型数据,除了采用上述通用参数存储结构进行存储的方式外,还可专门实现一系列的接口,实现特殊的支持。

但是,这种方式在实际应用中也会存在一定的问题,如:无法解除通信系统中框架层与用户层的编译依赖,即在对protobuf类型数据进行编译时,必须引用所存储数据类型头文件,才能通过编译。其中,用户层可以理解为用户基于框架层提供的接口实现的应用程序等。

而本发明所述方案中,同时对protobuf类型数据进行序列化后得到的string类型数据以及结构定义描述信息进行存储,这样,可直接依据结构定义描述信息,对protobuf类型数据进行编译,无需引用头文件,从而解除了所述编译依赖,实现了解耦。

以下通过具体示例,对本发明所述方案进行进一步说明。

图3为本发明所述数据处理过程具体示例示意图。如图3所示,对于待存储的protobuf类型数据a,在框架层中,首先解析/获取其结构定义描述信息,并序列化为string类型数据(为简化附图,未图示)等,之后,按照通用参数存储结构进行数据存储,后续,可利用protobuf反射机制,实现数据的解析等,如当需要进行反序列化操作时,可根据a的结构定义描述信息,获取数据类型等信息,进而完成对a序列化后的数据(string类型数据)的反序列化操作,并且,基于a的结构定义描述信息,可解除框架层与用户层的编译依赖,实现依赖解耦。

需要说明的是,对于前述的各方法实施例,为了简单描述,都将其表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。

另外,在上述各实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。

总之,采用上述方法实施例所述方案,可在框架层中同时对protobuf类型数据进行序列化后得到的string类型数据以及结构定义描述信息进行存储,并可自动地完成序列化以及反序列化操作,从而简化了用户操作等。

而且,采用上述方法实施例所述方案,可解除编译依赖,实现解耦。

另外,采用上述方法实施例所述方案,无需针对protobuf类型数据专门实现一系列的接口,从而统一了用户层接口实现,简化了用户使用接口的方式等。

以上是关于方法实施例的介绍,以下通过装置实施例,对本发明所述方案进行进一步说明。

图4为本发明所述数据存储装置实施例的组成结构示意图。如图4所示,包括:第一获取单元401、第二获取单元402以及存储单元403。

第一获取单元401,用于获取待存储的第一类型数据。

第二获取单元402,用于获取第一类型数据的结构定义描述信息。

存储单元403,用于按照预先定义的通用参数存储结构,将第一类型数据进行序列化后得到的第二类型数据以及得到的结构定义描述信息同时进行存储。

较佳地,第一类型数据可为protobuf类型数据,第二类型数据可为string类型数据。

本实施例中,第二获取单元402获取到来自第一存储单元401的待存储的protobuf类型数据后,可进一步获取protobuf类型数据的结构定义描述信息,结构定义描述信息中包括对数据的类型定义(即数据类型)描述、各字段描述等。

第二获取单元402可进一步将protobuf类型数据序列化为string类型数据,进而由存储单元403将序列化后的string类型数据以及结构定义描述信息,按照预先定义的通用参数存储结构,同时进行存储。

此外,通用参数存储结构至少还支持以下类型数据的存储:bool类型数据、int类型数据、double类型数据、bytes类型数据等。

本实施例所述通用参数存储结构可如下所示:

图5为本发明所述数据读取装置实施例的组成结构示意图。如图5所示,包括:第三获取单元501以及处理单元502。

第三获取单元501,用于获取按照预先定义的通用参数存储结构进行存储的第二类型数据以及第二类型数据对应的结构定义描述信息;第二类型数据为将第一类型数据进行序列化后得到的,结构定义描述信息为第一类型数据的结构定义描述信息。

处理单元502,用于依据结构定义描述信息,对第二类型数据进行反序列化,得到第一类型数据。

较佳地,第一类型数据可为protobuf类型数据,第二类型数据可为string类型数据。

在对protobuf类型数据进行存储时,可将protobuf类型数据进行序列化后得到的string类型数据以及protobuf类型数据的结构定义描述信息,按照通用参数存储结构,同时进行存储。

通用参数存储结构至少还支持以下类型数据的存储:bool类型数据、int类型数据、double类型数据、bytes类型数据。

这样,当需要读取protobuf类型数据时,第三获取单元501可分别获取所存储的protobuf类型数据进行序列化后得到的string类型数据以及结构定义描述信息,进而可由处理单元502依据获取到的结构定义描述信息,对获取到的string类型数据进行反序列化,从而得到所需的protobuf类型数据。

本发明同时公开了一种无人驾驶车辆数据处理系统,包括:如图4所示数据存储装置,以及,如图5所示数据读取装置。

上述装置和系统实施例的具体工作流程请参照前述方法实施例中的相应说明,不再赘述。

图6示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的框图。图6显示的计算机系统/服务器12仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示,计算机系统/服务器12以通用计算设备的形式表现。计算机系统/服务器12的组件可以包括但不限于:一个或者多个处理器(处理单元)16,存储器28,连接不同系统组件(包括存储器28和处理器16)的总线18。

总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(isa)总线,微通道体系结构(mac)总线,增强型isa总线、视频电子标准协会(vesa)局域总线以及外围组件互连(pci)总线。

计算机系统/服务器12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机系统/服务器12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。

存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(ram)30和/或高速缓存存储器32。计算机系统/服务器12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图6未显示,通常称为“硬盘驱动器”)。尽管图6中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如cd-rom,dvd-rom或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40,可以存储在例如存储器28中,这样的程序模块42包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

计算机系统/服务器12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该计算机系统/服务器12交互的设备通信,和/或与使得该计算机系统/服务器12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口22进行。并且,计算机系统/服务器12还可以通过网络适配器20与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。如图6所示,网络适配器20通过总线18与计算机系统/服务器12的其它模块通信。应当明白,尽管图中未示出,可以结合计算机系统/服务器12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。

处理器16通过运行存储在存储器28中的程序,从而执行各种功能应用以及数据处理,例如实现图1或2所示实施例中的方法。

本发明同时公开了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时将实现如图1或2所示实施例中的方法。

可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、电线、光缆、rf等等,或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++,还包括常规的过程式程序设计语言—诸如”c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法等,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(rom,read-onlymemory)、随机存取存储器(ram,randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1