面向数据方舱的数据存储管理方法、装置及存储介质

本发明涉及数据存储管理，尤其涉及一种面向数据方舱的数据存储管理方法、装置及存储介质。

背景技术：

1、随着卫星、无人机和地面移动监测以及通讯、网络、大数据、云计算等信息技术的快速发展，天空地立体化监测是退化耕地监测的主要监测手段。利用卫星、无人机等遥感技术可以获取大尺度的宏观的退化耕地时空信息，利用地面定位监测或者移动监测可以获取小尺度微观的退化耕地信息。基于天空地的监测数据协同、数据融合、数据同化以及数据挖掘分析，被认为是退化耕地监测数据管理和应用的关键技术，如何高效组织和管理这些动态监测数据是公认的技术难题。

2、近年来，随着数字化基础设施低时延、可扩展、轻量化的需求。在医疗、交通、地震、卫星接收、雷达监测、设施作物种植等应用领域，出现了方舱技术。

3、现有的数据方舱技术，主要集中数据方舱的物理结构以及数据方舱运行环境的监控管理等方面，而对数据方舱的数据存储类型、数据存储内容等数据存储管理技术还不完善，存在主观性、随意性等问题，导致对数据方舱中的数据的访问效率较低。

技术实现思路

1、针对现有技术存在的问题，本发明实施例提供一种面向数据方舱的数据存储管理方法、装置及存储介质。

2、本发明提供一种面向数据方舱的数据存储管理方法，包括：

3、基于退化耕地监测治理时空数据方舱的应用特征，确定数据方舱的类型；所述类型包括：移动舱、田间舱和中心舱；

4、基于不同类型的数据方舱所对应的第一特征，以及待存储数据的元数据对应的第二特征，分别计算所述不同类型的数据方舱所对应的第一特征与所述第二特征之间的相似度；

5、基于所述相似度，将所述待存储数据存储到对应类型的数据方舱。

6、在一些实施例中，所述基于不同类型的数据方舱所对应的第一特征，以及待存储数据的元数据对应的第二特征，分别计算所述不同类型的数据方舱所对应的第一特征与所述第二特征之间的相似度，包括：

7、分别对所述不同类型的数据方舱所对应的第一特征进行分词，得到所述不同类型的数据方舱所对应的第一分词集合；

8、对所述第二特征进行分词，得到第二分词集合；

9、对所述第一分词集合和所述第二分词集合合并去重，得到第三分词集合；

10、基于所述第三分词集合，确定所述不同类型的数据方舱所对应的第一特征向量和所述元数据对应的第二特征向量；

11、基于所述不同类型的数据方舱所对应的第一特征向量和所述第二特征向量，计算所述相似度。

12、在一些实施例中，所述基于所述第三分词集合，确定所述不同类型的数据方舱所对应的第一特征向量和所述元数据对应的第二特征向量，包括：

13、基于所述第三分词集合中的分词，分别计算所述不同类型的数据方舱所对应的第一分词集合中的分词出现的次数，得到所述不同类型的数据方舱所对应的第一词频集合；

14、基于所述第三分词集合中的分词，计算所述第二分词集合中的分词出现的次数，得到第二词频集合；

15、基于所述不同类型的数据方舱所对应的第一词频集合，分别确定所述不同类型的数据方舱所对应的第一特征向量；

16、基于所述第二词频集合，确定所述第二特征向量。

17、在一些实施例中，所述基于所述不同类型的数据方舱所对应的第一特征向量和所述第二特征向量，计算所述相似度，包括：

18、分别计算所述不同类型的数据方舱所对应的第一特征向量与所述第二特征向量之间的余弦值；

19、基于所述余弦值，得到所述相似度。

20、在一些实施例中，所述基于所述相似度，将所述待存储数据存储到对应类型的数据方舱，包括：

21、基于所述相似度，确定最大相似度；

22、将所述待存储数据存储到所述最大相似度所对应的类型的数据方舱。

23、在一些实施例中，所述应用特征，包括以下至少一项：

24、方舱功能、方舱特点、数据性质、数据来源或应用场景。

25、在一些实施例中，所述第二特征，包括以下至少一项：

26、数据名称、主题分类、摘要、关键词、提供单位、获取方式、更新频率、大小、格式、区域范围或发布时间。

27、本发明还提供一种面向数据方舱的数据存储装置，包括：

28、确定模块，用于基于退化耕地监测治理时空数据方舱的应用特征，确定数据方舱的类型；所述类型包括：移动舱、田间舱和中心舱；

29、计算模块，用于基于不同类型的数据方舱所对应的第一特征，以及待存储数据的元数据对应的第二特征，分别计算所述不同类型的数据方舱所对应的第一特征与所述第二特征之间的相似度；

30、存储模块，用于基于所述相似度，将所述待存储数据存储到对应类型的数据方舱。

31、本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述面向数据方舱的数据存储管理方法。

32、本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述面向数据方舱的数据存储管理方法。

33、本发明还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述面向数据方舱的数据存储管理方法。

34、本发明提供的面向数据方舱的数据存储管理方法、装置及存储介质，根据不同类型的数据方舱的第一特征以及待存储数据的元数据对应的第二特征，计算待存储数据与不同类型数据方舱的之间的相似度，根据相似度大小确定数据的存储方案，实现了根据待存储数据的特点和应用场景对数据进行有效存储，克服了当前数据存储到数据库的主观性问题，有效提高了数据的访问效率。

技术特征：

1.一种面向数据方舱的数据存储管理方法，其特征在于，包括：

2.根据权利要求1所述的面向数据方舱的数据存储管理方法，其特征在于，所述基于不同类型的数据方舱所对应的第一特征，以及待存储数据的元数据对应的第二特征，分别计算所述不同类型的数据方舱所对应的第一特征与所述第二特征之间的相似度，包括：

3.根据权利要求2所述的面向数据方舱的数据存储管理方法，其特征在于，所述基于所述第三分词集合，确定所述不同类型的数据方舱所对应的第一特征向量和所述元数据对应的第二特征向量，包括：

4.根据权利要求2所述的面向数据方舱的数据存储管理方法，其特征在于，所述基于所述不同类型的数据方舱所对应的第一特征向量和所述第二特征向量，计算所述相似度，包括：

5.根据权利要求1所述的面向数据方舱的数据存储管理方法，其特征在于，所述基于所述相似度，将所述待存储数据存储到对应类型的数据方舱，包括：

6.根据权利要求1至5任一项所述的面向数据方舱的数据存储管理方法，其特征在于，所述应用特征，包括以下至少一项：

7.根据权利要求1至5任一项所述的面向数据方舱的数据存储管理方法，其特征在于，所述第二特征，包括以下至少一项：

8.一种面向数据方舱的数据存储管理装置，其特征在于，包括：

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述面向数据方舱的数据存储管理方法。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述面向数据方舱的数据存储管理方法。

技术总结
本发明涉及数据存储管理技术领域，提供一种面向数据方舱的数据存储管理方法、装置及存储介质，该方法包括：基于退化耕地监测治理时空数据方舱的应用特征，确定数据方舱的类型；基于不同类型的数据方舱所对应的第一特征，以及待存储数据的元数据对应的第二特征，分别计算不同类型的数据方舱所对应的第一特征与第二特征之间的相似度；基于相似度，将待存储数据存储到对应类型的数据方舱。本发明提供的面向数据方舱的数据存储管理方法，根据不同类型的数据方舱的第一特征与待存储数据的元数据的第二特征，计算待存储数据与不同类型数据方舱的之间的相似度来确定存储方案，实现根据待存储数据的特点和应用场景进行有效存储，提高了数据的访问效率。

技术研发人员：周艳兵,郜允兵,潘瑜春,刘玉,李晓岚,赵亚楠
受保护的技术使用者：北京市农林科学院信息技术研究中心
技术研发日：
技术公布日：2024/1/15