可实现快速转储的声纳数据记录设备数据存储策略的方法与流程

：本发明属于数据记录，具体涉及一种可实现快速转储的声纳数据记录设备数据存储策略的方法。

背景技术

0、
背景技术：

1、声纳设备研制初期，受制于存储、网络及接口技术发展限制，存储带宽及存储设备容量有限，现存声纳设备记录仪大多仅针对一类或某几类特定类型数据进行记录，数据体量小，通过网口或移动存储介质的转储手段即可满足数据转储需求。且前期对数据分析工作重要性认识不足，数据中心建设尚不完善，尚未形成完整的数据应用体系。数据记录设备主要担负平台声纳设备记录与回放需求，数据转储任务频次低。

2、当前存储设备主要采用如下两种存储和转储机制：方式一，固定存储容量的记录设备和配备专用接口的数据转储设备，该方法数据存储区可通过raid技术一定程度防止数据丢失；方式二，配备可插拔存储模块的记录设备和可插入存储模块的数据转储设备，该方法存储的数据无备份，可插拔存储策略的记录设备一旦拔出存储模块设备无法执行记录和回放任务，且存储模块故障时有数据丢失风险。

3、随着数据工程建设不断推进，数据重要性认识不断加深，数据存储、网络及接口技术飞速发展，数据带宽倍数提升的同时数据记录类型倍增。随着装备与装备间、装备与数据中心间的数据交互需求日益频繁，数据转储需求频次不断增长，现有数据记录/转储设备存在的转储效率低问题日渐突出。针对快速增长的数据记录存储需求新研装备主要采取如下两种改进方式，一是存储容量大幅提升，同时考虑到数据转储需求，采用多通道通用万兆口或专用转储接口进行数据转储；二是针对原有装备存储介质升级，但转储接口未进行升级改造。

4、上述改造升级一定程度上提升存储容量且转储速录有所提升但仍存在以下问题：首先记录设备受物理空间和接口限制，容量拓展有上限，不能满足长时间连续作战时容量无限拓展需求。其次，数据转储设备需配备专用转储接口及线缆，转储接口的速率是转储速率的瓶颈，转储设备存在转储速率低、体积大、携带不便和可靠性低等问题。最后，受限于计算及带宽资源，数据转储和记录、回放不能同步进行。因此寻求一种具备高效的转储能力，能够满足存储容量无限拓展需求，提高便携性的同时不占用端口和带宽资源的存储策略成为声纳数据记录设备升级和设计时面临的挑战。

技术实现思路

0、
技术实现要素：

1、本发明所要解决的技术问题是，提供一种可实现快速转储的声纳数据记录设备数据存储策略的方法，该方法可实现具备高效的转储能力，数据安全等级高，能够满足设备不间断工作且存储容量无限拓展需求，提高便携性的同时不占用端口和带宽资源，转储时不影响设备执行记录和回放任务的高可靠性存储策略。

2、本发明的技术解决方案是，提供一种可实现快速转储的声纳数据记录设备数据存储策略的方法,包括以下步骤，

3、s1，需求设计，该步骤包括，

4、s100,根据用户工作剖面需求评估存储容量需求，确定存储容量取值范围；

5、s101,根据用户工作场景及转储频率，考虑固定存储区和可插拔存储区容量配比；

6、s102,基于存储容量需求和容量配比选取合适存储容量的存储盘，完成固定存储区和可插拔存储区存储容量设计；

7、s103,根据数据安全性要求针对固定存储区和可插拔存储区分别选取合适的raid策略；

8、s104,根据数据安全性要求针对固定存储区是否需要配备热备盘；

9、s105,根据数据数据记录连续性要求针对可插拔存储区决定是否需要具备热插拔功能；

10、s106,根据设备寿命、系统数据率折算出插拔次数并考虑1.5-2倍冗余后选取可插拔区存储模块接插件型号；

11、s107,固定存储区和可插拔存储区硬件设计可按项目需求采用通用性设计，模块可通用；

12、s108,根据选用的存储模块接插件和硬盘型号设计合适的转储盒子，用于可插拔模块数据导出；

13、s2，综合需求设计步骤完成数据存储区硬件设计；

14、s3，数据存储策略软件设计，数据存储区划分成固定存储区和可插拔存储区，其中，

15、固定存储区用于执行常态化数据存储数据任务，固定存储区仅具备常态化记录一种工作模式；

16、可插拔存储区数据采用循环覆盖式记录，保证其内存储最新数据，可插拔存储区具备以下三种工作模式：常备存储模式，固定存储区正常运行且存储容量充足状态下，可插拔存储区作为固定存储区的备份，与固定存储区同步记录数据，任务执行结束后可通过更换可插拔存储模块方式实现即时转储数据能力；拓展存储模式，固定存储区正常运行时且存储容量不足状态下，可插拔存储区接替固定存储区执行常态化数据记录任务，当可插拔模块容量也不足时可通过更换可插拔存储模块方式实现存储容量无限拓展，事后在固定存储区容量充足的情况下可将存储在可插拔存储区的数据转存至固定存储区，实现数据长期存储；转储模式，当数据采集与管理设备不执行记录与回放任务时，可插拔存储区作为固定存储区转储介质，通过设备内部转存方式将固定存储区记录的数据快速转出。

17、本发明将数据数据记录设备的数据存储区划分成固定存储区和可插拔存储区，其中固定存储区用于执行常态化数据存储数据任务，仅具备常态化存储一种工作模式，该存储区数据可通过转储设备转储、网络拷贝、usb口拷贝三种方式进行数据转储；可插拔存储区数据采用循环覆盖式记录，保证其内存储最新数据，可插拔存储区具备三种工作模式：常备存储模式，固定存储区正常运行且存储容量充足状态下，可插拔存储区作为固定存储区的备份，与固定存储区同步记录数据，任务执行结束后可通过更换可插拔存储模块方式实现即时转储数据能力；拓展存储模式，固定存储区正常运行时且存储容量不足状态下，可插拔存储区接替固定存储区执行常态化数据记录任务，当可插拔模块容量也不足时可通过更换可插拔存储模块方式实现存储容量无限拓展，事后在固定存储区容量充足的情况下可将存储在可插拔存储区的数据转存至固定存储区，实现数据长期存储；和转储模式，当数据采集与管理设备不执行记录与回放任务时，可插拔存储区作为固定存储区转储介质，通过设备内部转存方式将固定存储区记录的数据快速转出。可插拔存储区具备模块直接转储、转储设备转储、网络拷贝、usb口拷贝等四种数据转储方式。

18、作为优选，s1的需求设计的步骤中，还包括如下步骤，据转储速率要求或兼容已有转储设备设计专用转储接口，当通用万兆/千兆网络接口可满足转储需求时可不另行设计。

19、作为优选，s1的需求设计的步骤中，还包括如下步骤，根据转储需求设计万兆/千兆网络接口及usb接口。

20、作为优选，固定存储区和可插拔存储区的存储模块采用通用模块化设计，固定式存储模块和可插拔存储模块采用相同模块组成，提高通用性。

21、作为优选，固定存储区和可插拔存储区存储容量配比可根据任务场景需求进行配置，保障数据存储和转储需求。

22、作为优选，固定存储区可采用raid技术提高数据安全性，同时配备热备模块进一步提升数据安全性及设备可靠性。

23、作为优选，设备执行数据记录任务期间，固定存储区和可插拔存储区同时响应记录指令，共同执行数据记录任务。可插拔存储模块采用循环覆盖式记录策略，保证其内存储最新的数据，一方面可插拔存储模块存储的数据可作为固定式存储模块记录数据备份，当固定式存储模块发生故障或其主控模块发生故障时保证数据安全性；另一方面，当固定式存储模块无可用存储空间时，用户可通过替换空白可插拔存储模块，执行后续数据记录任务。当任务执行完毕，用户有最新任务数据转储需求时，将可插拔存储模块拔出即可，同时不影响设备后续执行回放任务。此外，当用户具有历史数据转储需求时，可插拔存储模块可充当转储模块，用户可通过内部接口和协议完成数据从固定存储区至可插拔存储区，转储完毕时用户将可插拔存储模块拔出即可。

24、作为优选，可插拔存储模块采用循环覆盖式记录策略。

25、与现有技术相比，本发明具有以下优点：

26、1、可不依赖于转储设备实现数据的0耗时转储，且具备利用可插拔存储区模块直接转储、利用转储设备转储、网络拷贝、usb口拷贝等多样化转储方式，其中利用转储设备转储方式可充分利用已有的转储设备资源；

27、2、固定式存储区通过raid技术叠加热备盘技术，可插拔存储区形成最新数据冗余备份，提高设备可靠性同时防止数据丢失；

28、3、可插拔存储区存储模块体积小，轻便；

29、4、通过可插拔转储区实现数据快速转储，不占用端口和带宽资源，不影响数据记录设备执行记录、回放等其他任务。

30、5、设备容量可无限拓展，同时可插拔区域模块具备热插拔能力，可使设备不受限于固定存储容量，满足设备连续不间断长期使用需求。

31、6、可插拔存储区的存储模块可兼顾多项功能，功能一：可插拔存储模块存储的数据可作为固定式存储模块记录数据备份，当固定式存储模块发生故障或其主控模块发生故障时保证数据安全性；功能二：当固定式存储模块无可用存储空间时，用户可通过替换空白可插拔存储模块，执行后续数据记录任务。当任务执行完毕，用户有最新任务数据转储需求时，将可插拔存储模块拔出即可，同时不影响设备后续执行回放任务；功能三：当用户具有历史数据转储需求时，可插拔存储模块可充当转储模块，用户可通过内部接口和协议完成数据从固定式存储部分至可插拔存储部分，转储完毕时用户将可插拔存储模块拔出即可。