一种网络数据传输存储方法及系统与流程

文档序号:36006081发布日期:2023-11-16 21:25阅读:来源:国知局

技术特征:

1.一种网络数据传输存储方法,其特征在于,所述方法包括以下步骤:

2.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,在通信网络系统中至少包括控制服务器、多个存储服务器节点;将第n个存储服务器节点称为第n节点,第n+1个存储服务器节点称为第n+1节点,依次类推;n=1…max;n为节点序号;其中,在n为偶数时的第n个存储服务器节点中所有存储磁盘中的数据为空。

3.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,存储服务器节点为用于存储大数据的物理服务器,每个存储服务器节点包括多个存储磁盘,所述存储磁盘包括第一存储磁盘、第二存储磁盘、第三存储磁盘;其中,第二存储磁盘为空的备用磁盘;第一存储磁盘、第三存储磁盘是用于大数据存储的磁盘。

4.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,控制服务器中包括有数据索引文件,所述数据索引文件包括有所有的存储服务器节点的运行时间、控制服务器开始运行时间、所有的存储服务器节点中第一次磁盘阵列置乱操作运行时间、控制服务器第一次进行节点数据置乱操作时间、所有存储服务器节点初始的编号id、所有存储服务器节点当前的编号id、所有存储服务器节点中磁盘阵列置乱操作次数。

5.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,节点数据置乱时间周期的计算方法为:将各个存储服务器节点中最近一次写入数据或读取数据的所有时间长度构成一个序列作为写入序列wrlist1;依次分别计算wrlist1中所有时间长度两两之间的差值,以各个非零差值构成序列wrlist2,将节点数据置乱时间周期设置为wrlist2中所有差值的平均值。

6.根据权利要求5所述的一种网络数据传输存储方法,其特征在于,将节点数据置乱时间周期的计算方法替换为:

7.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,在s200中,节点数据置乱操作的方法为:

8.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,当发生数据存取请求时,读取存储服务器节点的数据索引文件,并根据存储服务器节点当前的编号id定位到实际数据存储的存储服务器节点,并且磁盘阵列置乱操作次数定位到真实的数据存储磁盘编号id,进行磁盘读取。

9.根据权利要求1所述的一种网络数据传输存储方法,其特征在于,物理删除是指将数据的索引区和数据区的数据一起删除,不可恢复。

10.一种网络数据传输存储系统,其特征在于,所述一种网络数据传输存储系统包括:处理器、存储器及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现权利要求1-9中的任一项所述的一种网络数据传输存储方法中的步骤。


技术总结
本发明属于网络数据传输存储技术领域,提供了一种网络数据传输存储方法及系统,在所有的存储服务器节点中每间隔一个节点数据置乱时间周期进行一次磁盘阵列置乱操作;控制服务器每间隔一个节点数据置乱时间周期进行一次节点数据置乱操作;通过动态的调整节点数据置乱时间周期从而既使得非法入侵访问者无法根据爬虫脚本程序爬取网络在存储服务器数,使得减小数据的被恢复后爬取的可能性;同时也保证了较合适的负载均衡、减少磁盘高频读写产生的损耗和使网络时延变大、避免网络拥塞。

技术研发人员:张哲,殷亮
受保护的技术使用者:深圳市连用科技有限公司
技术研发日:
技术公布日:2024/1/16
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1