一种数据中心的传输优化系统及运行方法与流程

文档序号:36200906发布日期:2023-11-30 03:05阅读:43来源:国知局
一种数据中心的传输优化系统及运行方法与流程

本申请涉及数据中心,具体为一种数据中心的传输优化系统及运行方法。


背景技术:

1、数据中心是一种集中存储、管理和处理大量数据的设施,通常由大型服务器、网络设备、存储设备以及其他设备组成,用于提供各种计算、存储和网络服务。

2、在数据中心的运行过程中,往往需要处理大量数据,而数据传输就是其中一个关键环节,数据中心的运行涉及到多个设备和系统之间的数据传输,如果传输过程效率低下或存在延迟,会导致数据处理和存储出现延迟,影响整个数据中心的工作效率和响应速度,在一些对响应时间要求较高的场景中,例如实时采集和监控任务、实时媒体流处理、实时数据分析等,这些任务对响应时间的要求比较高,需要数据中心具备快速的数据传输、高效的数据处理和实时响应能力,而在目前的数据中心运行环境中,由于现场环境复杂,设备数量较多,会出现大量异常事件导致数据传输出现响应不及时、传输中断等问题,例如网络故障、服务器故障、存储故障、电力故障、外力影响等,这些异常情况的出现会导致数据中心的传输出现异常,影响整个系统的正常运行。

3、公开号为cn111917648b的中国发明专利公开了一种数据中心里分布式机器学习数据重排的传输优化方法,该专利在其技术方案中,通过将每一轮的全局数据重排分配后需要发送的数据包的数量降低,并且有效地减小传输所有需要的样本所消耗的总网络数,并结合数据中心中训练样本数据分散地存储在各机器上的特点,把发送任务分散在各台机器上,从而增强了发送数据的总带宽,进而能够减少全局数据重排所需要的网络传输时间。

4、但是上述专利的技术方案在实施过程中,由于数据中心与采集端之间为直接连接,所有采集到的数据都会直接发送至服务器,虽然经过多重优化后会降低采集数据的数据量,但是当采集数据足够多时,还是会导致服务器压力过大,甚至会导致服务器宕机。

5、所以有必要提供一种数据中心的传输优化系统及运行方法来解决上述问题。

6、需要说明的是,本背景技术部分中公开的以上信息仅用于理解本申请构思的背景技术,并且因此,它可以包含不构成现有技术的信息。


技术实现思路

1、基于现有技术中存在的上述问题,本申请所要解决的问题是:提供一种数据中心的传输优化系统及运行方法,达到提高数据中心的数据传输速度的效果。

2、本申请解决其技术问题所采用的技术方案是:一种数据中心的传输优化系统的运行方法,该方法包括:

3、服务器接收来自采集终端所采集的第一数据集以及在一个采集周期内生成的第一传输信号,所述第一数据集的长度与采集周期相对应;

4、对第一数据集进行增维处理,生成具有额外维度的第二数据集;

5、建立传输优化模型,并将第二数据集作为传输优化模型的输入,进行模型分析;

6、根据传输优化模型的输出结果,对数据中心的数据传输进行优化,并生成建议休眠时间段,根据所述建议休眠时间段调整采集周期;

7、其中,所述采集周期与采集终端的采集状态相关,所述采集状态分为采集终端的采集进行状态、休眠状态,以及存在于两种状态之间的缓冲状态,所述采集周期是指采集终端从采集进行状态开始的时间节点,到休眠状态开始的时间节点之间的时间段。

8、在本发明的技术方案实施时,通过在采集过程中生成第一传输信号,并定义采集终端的采集周期,使服务器始终根据第一传输信号来确定接收行为,在采集周期调整合理的情况下,服务器不会在一段时间内接收大量数据,进而导致压力过大,并且还能够根据服务器的运行状态调整采集周期,使服务器处于合适的运行状态下。

9、进一步的,所述第一传输信号的格式为数字信号,所述第一数据集中的数据为模拟信号。

10、进一步的,所述第一传输信号为服务器的接收启动信号。

11、进一步的,所述建议休眠时间段的运行策略与休眠时间段的运行策略一致。进一步的,对所述第一数据集进行增维处理进一步包括:

12、对第一数据集中的采集数据进行识别和分类,并按照分类结果进行整理,形成汇聚数据集;

13、对汇聚数据集中的元素进行特征提取,并将提取出的特征按照汇聚数据集中的位置进行排序;

14、对提取出的特征进行特征组合,生成新的特征集,并将新的特征集嵌入汇聚数据集中;

15、对增维操作后的汇聚数据集进行一致性验证,保证汇聚数据集在增维过程中的完整性。

16、进一步的,所述对汇聚数据集中的元素进行特征提取采用无监督学习方法。

17、进一步的,所述对增维操作后的汇聚数据集进行一致性验证采用哈希验证的方法。

18、一种数据中心的传输优化系统,包括:

19、接收模块,用于服务器接收来自采集终端所采集的第一数据集以及在一个采集周期内生成的第一传输信号,所述第一数据集的长度与采集周期相对应;

20、增维处理模块,用于对第一数据集进行增维处理,生成具有额外维度的第二数据集;

21、模型建立模块,用于建立传输优化模型,并将第二数据集作为传输优化模型的输入,进行模型分析;

22、传输优化模块,用于根据传输优化模型的输出结果,对数据中心的数据传输进行优化,并生成建议休眠时间段,根据建议休眠时间段调整采集周期。

23、进一步的,所述增维处理模块进一步包括:

24、识别分类模块,用于对第一数据集中的采集数据进行识别和分类,并按照分类结果进行整理,形成汇聚数据集;

25、特征提取模块,用于对汇聚数据集中的元素进行特征提取,并将提取出的特征按照汇聚数据集中的位置进行排序;

26、特征组合模块,用于对提取出的特征进行特征组合,生成新的特征集,并将新的特征集嵌入汇聚数据集中;

27、验证模块,用于对增维操作后的汇聚数据集进行一致性验证,保证汇聚数据集在增维过程中的完整性。

28、本申请的有益效果是:本申请提供的一种数据中心的传输优化系统及运行方法,通过在采集过程中生成第一传输信号,并定义采集终端的采集周期,使服务器始终根据第一传输信号来确定接收行为,在采集周期调整合理的情况下,服务器不会在一段时间内接收大量数据,进而导致压力过大,并且还能够根据服务器的运行状态调整采集周期,使服务器处于合适的运行状态下,并且在后续的模型分析中,根据模型分析结果生成建议休眠时间段,该建议休眠时间段是根据服务器的运行压力自动获得,并且通过调控休眠时间段即可对采集周期的大小进行调整,进而对采集周期内的平均数据量进行调整,使服务器处于良好的运行状态下。

29、除了上面所描述的目的、特征和优点之外,本申请还有其它的目的、特征和优点。下面将参照图,对本申请作进一步详细的说明。



技术特征:

1.一种数据中心的传输优化系统的运行方法,其特征在于:该方法包括:

2.根据权利要求1所述的一种数据中心的传输优化系统的运行方法,其特征在于:所述第一传输信号的格式为数字信号,所述第一数据集中的数据为模拟信号。

3.根据权利要求1所述的一种数据中心的传输优化系统的运行方法,其特征在于:所述第一传输信号为服务器的接收启动信号。

4.根据权利要求1所述的一种数据中心的传输优化系统的运行方法,其特征在于:所述建议休眠时间段的运行策略与休眠时间段的运行策略一致。

5.根据权利要求1所述的一种数据中心的传输优化系统的运行方法,其特征在于:对所述第一数据集进行增维处理进一步包括:

6.根据权利要求5所述的一种数据中心的传输优化系统的运行方法,其特征在于:所述对汇聚数据集中的元素进行特征提取采用无监督学习方法。

7.根据权利要求5所述的一种数据中心的传输优化系统的运行方法,其特征在于:所述对增维操作后的汇聚数据集进行一致性验证采用哈希验证的方法。

8.一种数据中心的传输优化系统,其特征在于:包括:

9.根据权利要求8所述的一种数据中心的传输优化系统,其特征在于:所述增维处理模块进一步包括:

10.根据权利要求8所述的一种数据中心的传输优化系统,其特征在于:用于实施如权利要求1至7任一项所述的一种数据中心的传输优化系统的运行方法。


技术总结
本申请公开了一种数据中心的传输优化系统及运行方法,属于数据中心技术领域,包括:服务器接收来自采集终端所采集的第一数据集以及在一个采集周期内生成的第一传输信号,对第一数据集进行增维处理,生成具有额外维度的第二数据集;建立传输优化模型,并将第二数据集作为输入进行模型分析;根据传输优化模型的输出结果,对数据中心的数据传输进行优化,在本技术方案实施时,在采集过程中生成第一传输信号,并定义采集终端的采集周期,使服务器根据第一传输信号来确定接收行为,在采集周期调整合理的情况下,服务器不会在一段时间内接收大量数据,进而导致压力过大,并且还能根据服务器的运行状态手动调整采集周期,使服务器处于合适的运行状态。

技术研发人员:宣浩,陶剑钊
受保护的技术使用者:中邮通建设咨询有限公司
技术研发日:
技术公布日:2024/1/16
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1