一种分布式文件系统中的磁盘性能检测方法及装置的制造方法_2

文档序号:9810418阅读:来源:国知局
态的磁盘判断空闲时的D1时延,能够减少检测慢盘时对分布式文件系统的影响。
[0042]基于同一发明构思,本申请实施例中还提供了一种分布式文件系统中的磁盘性能检测装置,由于该装置解决问题的原理与本申请实施例一的一种分布式文件系统中的磁盘性能检测方法相似,因此该装置的实施可以参见方法的实施,重复之处不再赘述。
[0043]实施例二
[0044]图2是根据本申请实施例二的分布式文件系统中的磁盘性能检测装置的结构示意图。
[0045]如图2所示,根据本申请实施例二的分布式文件系统中的磁盘性能检测装置200包括:第一检测模块201,用于检测磁盘的服务时间和输入输出1时延;第一状态确定模块202,用于根据该磁盘的服务时间和输入输出1时延确定第一状态的磁盘,该第一状态的磁盘是服务时间滑动平均值超过第一预设值,且1时延滑动平均值超过第二预设值的磁盘;第二检测模块203,用于检测第一状态的磁盘空闲时的D1时延;慢盘确定模块204,用于在该D1时延超过第三预设值时,确定该磁盘为慢盘。
[0046]在具体实施时,第一状态确定模块可以包括:平均值计算子模块,用于根据该服务时间和1时延,计算该磁盘在预定时长内的服务时间滑动平均值和1时延滑动平均值;比较子模块,用于将该磁盘的服务时间滑动平均值与第一预设值进行比较,并将该磁盘的1时延滑动平均值与第二预设值进行比较;第一状态确定子模块,用于在该磁盘的服务时间滑动平均值大于第一预设值,且1时延滑动平均值大于第二预设值时,确定该磁盘为第一状态的磁盘。
[0047]在具体实施时,第二检测模块可以具体包括:空闲确定子模块,用于确定该磁盘空闲;D1操作子模块,用于对该磁盘执行D1操作;D1时延记录子模块,用于记录该D1操作的时延,作为该第一状态的磁盘空闲时的D1时延。
[0048]在具体实施时,空闲确定子模块可以具体包括:触发单元,用于停止对该磁盘的操作;利用率检测单元,每隔预定时间检测该磁盘的利用率;空闲确定单元,用于在连续两次检测到该磁盘的利用率均小于第四预设值时,确定该磁盘空闲。
[0049]在具体实施时,根据本申请实施例二的分布式文件系统中的磁盘性能检测装置200可以还包括:重构模块,用于根据该磁盘的备份数据重构该慢盘存储的数据;数据写入模块,用于将重构的该数据写入分布式文件系统的其他磁盘。
[0050]在具体实施时,本申请实施例中的分布式文件系统中的磁盘性能检测装置可以位于分布式文件系统的数据服务器或者元数据服务器,也可以独立于数据服务器或者元数据服务器单独存在,或者本申请实施例中的分布式文件系统中的磁盘性能检测装置的各个模块还可以分别位于不同的位置,本申请对此不作限制。
[0051]采用本申请实施例中的分布式文件系统中的磁盘性能检测装置,根据磁盘的服务时间和输入输出时延,确定第一状态的磁盘,并检测第一状态的磁盘空闲时的D1时延;当该D1时延超过第三预设值时,确定该磁盘为慢盘;从而在分布式文件系统中检测出性能不佳的慢盘,从而保证分布式文件系统的1性能。
[0052]采用本申请实施例中的分布式文件系统中的磁盘性能检测装置,先根据磁盘的服务时间和输入输出时延,确定第一状态的磁盘,然后仅对第一状态的磁盘判断空闲时的D1时延,能够减少检测慢盘时对分布式文件系统的影响。
[0053]本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-R0N、光学存储器等)上实施的计算机程序产品的形式。
[0054]本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0055]这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0056]这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0057]尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
[0058]显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
【主权项】
1.一种分布式文件系统中的磁盘性能检测方法,其特征在于,包括: 检测磁盘的服务时间和输入输出1时延; 根据所述磁盘的服务时间和输入输出1时延确定第一状态的磁盘,所述第一状态的磁盘是服务时间滑动平均值超过第一预设值,且1时延滑动平均值超过第二预设值的磁盘;检测第一状态的磁盘空闲时的D1时延; 当所述D1时延超过第三预设值时,确定所述磁盘为慢盘。2.根据权利要求1所述的方法,其特征在于,根据所述磁盘的服务时间和输入输出1时延确定第一状态的磁盘,具体包括: 根据所述服务时间和1时延,计算所述磁盘在预定时长内的服务时间滑动平均值和1时延滑动平均值; 将所述磁盘的服务时间滑动平均值与第一预设值进行比较,并将所述磁盘的1时延滑动平均值与第二预设值进行比较; 当所述磁盘的服务时间滑动平均值大于等于第一预设值,且1时延滑动平均值大于等于第二预设值时,确定所述磁盘为第一状态的磁盘。3.根据权利要求1所述的方法,其特征在于,检测第一状态的磁盘空闲时的D1时延,具体包括: 确定所述磁盘空闲; 对所述磁盘执行D1操作; 记录所述D1操作的时延,作为所述第一状态的磁盘空闲时的D1时延。4.根据权利要求3所述的方法,其特征在于,确定所述磁盘空闲具体包括: 停止对所述磁盘的操作; 每隔预定时间检测所述磁盘的利用率; 当连续预定次数检测到所述磁盘的利用率均小于第四预设值时,确定所述磁盘空闲。5.根据权利要求1所述的方法,其特征在于,在确定所述磁盘为慢盘之后,还包括: 根据所述磁盘的备份数据重构所述慢盘存储的数据; 将重构的所述数据写入分布式文件系统的其他磁盘。6.一种分布式文件系统中的磁盘性能检测装置,其特征在于,包括: 第一检测模块,用于检测磁盘的服务时间和输入输出1时延; 第一状态确定模块,用于根据所述磁盘的服务时间和输入输出1时延确定第一状态的磁盘,所述第一状态的磁盘是服务时间滑动平均值超过第一预设值,且1时延滑动平均值超过第二预设值的磁盘; 第二检测模块,用于检测第一状态的磁盘空闲时的D1时延; 慢盘确定模块,用于在所述D1时延超过第三预设值时,确定所述磁盘为慢盘。7.根据权利要求6所述的装置,其特征在于,第一状态确定模块具体包括: 平均值计算子模块,用于根据所述服务时间和1时延,计算所述磁盘在预定时长内的服务时间滑动平均值和1时延滑动平均值; 比较子模块,用于将所述磁盘的服务时间滑动平均值与第一预设值进行比较,并将所述磁盘的1时延滑动平均值与第二预设值进行比较; 第一状态确定子模块,用于在所述磁盘的服务时间滑动平均值大于等于第一预设值,且1时延滑动平均值大于等于第二预设值时,确定所述磁盘为第一状态的磁盘。8.根据权利要求6所述的装置,其特征在于,第二检测模块具体包括: 空闲确定子模块,用于确定所述磁盘空闲; D1操作子模块,用于对所述磁盘执行D1操作; D1时延记录子模块,用于记录所述D1操作的时延,作为所述第一状态的磁盘空闲时的D1时延。9.根据权利要求8所述的装置,其特征在于,空闲确定子模块具体包括: 触发单元,用于停止对所述磁盘的操作; 利用率检测单元,每隔预定时间检测所述磁盘的利用率; 空闲确定单元,用于在连续预定次数检测到所述磁盘的利用率均小于第四预设值时,确定所述磁盘空闲。10.根据权利要求6所述的装置,其特征在于,还包括: 重构模块,用于根据所述磁盘的备份数据重构所述慢盘存储的数据; 数据写入模块,用于将重构的所述数据写入分布式文件系统的其他磁盘。
【专利摘要】本申请实施例中提供了一种分布式文件系统中的磁盘性能检测方法和装置,该方法包括:检测磁盘的服务时间和输入输出IO时延;根据该磁盘的服务时间和输入输出IO时延确定第一状态的磁盘,该第一状态的磁盘是服务时间滑动平均值超过第一预设值,且IO时延滑动平均值超过第二预设值的磁盘;检测第一状态的磁盘空闲时的DIO时延;当该DIO时延超过第三预设值时,确定该磁盘为慢盘。采用本申请中的方案,能够在分布式文件系统中检测出性能不佳的慢盘,从而保证分布式文件系统的IO性能。
【IPC分类】G06F11/30
【公开号】CN105573888
【申请号】CN201510929472
【发明人】杨鹏, 康撼宇, 姜国梁, 季旻, 郭照斌
【申请人】曙光信息产业股份有限公司
【公开日】2016年5月11日
【申请日】2015年12月14日
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1