日志保留时长的计算方法及装置与流程

文档序号:23186892发布日期:2020-12-04 14:15阅读:294来源:国知局
日志保留时长的计算方法及装置与流程

本发明涉及计算机技术领域,具体涉及一种日志保留时长的计算方法及装置。



背景技术:

日志是日志源(例如网络设备、系统及服务程序等)在运行时产生的名为log的事件记录,是日志源运行时产生的数据的集合,每一行日志都记载着日期、时间、使用者及动作等相关操作的描述信息。日志记录了日志源的生命周期,通过查阅与分析日志,可以获知日志源在某个时刻所处的状态。用户可以通过日志来检查错误发生的原因,或者寻找受到攻击时攻击者留下的痕迹。

日志存储是根据日志源发送的日志临时分配相应的磁盘存储空间,从而达到将日志存储到磁盘的目的。目前,日志的保留时长是一项靠经验做的工作,设置日志保留时长是根据磁盘空间大小或者根据业务要求而定。日志保留时长设置较短则浪费存储资源,日志保留时长设置较长且日志的记录量突增,容易产生磁盘告警。



技术实现要素:

针对现有技术中的问题,本发明提供一种日志保留时长的计算方法及装置,能够能保证日志的记录量突增时不会造成磁盘告警,又能合理利用存储资源。

为解决上述技术问题,本发明提供以下技术方案:

第一方面,本发明提供一种日志保留时长的计算方法,包括:

获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

进一步的,在所述确定预设的最短保留时长和参考保留时长中较大值为日志保留时长之后,还包括:

在存储磁盘上按照所述日志保留时长来存储日志。

进一步的,在所述确定预设的最短保留时长和参考保留时长中较大值为日志保留时长之后,还包括:

根据所述日志保留时长确定日志的清理周期;

按照所述日志的清理周期清理存储磁盘上存储的日志。

其中,所述根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值,包括:

采用平均速度法、最近速度法、最远速度法、最近加速度法和平均加速度法中至少一种方法,并根据所述记录周期和s个所述日志增量数据计算至少一个日志增速参考值。

其中,所述确定预设的最短保留时长和所述参考保留时长中较大值为日志保留时长,包括:

确定所述最短保留时长和至少一个日志的参考保留时长中最大值为日志保留时长。

其中,所述日志的告警比值为5%或10%。

第二方面,本发明提供一种日志保留时长的计算装置,包括:

获取单元,用于获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

增速单元,用于根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

计算单元,用于基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

比较单元,用于确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

进一步的,还包括:

存储单元,用于在存储磁盘上按照所述日志保留时长来存储日志。

进一步的,还包括:

处理单元,用于根据所述日志保留时长确定日志的清理周期;

清理单元,用于按照所述日志的清理周期清理存储磁盘上存储的日志。

其中,所述增速单元包括:

增速子单元,用于采用平均速度法、最近速度法、最远速度法、最近加速度法和平均加速度法中至少一种方法,并根据所述记录周期和s个所述日志增量数据计算至少一个日志增速参考值。

其中,所述比较单元包括:

比较子单元,用于确定所述最短保留时长和至少一个日志的参考保留时长中最大值为日志保留时长。

第三方面,本发明提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现所述的日志保留时长的计算方法的步骤。

第四方面,本发明提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现所述的日志保留时长的计算方法的步骤。

由上述技术方案可知,本发明提供一种日志保留时长的计算方法及装置,通过获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;确定预设的最短保留时长和参考保留时长中较大值为日志保留时长,能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明实施例中的日志保留时长的计算方法的第一流程示意图。

图2为本发明实施例中的日志保留时长的计算方法的第二流程示意图。

图3为本发明实施例中的日志保留时长的计算方法的第三流程示意图。

图4为本发明实施例中的日志保留时长的计算装置的结构示意图。

图5为本发明实施例中的电子设备的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

本发明提供一种日志保留时长的计算方法的实施例,参见图1,所述日志保留时长的计算方法具体包含有如下内容:

s101:获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

s102:根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

可以理解的是,日志的记录周期是统计日志增量大小的相隔时间跨度单位,通常一个统计周期为一天。

在具体实施时,采用平均速度法、最近速度法、最远速度法、最近加速度法和平均加速度法中至少一种方法,并根据所述记录周期和s个所述日志增量数据计算至少一个日志增速参考值,具体如下:

平均速度法:

其中,s为日志的记录周期,s为记录周期数量,l1为s个记录周期中第1个记录周期各自对应的日志增量数据,ls为s个记录周期中第s个记录周期各自对应的日志增量数据,v为日志增速参考值。

最近速度法:

其中,v为日志增速参考值,ls为s个记录周期中第s个记录周期各自对应的日志增量数据,s为日志的记录周期。

最远速度法:

其中,v为日志增速参考值,l1为s个记录周期中第1个记录周期各自对应的日志增量数据,s为日志的记录周期。

最近加速度法:

v=vs+vs-vs-1;

其中,v为日志增速参考值,vs为s个记录周期中第s个记录周期的增速,为第s个记录周期的日志增量数据与第s个记录周期的比值,vs-1为s个记录周期中第s-1个记录周期的增速,为第s-1个记录周期的日志增量数据与第s-1个记录周期的比值。

平均加速度法:

其中,v为日志增速参考值,vs为s个记录周期中第s个记录周期的增速,为第s个记录周期的日志增量数据与第s个记录周期的比值,vs-1为s个记录周期中第s-1个记录周期的增速,为第s-1个记录周期的日志增量数据与第s-1个记录周期的比值。

s103:基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

在本步骤中,根据步骤s102中日志增速参考值计算参考保留时长,具体包括:

其中,w为存储磁盘的存储空间数据,w为日志的告警比值,该告警比值根据用户需求进行自适应设置,在本实施例中日志的告警比值为5%或10%。

s104:确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

需要说明的是,若步骤s103中具有多种方式计算日志的参考保留时长,则本步骤中根据最短保留时长和至少一个日志的参考保留时长中最大值为日志保留时长,具体如下:

步骤s102中采用一种方式计算日志增速参考值,则根据公式能够得到一个参考保留时长,确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

步骤s102采用k种方式计算日志增速参考值,则根据公式能够得到k个参考保留时长(t1至tk),取k个参考保留时长中最小值与预设的最短保留时长t比较,取二者较大值为保留时长。

从上述描述可知,本实施例提供的日志保留时长的计算方法,通过获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;确定预设的最短保留时长和参考保留时长中较大值为日志保留时长,能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

在本发明的一实施例中,参见图2,所述日志保留时长的计算方法的步骤s104之后,具体包含有如下内容:

s105:在存储磁盘上按照所述日志保留时长来存储日志。

在本实施例中,在记录日志过程中,日志保留时长记录增量日志大小。实现日志增长过快时,将保留时长调短;日志增长过慢,则将保留时长调长。

在本发明的一实施例中,参见图3,所述日志保留时长的计算方法的步骤s105之后,具体包含有如下内容:

s106:根据所述日志保留时长确定日志的清理周期;

需要说明的是,日志的清理周期是清理日志的相隔时间跨度单位。在本实施例中,日志保留时长与日志的清理周期相同。

s107:按照所述日志的清理周期清理存储磁盘上存储的日志。

在本实施例中,交易系统在记录日志过程中,按统计周期记录增量日志大小。清理日志时,计算日志增长速度,根据增速计算日志保留时长,如果日志增长过快时,将保留时长调短;如果日志增长过慢,则将保留时长调长。

从上述描述可知,本发明实施例能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

本发明实施例提供一种能够实现所述日志保留时长的计算方法中全部内容的日志保留时长的计算装置的具体实施方式,参见图4,所述日志保留时长的计算装置具体包括如下内容:

获取单元10,用于获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

增速单元20,用于根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

计算单元30,用于基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

比较单元40,用于确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

进一步的,还包括:

存储单元,用于在存储磁盘上按照所述日志保留时长来存储日志。

进一步的,还包括:

处理单元,用于根据所述日志保留时长确定日志的清理周期;

清理单元,用于按照所述日志的清理周期清理存储磁盘上存储的日志。

其中,所述增速单元20包括:

增速子单元,用于采用平均速度法、最近速度法、最远速度法、最近加速度法和平均加速度法中至少一种方法,并根据所述记录周期和s个所述日志增量数据计算至少一个日志增速参考值。

其中,所述比较单元40包括:

比较子单元,用于确定所述最短保留时长和至少一个日志的参考保留时长中最大值为日志保留时长。

本发明提供的日志保留时长的计算装置的实施例具体可以用于执行上述实施例中的日志保留时长的计算方法的实施例的处理流程,其功能在此不再赘述,可以参照上述方法实施例的详细描述。

从上述描述可知,本发明实施例提供的日志保留时长的计算装置,通过获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;确定预设的最短保留时长和参考保留时长中较大值为日志保留时长,能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

本申请提供一种用于实现所述日志保留时长方法中的全部或部分内容的电子设备的实施例所述电子设备具体包含有如下内容:

处理器(processor)、存储器(memory)、通信接口(communicationsinterface)和总线;其中,所述处理器、存储器、通信接口通过所述总线完成相互间的通信;所述通信接口用于实现相关设备之间的信息传输;该电子设备可以是台式计算机、平板电脑及移动终端等,本实施例不限于此。在本实施例中,该电子设备可以参照实施例用于实现所述日志保留时长方法的实施例及用于实现所述日志保留时长装置的实施例进行实施,其内容被合并于此,重复之处不再赘述。

图5为本申请实施例的电子设备9600的系统构成的示意框图。如图5所示,该电子设备9600可以包括中央处理器9100和存储器9140;存储器9140耦合到中央处理器9100。值得注意的是,该图5是示例性的;还可以使用其他类型的结构,来补充或代替该结构,以实现电信功能或其他功能。

一实施例中,日志保留时长功能可以被集成到中央处理器9100中。其中,中央处理器9100可以被配置为进行如下控制:

获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

从上述描述可知,本申请的实施例提供的电子设备,通过获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;确定预设的最短保留时长和参考保留时长中较大值为日志保留时长,能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

在另一个实施方式中,日志保留时长装置可以与中央处理器9100分开配置,例如可以将日志保留时长配置为与中央处理器9100连接的芯片,通过中央处理器的控制来实现日志保留时长功能。

如图5所示,该电子设备9600还可以包括:通信模块9110、输入单元9120、音频处理器9130、显示器9160、电源9170。值得注意的是,电子设备9600也并不是必须要包括图5中所示的所有部件;此外,电子设备9600还可以包括图5中没有示出的部件,可以参考现有技术。

如图5所示,中央处理器9100有时也称为控制器或操作控件,可以包括微处理器或其他处理器装置和/或逻辑装置,该中央处理器9100接收输入并控制电子设备9600的各个部件的操作。

其中,存储器9140,例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息,此外还可存储执行有关信息的程序。并且中央处理器9100可执行该存储器9140存储的该程序,以实现信息存储或处理等。

输入单元9120向中央处理器9100提供输入。该输入单元9120例如为按键或触摸输入装置。电源9170用于向电子设备9600提供电力。显示器9160用于进行图像和文字等显示对象的显示。该显示器例如可为lcd显示器,但并不限于此。

该存储器9140可以是固态存储器,例如,只读存储器(rom)、随机存取存储器(ram)、sim卡等。还可以是这样的存储器,其即使在断电时也保存信息,可被选择性地擦除且设有更多数据,该存储器的示例有时被称为eprom等。存储器9140还可以是某种其它类型的装置。存储器9140包括缓冲存储器9141(有时被称为缓冲器)。存储器9140可以包括应用/功能存储部9142,该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央处理器9100执行电子设备9600的操作的流程。

存储器9140还可以包括数据存储部9143,该数据存储部9143用于存储数据,例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器9140的驱动程序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。

通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模块(发送机/接收机)9110耦合到中央处理器9100,以提供输入信号和接收输出信号,这可以和常规移动通信终端的情况相同。

基于不同的通信技术,在同一电子设备中,可以设置有多个通信模块9110,如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)9110还经由音频处理器9130耦合到扬声器9131和麦克风9132,以经由扬声器9131提供音频输出,并接收来自麦克风9132的音频输入,从而实现通常的电信功能。音频处理器9130可以包括任何合适的缓冲器、解码器、放大器等。另外,音频处理器9130还耦合到中央处理器9100,从而使得可以通过麦克风9132能够在本机上录音,且使得可以通过扬声器9131来播放本机上存储的声音。

本发明的实施例还提供能够实现上述实施例中的日志保留时长的计算方法中全部步骤的一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例中的日志保留时长的计算方法的全部步骤,例如,所述处理器执行所述计算机程序时实现下述步骤:

获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;

根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;

基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;

确定预设的最短保留时长和参考保留时长中较大值为日志保留时长。

从上述描述可知,本发明实施例提供的计算机可读存储介质,通过获取存储磁盘的存储空间数据、日志的记录周期、日志的告警比值和s个记录周期各自对应的日志增量数据;根据日志的记录周期和s个记录周期各自对应的日志增量数据计算日志增速参考值;基于存储磁盘的存储空间数据、日志的告警比值和日志增速参考值确定日志的参考保留时长;确定预设的最短保留时长和参考保留时长中较大值为日志保留时长,能够根据日志保留时长进行日志保存或清理,进而可以调整存储或清理日志的策略,保证日志增长过快时不会造成磁盘告警,日志增长过慢时又能合理利用磁盘的存储资源,提供更好的用户体验。

虽然本发明提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的装置或客户端产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。

本领域技术人员应明白,本说明书的实施例可提供为方法、装置(系统)或计算机程序产品。因此,本说明书实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。本发明并不局限于任何单一的方面,也不局限于任何单一的实施例,也不局限于这些方面和/或实施例的任意组合和/或置换。而且,可以单独使用本发明的每个方面和/或实施例或者与一个或更多其他方面和/或其实施例结合使用。

最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1