一种采集数据审核的方法和装置与流程

文档序号:15929881发布日期:2018-11-14 01:30阅读:541来源:国知局

本发明涉及云计算技术,尤指一种采集数据审核的方法和装置。

背景技术

在云计算时代,大量的异构资源通过监控管理平台统一管理,监控管理平台通过主动采集、被动接收等方式进行硬件资源的数据采集,由于设备众多,因此数据的审核是一个需要面临的问题。

现有技术方案在数据采集过程中,数据直接进入存储装置,容易出现数据采集错误的问题,由于不能有效地对数据的正确性进行审核,数据的正确性差,不能保证硬件资源采集数据的准确性,无效的数据带来的工作量大,工作效率低。



技术实现要素:

为了解决上述技术问题,本发明实施例提供了一种采集数据审核的方法和装置,可以通过预审核机制减少需要审核装置的数据量,通过审核机制保证数据的准确性,从而保证数据中心的性能、告警等指标数据的准确性。

为了达到本发明目的,一方面,本发明实施例提供了一种采集数据审核的方法,包括:

数据中心监控管理平台采集的数据进入预审核装置;

所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;

根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。

进一步地,所述方法还包括:所述预审核装置将判断结果为正确的数据放入存储装置。

进一步地,所述方法还包括:

审核装置根据预先设置的审核策略,对所述待审核池中的数据进行再次审核,确定有问题的数据,直接丢弃。

进一步地,所述方法还包括:

所述审核装置根据预先设置的审核策略,将审核后确定为正确的数据放入所述存储装置。

进一步地,所述方法还包括:

所述知识库预先设置数据的性能指标的阈值,以符合所述阈值为判断数据正确的条件。

另一方面,本发明实施例还提供了一种采集数据审核的装置,包括:

采集模块,用于数据中心监控管理平台采集的数据进入预审核装置;

初步判断模块,用于所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;

待审核模块,用于根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。

进一步地,所述初步判断模块还用于:

所述预审核装置将判断结果为正确的数据放入存储装置。

进一步地,所述装置还包括:

再次审核模块,用于审核装置根据预先设置的审核策略,对所述待审核池中的数据进行再次审核,确定有问题的数据,直接丢弃。

进一步地,所述再次审核模块还用于:所述审核装置根据预先设置的审核策略,将审核后确定为正确的数据放入所述存储装置。

进一步地,所述装置还包括:

所述知识库预先设置数据的性能指标的阈值,以符合所述阈值为判断数据正确的条件。

本发明实施例通过数据中心监控管理平台采集的数据进入预审核装置;所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。本发明实施例可以通过预审核机制减少需要审核装置的数据量,通过审核机制保证数据的准确性,从而保证数据中心的性能、告警等指标数据的准确性。

本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明技术方案的进一步理解,并且构成说明书的一部分,与本申请的实施例一起用于解释本发明的技术方案,并不构成对本发明技术方案的限制。

图1为本发明实施例采集数据审核的方法的流程图;

图2为本发明实施例采集数据审核的装置的原理图;

图3为本发明实施例采集数据审核的装置的结构图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白,下文中将结合附图对本发明的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。

在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。

图1为本发明实施例采集数据审核的方法的流程图,如图1所示,本发明实施例的方法包括以下步骤:

步骤100:数据中心监控管理平台采集的数据进入预审核装置;

步骤101:所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;

步骤102:根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。

进一步地,所述方法还包括:所述预审核装置将判断结果为正确的数据放入存储装置。

进一步地,所述方法还包括:

审核装置根据预先设置的审核策略,对所述待审核池中的数据进行再次审核,确定有问题的数据,直接丢弃。

进一步地,所述方法还包括:

所述审核装置根据预先设置的审核策略,将审核后确定为正确的数据放入所述存储装置。

进一步地,所述方法还包括:

所述知识库预先设置数据的性能指标的阈值,以符合所述阈值为判断数据正确的条件。

具体地,本发明实施例主要应用于数据中心监控管理平台的采集数据审核,通过所述方法进行采集数据的审核,实现数据的准确性。

本发明实施例技术方案就是解决在数据采集过程中,数据采集错误的问题,通过本策略,可以对数据的正确性进行审核,有疑问的数据,放入数据待审核池,确定有问题的数据,直接丢弃,供后续数据审核作为参考。本方法可以保证硬件资源采集数据的准确性,有效减少无效的数据带来的工作量,提高工作效率。

本发明实施例技术方案的详细阐述如下:

图2为本发明实施例采集数据审核的装置的原理图,如图2所示,本发明实施例提出的应用于数据中心监控管理平台采集据审核的方法包括:预审核装置、知识库、待审核池、审核装置、丢弃装置和存储装置。数据中心监控管理平台采集数据进入预审核装置,预审核装置可以根据知识库对数据进行初步判断,可以选择放入待审核池,或者入库进入存储装置;知识库负责维护问题数据的仓库,如性能指标的阈值,超过阈值、低于阈值,执行丢弃操作;丢弃装置根据丢弃条件执行数据的丢弃;审核装置由监控管理平台管理员对待审核池中的数据进行下一步操作,进入丢弃装置或者进入存储装置。

进一步地,采集数据进入监控管理平台,不是直接进入存储装置,而是进入预审核装置,通过知识库进行初步的判断,可以根据知识库的内容,将数据放入下一步操作,如进入待审核池、存储装置;

可以自定义知识库,并将知识库提供给预审核装置;

预审核装置可以根据知识库进行不同的处理操作,如放入待审核池、丢弃装置;

审核装置可以对待审核池中的数据进行审核,可以进行下一步操作,如进入丢弃装置、进入存储装置;

丢弃装置可以对数据进行丢弃操作;

存储装置可以将数据持久化存储。

本发明实施例技术实现的具体实施过程如下:

采集数据进入预审核装置,预审核装置根据知识库对数据进行处理,预审核装置可以直接丢弃数据、进入待审核池或者进入存储装置;

如果选择进入存储装置,此时数据将作为有效数据进入存储装置;

如果选择进入待审核池,数据将等待审核装置的处理;

处于待审核池中的数据,进入审核装置,由审核装置进行审核,可以进入丢弃装置、进入存储装置;

丢弃装置可以对数据进行丢弃操作,数据不可恢复;

存储装置可以将在预审核装置中选择存储的数据进行存储操作,也可以将审核装置中有效的数据进行存储操作;

本发明实施例使监控管理平台在数据采集时,通过预审核机制减少需要审核装置的数据量,通过审核机制保证数据的准确性,从而保证数据中心的性能、告警等指标数据的准确性。

本发明实施例通过设计合理的预审核策略、审核策略,进而保证数据中心性能指标的准确性,并可根据已审核的数据完善数据库的审核策略;

进一步地,通过将采集数据的预审核策略与审核策略相结合,从而保证采集数据的准确性,并可通过审核装置保证数据的有效性;

进一步地,数据中心监控管理平台采集数据审核的方法实现预审核装置、丢弃装置、审核装置和存储装置的有效组合,主要包括如下几个步骤:

步骤一.采集的数据,在进入预审核装置,如果判断为无效数据,则执行步骤二;如果选择有效数据执行步骤四;

步骤二.采集的数据进入待审核池,在审核装置,根据审核策略进行数据的二次审核,如果确认为无效数据,则执行步骤三,如果确认为有效数据,则执行步骤四;

步骤三.资源进入丢弃装置,采集的数据将被彻底删除;

步骤四.资源进入存储装置,此时采集的数据将被持久化存储。

图3为本发明实施例采集数据审核的装置的结构图,如图3所示,本发明实施例另一方面提供的一种采集数据审核的装置,包括:

采集模块301,用于数据中心监控管理平台采集的数据进入预审核装置;

初步判断模块302,用于所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;

待审核模块303,用于根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。

进一步地,所述初步判断模块302还用于:

所述预审核装置将判断结果为正确的数据放入存储装置。

进一步地,所述装置还包括:

再次审核模块,用于审核装置根据预先设置的审核策略,对所述待审核池中的数据进行再次审核,确定有问题的数据,直接丢弃。

进一步地,所述再次审核模块还用于:所述审核装置根据预先设置的审核策略,将审核后确定为正确的数据放入所述存储装置。

进一步地,所述装置还包括:

所述知识库预先设置数据的性能指标的阈值,以符合所述阈值为判断数据正确的条件。

本发明实施例通过数据中心监控管理平台采集的数据进入预审核装置;所述预审核装置根据知识库对所述采集的数据进行初步判断,对数据的正确性进行审核;根据判断结果,将有问题的数据放入数据的待审核池以供再次审核。本发明实施例可以通过预审核机制减少需要审核装置的数据量,通过审核机制保证数据的准确性,从而保证数据中心的性能、告警等指标数据的准确性。

本发明实施例将采集数据的预审核策略和审核策略相结合,进而保证采集数据的准确性,从而保证性能与告警的准确性;

本发明实施例技术方案就是解决在数据采集过程中,数据采集错误的问题,通过本策略,可以对数据的正确性进行审核,有疑问的数据,放入数据待审核池,确定有问题的数据,直接丢弃,供后续数据审核作为参考。本发明实施例可以保证硬件资源采集数据的准确性,有效减少无效的数据带来的工作量,提高工作效率。

虽然本发明所揭露的实施方式如上,但所述的内容仅为便于理解本发明而采用的实施方式,并非用以限定本发明。任何本发明所属领域内的技术人员,在不脱离本发明所揭露的精神和范围的前提下,可以在实施的形式及细节上进行任何的修改与变化,但本发明的专利保护范围,仍须以所附的权利要求书所界定的范围为准。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1