一种数据处理系统的制作方法

文档序号:16948671发布日期:2019-02-22 21:49阅读:149来源:国知局
一种数据处理系统的制作方法

本实用新型涉及数据处理技术领域,具体而言,涉及一种数据处理系统。



背景技术:

目前,随着科技的不断发展,越来越多的互联网服务公司出现在人们的视野中。

互联网服务公司一般需要对用户的浏览日志进行处理,方式,随着企业的发展,越来越多的公司出现无法支撑日益增长的日志量,同时对数据的统计无法很好的胜任,执行时间较长,影响性能。

有鉴于此,如何解决上述问题,是本领域技术人员关注的重点。



技术实现要素:

本实用新型的目的在于提供一种数据处理系统,以解决现有技术中数据服务系统无法支撑日益增长的数据量的问题。

本实用新型是这样实现的:

本实施新型实施例提供一种数据处理系统,所述数据处理系统包括日志采集服务器组、负载均衡服务器组、数据缓冲服务器组以及存储服务器组,所述日志采集服务器组、所述负载均衡服务器组、所述数据缓冲服务器组以及所述存储服务器组依次通信连接。

近一步地,所述数据处理系统还包括安全认证服务器组,所述数据缓冲服务器组通过所述安全认证服务器与所述存储服务器组通信连接。

近一步地,所述安全认证服务器组包括主安全认证服务器与从安全认证服务器,所述主安全认证服务器、所述从安全认证服务器均分别与所述数据缓冲服务器组、所述存储服务器组通信连接。

近一步地,所述数据缓冲服务器组包括多个数据缓冲服务器,每个所述数据缓冲服务器均分别与所述负载均衡服务器、所述安全认证服务器组通信连接。

近一步地,所述数据缓冲服务器的数量包括6个。

近一步地,所述存储服务器组包括多个存储服务器,所述多个存储服务器之间相互通信连接,且其中一个或多个所述存储服务器与所述安全认证服务器通信连接。

近一步地,所述负载均衡服务器组包括主负载均衡服务器与从负载均衡服务器,所述主负载均衡服务器、所述从负载均衡服务器均分别与所述日志采集服务器组、所述数据缓冲服务器组通信连接。

近一步地,所述数据处理系统还包括防火墙,所述防火墙与所述日志采集服务器组通信连接。

近一步地,所述日志采集服务器组包括多个日志采集服务器,每个所述日志采集服务器均分别与所述防火墙、所述负载均衡服务器通信连接。

近一步地,所述日志采集服务器包括web服务器。

相对现有技术,本实用新型具有以下有益效果:

本实用新型提供了一种数据处理系统,其中,该数据处理系统包括日志采集服务器组、负载均衡服务器组、数据缓冲服务器组以及存储服务器组,日志采集服务器组、负载均衡服务器组、数据缓冲服务器组以及存储服务器组依次通信连接。本实用新型提供的数据处理系统由于多个服务器器组,且服务器组之间依次通信连接,使得本实用新型提供的数据处理系统能够利用日志采集服务器组采集用户的日志,同时利用日志均衡服务器提高均匀分发数据,并通过负载均衡服务器组提高系统的负载均衡性,同时将数据发送至存储服务器组进行存储,同时设置多个服务器组,使每个服务器组执行不同的功能,对数据的处理更快且更加稳定

为使本实用新型的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。

附图说明

为使本实用新型实施例的目的、技术方案和优点更加清楚,下面将结合本实用新型实施例中的附图,对本实用新型实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本实用新型一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本实用新型实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本实用新型的实施例的详细描述并非旨在限制要求保护的本实用新型的范围,而是仅仅表示本实用新型的选定实施例。基于本实用新型中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本实用新型保护的范围。

图1示出了本实用新型实施例所提供的数据处理系统简易模块示意图。

图2示出了本实用新型实施例所提供的数据处理系统的具体模块示意图。

图标:100-数据处理系统;110-日志采集服务器组;111-日志采集服务器;120-负载均衡服务器组;121-主负载均衡服务器;122-从负载均衡服务器;130-数据缓冲服务器组;131-数据缓冲服务器;140-安全认证服务器组;141-主安全认证服务器;142-从安全认证服务器;150-存储服务器组;151-存储服务器;160-防火墙。

具体实施方式

下面将结合本实用新型实施例中附图,对本实用新型实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本实用新型一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本实用新型实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本实用新型的实施例的详细描述并非旨在限制要求保护的本实用新型的范围,而是仅仅表示本实用新型的选定实施例。基于本实用新型的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本实用新型保护的范围。

在本实用新型的描述中,还需要说明的是,除非另有明确的规定和限定,术语“设置”、“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本实用新型中的具体含义。

应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。

下面结合附图,对本实用新型的一些实施方式做详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。

请参阅图1与图2,本实用新型实施例提供了一种数据处理系统100,该数据处理系统100包括日志采集服务器组110、负载均衡服务器组120、数据缓冲服务器组130以及存储服务器组150,日志采集服务器组110、负载均衡服务器组120、数据缓冲服务器组130以及存储服务器组150依次通信连接。

具体地,在本实施例中,日志采集服务器组110为用户提供浏览服务,同时采集用户的浏览日志,并将数据发送至负载均衡服务器组120。

需要说明的是,在本实施例中,日志采集服务器组110包括多个日志采集服务器111,每个日志采集服务器111均分别与负载均衡服务器通信连接。并且,本实施例提供的日志采集服务器111包括web服务器。Web服务器一般指网站服务器,是指驻留于因特网上某种类型计算机的程序,可以向浏览器等Web客户端提供文档,也可以放置网站文件,让全世界浏览;可以放置数据文件,让全世界下载。当用户访问网站时,由日志采集服务器111中的任意一个服务器为用户提供服务,并采集用户的访问日志,其中,本实施例所述的访问日志指用户的访问记录,例如用户访问的时间或用户访问的版块。当然地,在其它的一些实施例中,日志采集服务器111也可以其它服务器,本实施例对此并不做任何限定。

并且,还需要说明的是,在本实施例中,为了防止日志采集服务器组110被入侵,数据处理系统100还包括防火墙160,其中,防火墙160与日志采集服务器组110通信连接,即防火墙160与每个日志采集服务器组110均通信连接。防火墙160指的是一个由软件和硬件设备组合而成、在内部网和外部网之间、专用网与公共网之间的界面上构造的保护屏障,是一种获取安全性方法的形象说法,它是一种计算机硬件和软件的结合,使Internet与Intranet之间建立起一个安全网关(Security Gateway),从而保护内部网免受非法用户的侵入。可以理解的,于本实施例中,防火墙160为嵌设相应软件的硬件结构,并通过数据端口与每台日志采集服务器111进行通信连接。

即在本实施例中,用户通过防火墙160进行访问服务器,同时由服务器采集用户的访问日志,其中,对于用户量较多的情况下,实时海量数据较大,因此对于数据的存储可能存在问题。

有鉴于此,在本实施例中,数据处理系统100包括了负载均衡服务器组120与数据缓冲服务器组130,其中,负载均衡服务器组120用于将数据均衡分发至数据缓冲服务器组130,从而利用缓冲服务器组进行数据的传输,达到数据处理更加迅速的目的。

其中,需要说明的是,负载均衡服务器组120包括主负载均衡服务器121与从负载均衡服务器122,主负载均衡服务器121、从负载均衡服务器122均分别与日志采集服务器组110、数据缓冲服务器组130通信连接。当主负载均衡服务器121能够正常运行时,通过主负载均衡服务器121进行数据的均衡发送,当主负载均衡服务器121出现故障时,通过从负载均衡服务器122进行数据的均衡发送,从而使数据的分配始终能够正常运行。

并且,于本实施例中,主负载均衡服务器121、从负载均衡服务器122均与每个日志采集服务器111通信连接,进而通过接收多台日志服务器的数据,并将数据均衡分发至数据缓冲服务器组130。

进一步地,数据缓冲服务器组130包括多个数据缓冲服务器131,每个数据缓冲服务器131均分别与负载均衡服务器、安全认证服务器组140通信连接。在本实施例中,数据缓冲服务器131为用于传输用户日志信息的服务器。

并且,与本实施例中,数据缓冲服务器131的数量包括6个,方然的,在其它的一些实施例中,数据缓冲服务器131也可以为其它数量,本实施例对此并不做任何限定。

进一步地,在本实施例中,在数据缓冲服务器131将数据进行传输时,实质上需要将数据传输至存储服务器组150进行存储,以方便在是需要进行数据调用时进行调用,但是,若直接将利用数据缓冲服务器131将数据传输至存储当服务器组,则可能出现有其它服务器与存储服务器组150连接,并调用存储服务器组150中的数据,从而导致出现问题。

有鉴于此在,与本实施例中,数据处理系统100还包括安全认证服务器组140,数据缓冲服务器组130通过安全认证服务器与存储服务器组150通信连接。其中,安全认证服务器组140包括主安全认证服务器141与从安全认证服务器142,主安全认证服务器141、从安全认证服务器142均分别与数据缓冲服务器组130、存储服务器组150通信连接。通过设置主安全认证服务器141与从安全认证服务器142,能够达到即使其中任意以安全认证服务器出现故障,剩余的安全服务器也能够正常运行,从而提高了数据传输的稳定性。

同时,存储服务器组150包括多个存储服务器151,多个存储服务器151之间相互通信连接,且其中一个或多个存储服务器151与安全认证服务器通信连接。

当数据缓冲服务器组130将数据传输至存储服务器组150时,首先会通过安全认证服务器组140与存储服务器组150之间建立通信连接,例如通过安全密钥的方式进行连接,本实施例对此并不做任何限定。

进一步地,由于多个存储服务器151之间相互通信连接,因此安全认证服务器只需与其中的一个或多个存储服务器151之间进行通信连接,即可实现存储的目的。

综上所述,本实用新型实施例所提供的数据处理系统,本实用新型提供了一种数据处理系统,其中,该数据处理系统包括日志采集服务器组、负载均衡服务器组、数据缓冲服务器组以及存储服务器组,日志采集服务器组、负载均衡服务器组、数据缓冲服务器组以及存储服务器组依次通信连接。本实用新型提供的数据处理系统由于多个服务器器组,且服务器组之间依次通信连接,使得本实用新型提供的数据处理系统能够利用日志采集服务器组采集用户的日志,同时利用日志均衡服务器提高均匀分发数据,并通过负载均衡服务器组提高系统的负载均衡性,同时将数据发送至存储服务器组进行存储,同时设置多个服务器组,使每个服务器组执行不同的功能,对数据的处理更快且更加稳定

在本实用新型的描述中,需要说明的是,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。以上所述仅为本实用新型的优选实施例而已,并不用于限制本实用新型,对于本领域的技术人员来说,本实用新型可以有各种更改和变化。凡在本实用新型的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本实用新型的保护范围之内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1