一种实现文件分布式传输的方法

文档序号:7894025阅读:220来源:国知局
专利名称:一种实现文件分布式传输的方法
技术领域
本发明涉及计算机存储分布式文件领域,具体涉及一种实现文件分布式传输的方法。
背景技术
目前分布式文件系统被各厂家广泛使用,但都是通过软件的文件系统来实现的, 这种系统一般仅适用于高端集群产品,所以在成本方面都比较贵,无法在满足低端需求.但就目前来看,低端存储市场仍然占据存储市场的半壁江山,而且此类用户由于前期已经有了一定存储设备投入,但随着用户业务的不断增长,他们也慢慢开始有了分布式文件系统的需求,但让他们重新上一套集群分布式文件系统是不可能的,所以这类客户对此类产品的需求还是非常旺盛的,但苦于架构和成本的关系无法实现.本发明就提供了一种在低端存储产品中实现分布式文件系统的办法。

发明内容
本发明的目的是提供一种实现文件分布式传输的方法。本发明的目的是按以下方式实现的,系统包括I)虚拟地址模块;2)负载均衡模块;3)地址转换模块,其中
1)虚拟地址模块根据后端连接的服务接口类型和数量,虚拟出相同类型和数量的MAC地址或SAS地址;
2)负载均衡模块对于客户的访问数据,将虚拟地址和后端真实服务器地址进行配对,并将数据投向空闲的目标服务器;
3)地址转换模块对于到达目标服务器的数据,将虚拟地址释放从而完成传输; 传输步骤如下
I)首先由客户段发起大量并发访问数据,先传送到主机,主机中的虚拟地址模块,根据后端服务器接口的类型和数量,虚拟出相同接口类型和数量的地址,然后数据传送到下一级负载均衡模块;
2)负载均衡模块根据虚拟地址的释放情况来判断后端接口的负载情况,从而将虚拟地址和需要投放的服务器地址绑定,从而实现数据定向投放,实现分布式传输,之所以要将虚拟地址和真实的服务器地址绑定,就是为了能够对服务器地址进行确定,从而顺利投放数据,单纯的虚拟地址是没有任何意义的和传输价值的,也就是如果一个虚拟地址绑定了一个物理地址,说明马上就会往那个地址上传输数据,而如果有空闲的虚拟地址和物理地址未绑定,说明该物理地址对应服务器是空闲的;
3)在数据传输到服务器端后,地址转换模块会将虚拟地址进行拨离释放,从而使传输线路再次空闲下来准备下次传输,这就实现了一个简单的分布式传输,这样在下次传输的时候,虚拟地址再次绑定新的空闲物理地址进行传输。虚拟地址管理模块用于生成和后端服务器同等数量的虚拟地址,然后存放在负载均衡模块,当有 数据到达后,将用虚拟地址和数据进行绑定,然后向后端服务器投放,这时候传输的数据就会占用这个虚拟地址,而又由于虚拟地址和后端服务器是一一对应的,所以虚拟地址被占用,既是后端服务器占用,只有当数据传输结束后,这个虚拟地址被释放回负载均衡模块,那么就证明这个服务器已经空闲,继续进行下一个数据的传输。本发明的有益效果是本发明仅仅是利用3个模块,就实现了一个高效的负载均衡系统;这比利用高级分布式文件系统来实现的集群,成本要低廉的多。本发明不仅仅适用于分布式文件的传输,还可以扩展到块级文件的处理,通过分布式传输来实现数据存储负载均衡。


图I是系统结构不意 图2是传输步骤流程图。
具体实施例方式参照说明书附图对本发明的方法作以下详细地说明。结构框图即上图中系统包含的模块如下
1)虚拟地址模块根据后端连接的服务的接口类型和数量,来虚拟出相同类型和数量的MAC地址、SAS地址等;
2)负载均衡模块对于客户的访问数据,将虚拟地址和后端真实服务器地址进行配对,并将数据投向空闲的目标服务器;
3)地址转换模块对于到达目标服务器的数据,将虚拟地址释放,从而完成传输; 传输步骤如下
如附图所示,首先由客户段发起大量并发访问数据,会先到达主机,主机中虚拟地址模块,会事先根据后端服务器接口的类型和数量,虚拟出相同接口类型和数量的地址(之所以要选择虚拟地址,就是因为虚拟地址无需和真实服务器绑定,每次传输可以根据负载情况,随机绑定一个地址传输).然后数据会到达下一级负载均衡模块。负载均衡模块根据虚拟地址的释放情况来判断后端接口的负载情况,从而将虚拟地址和需要投放的服务器地址绑定,从而实现数据定向投放,实现分布式传输.之所以要将虚拟地址和真实的服务器地址绑定,就是为了能够对服务器地址进行确定,从而可以顺利投放数据,单纯的虚拟地址是没有任何意义的和传输价值的。也就是如果一个虚拟地址绑定了一个物理地址,说明马上就会往那个地址上传输数据,而如果有空闲的虚拟地址和物理地址未绑定,说明该物理地址对应服务器是空闲的。 在数据传输到服务器端后,地址转换模块会将虚拟地址进行拨离释放,从而使传输线路再次空闲下来准备下次传输.这就实现了一个简单的分布式传输方法.这样在下次传输的时候,虚拟地址可以绑定新的空闲的物理地址进行传输。在数据传输过程中,客户端并发数据访问,到达负载均衡模块,通过前面的模块介绍已经了解,虚拟地址管理模块主要是用来生成和后端服务器同等数量的虚拟地址,然后存放在负载均衡模块,当有数据到达后,将用虚拟地址和数据进行绑定,然后向后端服务器投放,这时候传输的数据就会占用这个虚拟地址,而又由于虚拟地址和后端服务器是一一对应的,所以虚拟地址被占用,既是后端服务器占用,只有当数据传输结束后,这个虚拟地址被释放回负载均衡模块,那么就证明这个服务器已经空闲,可以进行下一个数据的传输。 除说明书所述的技术特征外,均为本专业技术人员的已知技术。
权利要求
1.一种实现文件分布式传输的方法,其特征在于系统包括I)虚拟地址模块;2)负载均衡模块;3)地址转换模块,其中 .1)虚拟地址模块根据后端连接的服务接口类型和数量,虚拟出相同类型和数量的MAC地址或SAS地址; .2)负载均衡模块对于客户的访问数据,将虚拟地址和后端真实服务器地址进行配对,并将数据投向空闲的目标服务器; .3)地址转换模块对于到达目标服务器的数据,将虚拟地址释放从而完成传输; 传输步骤如下 .1)首先由客户段发起大量并发访问数据,先传送到主机,主机中的虚拟地址模块,根据后端服务器接口的类型和数量,虚拟出相同接口类型和数量的地址,然后数据传送到下一级负载均衡模块; .2)负载均衡模块根据虚拟地址的释放情况来判断后端接口的负载情况,从而将虚拟地址和需要投放的服务器地址绑定,从而实现数据定向投放,实现分布式传输,之所以要将虚拟地址和真实的服务器地址绑定,就是为了能够对服务器地址进行确定,从而顺利投放数据,单纯的虚拟地址是没有任何意义的和传输价值的,也就是如果一个虚拟地址绑定了一个物理地址,说明马上就会往那个地址上传输数据,而如果有空闲的虚拟地址和物理地址未绑定,说明该物理地址对应服务器是空闲的; .3)在数据传输到服务器端后,地址转换模块会将虚拟地址进行拨离释放,从而使传输线路再次空闲下来准备下次传输,这就实现了一个简单的分布式传输,这样在下次传输的时候,虚拟地址再次绑定新的空闲物理地址进行传输。
2.根据权利要求I所属的方法,其特征在于,虚拟地址管理模块用于生成和后端服务器同等数量的虚拟地址,然后存放在负载均衡模块,当有数据到达后,将用虚拟地址和数据进行绑定,然后向后端服务器投放,这时候传输的数据就会占用这个虚拟地址,而又由于虚拟地址和后端服务器是一一对应的,所以虚拟地址被占用,既是后端服务器占用,只有当数据传输结束后,这个虚拟地址被释放回负载均衡模块,那么就证明这个服务器已经空闲,继续进行下一个数据的传输。
全文摘要
本发明提供一种实现文件分布式传输的方法,系统包括1)虚拟地址模块;2)负载均衡模块;3)地址转换模块。其中1)虚拟地址模块根据后端连接的服务接口类型和数量,虚拟出相同类型和数量的MAC地址或SAS地址;2)负载均衡模块对于客户的访问数据,将虚拟地址和后端真实服务器地址进行配对,并将数据投向空闲的目标服务器;3)地址转换模块对于到达目标服务器的数据,将虚拟地址释放从而完成传输。
文档编号H04L29/12GK102638583SQ201210116420
公开日2012年8月15日 申请日期2012年4月20日 优先权日2012年4月20日
发明者孙磊 申请人:浪潮电子信息产业股份有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1