一种基于lustre存储的网络系统的制作方法

文档序号:7830900阅读:520来源:国知局
一种基于lustre存储的网络系统的制作方法
【专利摘要】本实用新型涉及一种基于lustre存储的网络系统,属于计算机【技术领域】。本实用新型将lustre存储系统的客户端、元数据服务器和存储服务器通过主网络交换机连接起来形成主通讯网络,采用网络桥技术,将主网络交换机经网络桥上联到与Inter网互联的核心交换机,从而实现lustre存储系统的异构网络互联,同时为了在主网络出现异常时不影响lustre存储系统的正常运行,该网络系统还增设一冗余网络,在主网络出现异常时lustre存储系统能够正常运行。
【专利说明】—种基于lustre存储的网络系统

【技术领域】
[0001]本实用新型涉及一种基于lustre存储的网络系统,属于计算机【技术领域】。

【背景技术】
[0002]Lustre是当前应用最为广泛的开源性的集群分布式并行文件系统,在高性能存储领域,一般基于它实现高性能存储系统,生产单位往往期望在不改变原有网络结构的前提下,让它发挥最大的性能,确保生产任务不间断进行。目前,lustre存储系统只有一套基于Infiniband交换机的网络系统,它和一套高性能计算集群形成一个密闭的高性能应用环境,只能通过串口供特定用户接入该环境,具有比较大的局限性,并且,当单一的Infiniband存储网络出现异常时,会直接影响存储系统的正常运行。
实用新型内容
[0003]本实用新型的目的是提供一种基于lustre存储的网络系统,以实现lustre存储系统的网络异构和冗余。
[0004]本实用新型为解决上述技术问题而提供一种基于lustre存储的网络系统,该网络系统包括客户端、元数据服务器、存储服务器、主网络交换机、网络桥和核心交换机,客户端、元数据服务器和存储服务器通过网线与主网络交换机的相应端口相连,形成第一网络,所述网络桥的一个端口通过网线与主网络交换机相连,另一个端口通过网线与核心交换机相连,核心交换机用于与外网相连。
[0005]所述的网络系统还包括冗余网络交换机,该冗余网络交换机的各端口分别与客户端、元数据服务器和存储服务器相连,形成第一网络的冗余网络。
[0006]所述的主网络交换机为Infiniband交换机。
[0007]所述的冗余网络交换机为千兆交换机。
[0008]所述的客户端、元数据服务器和存储服务器均安装有Infiniband连接卡、冗余网络连接卡、核心网络连接卡及相应的驱动。
[0009]所述的网络桥上安装有Infiniband连接卡、核心网络连接卡及相应的驱动。
[0010]所述的Infiniband交换机为Mellanox 5030交换机。
[0011]本实用新型的有益效果是:本实用新型将lustre存储系统的客户端、元数据服务器和存储服务器通过主网络交换机连接起来形成主通讯网络,采用网络桥技术,将主网络交换机经网络桥上联到与Inter网互联的核心交换机,从而实现lustre存储系统的异构网络互联,同时为了在主网络出现异常时不影响lustre存储系统的正常运行,该网络系统还增设一冗余网络,在主网络出现异常时lustre存储系统能够正常运行。

【专利附图】

【附图说明】
[0012]图1是本发明实施例一中的基于lustre存储的网络系统的结构示意图;
[0013]图2是本发明实施例二中的基于lustre存储的网络系统的结构示意图。

【具体实施方式】
[0014]实施例一
[0015]本实施考虑到GPU计算性能优势和lustre I/O性能优势,以Infiniband网络为主作为lustre存储系统的客户端、元数据服务器、存储服务器之间的通讯网络,采用网络桥技术,经由I个网桥节点上联到核心交换机,该网络系统如图1所示,包括客户端、元数据服务器、存储服务器、Infiniband交换机、网络桥和核心交换机,客户端、元数据服务器和存储服务器通过Infiniband网线与Infiniband交换机的端口相连,形成Infiniband网络,网络桥的一个端口通过Infiniband网线与Infiniband交换机相连,另一个端口通过万兆网线与核心交换机相连,核心交换机用于与Inter网相连。Infiniband交换机选用基于InfiniBand技术的高性能36 口 Mellanox 5030交换机,该交换机能够提供36个全速稳定无阻的40Gb/s端口,数据传输延迟小于200纳秒,客户端、元数据服务器和所有存储服务器通过InfiniBand网线连接到Mellanox 5030交换机的各对应端口。网络桥节点安装有Infiniband连接卡、万兆网卡及驱动,通过I根InfiniBand网线连接到Mellanox5030交换机端口,通过I根万兆网线高速上联到核心交换机万兆模块作为外联主要通讯通道,实现2种异构网络互联。
[0016]本实施例中的客户端是一套安装lustre客户端软件的GPU/CPU集群,包括I个管理节点和9个计算节点,每个节点安装有lustre文件系统客户端软件、Infiniband连接卡及驱动,INTEL 1000M网卡及驱动。其中每个计算节点配置I块500GB硬盘做系统盘,2块2TB硬盘做RAIDO用作临时存储,搭载2个Tesla S1070 GPU服务器,每个Tesla S1070 GPU服务器提供480个并行处理核心;管理节点配置I块500GB硬盘做系统盘。元数据服务器,配置8个硬盘,其中2块500GB硬盘为RAIDl用作系统盘,6块500GB硬盘为RAID6用作元数据存储MDT。安装有Lustre文件系统主程序、内置文件系统、Infiniband连接卡及驱动,INTEL1000M网卡及驱动。存储服务器共有5个,每个存储服务器配置16盘,其中2块500GB硬盘做RAIDl用作系统盘,14个2TB硬盘为RAID6分成3个8TB的0ST,共有15个0ST。每个存储服务器节点上均安装有Lustre文件系统主程序、内置文件系统、Infiniband连接卡及驱动,千兆网卡及驱动。
[0017]实施例二
[0018]本实施例是在实施例一的基础的进一步改进,该改进是针对Infiniband网络出现异常而进行维修导致影响生产任务而提出的,本实施例中的基于lustre存储的网络系统增加I条网络作为冗余网络,具体结构如图2所示,客户端、元数据服务器和存储服务器除了通过Infiniband网线与Infiniband交换机的端口相连,形成Infiniband网络外,客户端、元数据服务器和存储服务器上还均设有冗余网络连接卡和驱动,客户端、元数据服务器和存储服务器通过相应网线分别与冗余交换设备的相应端口连接,这里的冗余交换设备选用48 口的Foundry千兆交换机,千兆交换机通过I根千兆网线上联到核心交换机千兆模块作为外联冗余通讯通道,在Infiniband网络正常的情况下,处于断开状态,当在Infiniband网络出现异常情况时,千兆交换机与核心交换机处于连接状态,所有客户端、元数据服务器和所有存储服务器通过千兆网线连接到48 口 Foundry千兆交换机端口,并通过核心交换机与外网连接,实现在Infiniband网线出现故障时整个网络系统能够正常工作。
【权利要求】
1.一种基于lustre存储的网络系统,其特征在于,该网络系统包括客户端、元数据服务器、存储服务器、主网络交换机、网络桥和核心交换机,客户端、元数据服务器和存储服务器通过网线与主网络交换机的相应端口相连,形成第一网络,所述网络桥的一个端口通过网线与主网络交换机相连,另一个端口通过网线与核心交换机相连,核心交换机用于与外网相连。
2.根据权利要求1所述的基于lustre存储的网络系统,其特征在于,所述的网络系统还包括冗余网络交换机,该冗余网络交换机的各端口分别与客户端、元数据服务器和存储服务器相连,形成第一网络的冗余网络。
3.根据权利要求2所述的基于lustre存储的网络系统,其特征在于,所述的主网络交换机为Infiniband交换机。
4.根据权利要求2所述的基于lustre存储的网络系统,其特征在于,所述的冗余网络交换机为千兆交换机。
5.根据权利要求3所述的基于lustre存储的网络系统,其特征在于,所述的客户端、元数据服务器和存储服务器均安装有Infiniband连接卡、冗余网络连接卡、核心网络连接卡及相应的驱动。
6.根据权利要求3所述的基于lustre存储的网络系统,其特征在于,所述的网络桥上安装有Infiniband连接卡、核心网络连接卡及相应的驱动。
7.根据权利要求3所述的基于lustre存储的网络系统,其特征在于,所述的Infiniband 交换机为 Mellanox 5030 交换机。
【文档编号】H04L29/08GK204046652SQ201420430693
【公开日】2014年12月24日 申请日期:2014年7月31日 优先权日:2014年7月31日
【发明者】张娟, 翟中霞, 侯朋辉, 祖国峰, 杨丹, 何胡平, 方江雪, 陈明俊 申请人:中国石油化工股份有限公司, 中国石油化工股份有限公司河南油田分公司石油物探技术研究院
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1