一种面向云服务器应用的多i/o高密度多节点服务器系统设计方法
【技术领域】
[0001]本发明涉及云服务器技术领域，具体地说是一种面向云服务器应用的多I/O高密度多节点服务器系统设计方法。
【背景技术】
[0002]为了便于描述，这里以刀片服务器系统的IB应用为例，具体说明这种多I/O高密度多节点服务器系统架构的设计方法。
[0003]刀片服务器是一种高密度、具有高集成度形态的服务器，广泛应用于高性能计算能领域。进行大规模的并行计算，需要服务器节点与节点，以及服务器之间的互联。InfiniBand是一种支持多并发链接的“转换线缆”技术，解决了服务器端的连接问题，用于服务器与服务器，服务器和存储设备以及服务器和网络之间的通信。现在市场上的产品，IB应用主要基于FDR技术。EDR是下一代的infiniband技术。它相比于现在的FDR，整体传输速率由56Gb/s提升到100Gb/S，单个数据链路的传输速率由14Gb/s提升到25Gb/s，对应匹配的PCIE由PCIE3.0 X8提高到PCIE3.0 X16。技术的提升对服务器系统提出了更高的要求，具备PCIE X16的环境是EDR技术的应用前提。同时，由于刀片服务器系统是计算节点高密度集成系统，设计还需要考虑如何实现多节点同时外接PCIE设备的集成架构问题。
【发明内容】
[0004]本发明的目的是提供一种面向云服务器应用的多I/O高密度多节点服务器系统设计方法。
[0005]本发明的目的是按以下方式实现的，系统包括服务器计算节点、背板、高速连接器和I/o模块，其特征在于，具体设计步骤如下:
1)中背板两侧设置有高速连接器，高速连接器通过数据线与服务器计算节点和I/o模块相连，中背板上的高速连接器的数目为20组，上下各有10组高速连接器，分别对应于系统中的20个计算节点；
2)高速连接器布线为6X12结构，总共72组差分对，对于每个单独的高速连接器，连线分为三组，在背板两侧高速连接器重叠的区域，节点上的信号走线通过高速连接器后直接与I/O模块相连，称为正交，在其他区域，节点上的信号走线到达高速连接器后，需要经由背板上的中转走线后，才能到达I/O模块，称为非正交，与服务器节点相连的高速连接器部分划分为三个区域:1/3是正交的，1/3用于USB，100M, IG以太网和杂线，另外的1/3是非正交的，上下两层正交和非正交层都分布着X4的IB信号和X8的PCIE信号；
3)中背板设置有多I/O高密度服务器架构系统，整个系统机箱具有8U空间，最多可支持20个计算节点，计算节点在机箱内分布在上下两排排列，每排10个计算节点，中背板的一侧连接计算节点，另外一侧连接I/o模块；
4)在每个计算节点处，由处理单元发出PCIEX16信号，PCIE信号到达连接器，被分成两路X8信号，分别经过高速连接器的正交区和非正交区，I/O模块有两个端口，一路PCIEX8信号正交直连到后面的一个I/O端口，另一路经由中背板非正交连到另外一个端口，通过正交与非正交两个PCIE X8组合的方式，计算节点与I/O模块PCIE X16的正交与非正交连接，实现了 I/O模块和服务器节点之间的相互独立，同时支持X16的PCIE走线，满足了新一代Infiniband的技术要求。
[0006]本发明的有益效果是:整机柜云服务器面向海量数据的存储和处理，它以标准机柜为设计单位，可灵活支持计算、存储等各类服务器节点。同时兼容标准机架式网络交换机，统一对搭载服务器节点进行供电、散热和管理。设计的最终目标是实现模块化，根据具体业务需求配置资源。图4为整机柜云服务器的架构图。这种结构能够实现集中供电、集中散热、集中管理，具有更高的散热效率和电源转换效率。可以简化机房部署，方便维护。同时采用整机柜交付，可以提高交付效率，满足互联网大规模的部署需求。这种多I/O高密度多节点的服务器架构系统在空间上把功能模块从服务器节点上分离出来，可以提高空间利用率，符合整机柜云服务器的设计要求。
[0007]本发明体系架构创新之处在于通过巧妙的中背板布线设计，在原有X4的连接器层补充X8的信号，通过正交和非正交区组成X16信号，实现I/O功能模块的高密度集成和完全独立。
[0008]系统架构由计算节点、系统中背板、I/O模块、电源组成。系统可最多可支持20个节点，每个计算节点都是一个独立的计算单元。I/o模块是一种可插拔的外设模块，最多可支持5个。每个I/O模组内配有2块I/O板，每个I/O板上有2个PCIE插槽，可外插PCIE卡，I/O板通过高速连接器与系统中背板相连。本发明为云服务器体系结构的模块化提供了一种高效可行的实现方法，必将广泛地用于未来的云服务器架构设计中。
【附图说明】
[0009]图1是中背板连接器分布图；
图2是高速连接器信号排布图；
图3是基于新型中背板的多I/O高密度服务器架构；
图4是整机柜云服务器系统架构图。
【具体实施方式】
[0010]参照说明书附图对本发明的方法作以下详细地说明。
[0011]图1是系统中背板连接器分布图。背板两侧都布有连接器。实线部分表示服务器节点一侧的连接器，与节点相连；虚线部分表示I/o模块一侧的连接器，与I/O模块相连。中背板上连接器的数目为20组，上下各有10组，分别对应于系统中的20个计算节点。
[0012]图2为每个连接器上的信号排布图。高速连接器布线为6X12结构，总共72组差分对。对于每个单独的连接器，连线分为三组。在背板两侧连接器重叠的区域，节点上的信号走线通过连接器后直接与I/o模块相连，称为正交。在其他区域，节点上的信号走线到达连接器后，需要经由背板上的中转走线后，才能到达I/O模块，称为非正交。如图2，与服务器节点相连的连接器部分可以划分为三个区域:1/3是正交的，1/3用于USB，100M, IG以太网和杂线，另外的1/3是非正交的。上下两层正交和非正交层都分布着X4的IB信号和X8的PCIE信号。
[0013]基于以上中背板，设计了如图3所示的多I/O高密度服务器架构系统。整个系统机箱具有8U空间，最多可支持20个计算节点。节点在机箱内分布在上下两排排列，每排10个节点。中背板的一侧连接计算节点，另外一侧连接I/O模块。
[0014]在每个节点处，由处理单元发出PCIE X16信号。PCIE信号到达连接器，被分成两路X8信号，分别经过高速连接器的正交区和非正交区。I/O模块有两个端口。一路PCIE X8信号正交直连到后面的一个I/O端口，另一路经由中背板非正交连到另外一个端口。通过这种正交与非正交两个PCIE X8组合的方式，实现了节点与I/O模块PCIE X16的连接。这样实现了 I/O模块和服务器节点之间的相互独立。同时支持X16的PCIE走线，满足了新一代Infiniband的技术要求。
[0015]这种多I/O高密度多节点的服务器架构系统在空间上把功能模块从服务器节点上分离出来，可以提高空间利用率，符合整机柜云服务器的设计要求。
[0016]整机柜云服务器面向海量数据的存储和处理，它以标准机柜为设计单位，可灵活支持计算、存储等各类服务器节点。同时兼容标准机架式网络交换机，统一对搭载服务器节点进行供电、散热和管理。设计的最终目标是实现模块化，根据具体业务需求配置资源。
[0017]图4为整机柜云服务器的架构图。这种结构能够实现集中供电、集中散热、集中管理，具有更高的散热效率和电源转换效率。可以简化机房部署，方便维护。同时采用整机柜交付，可以提高交付效率，满足互联网大规模的部署需求。
[0018]本发明为云服务器体系结构的模块化提供了一种高效可行的实现方法，必将广泛地用于未来的云服务器架构设计中。
[0019]除说明书所述的技术特征外，均为本专业技术人员的已知技术。
【主权项】
1.一种面向云服务器应用的多I/O高密度多节点服务器系统设计方法，系统包括服务器计算节点、中背板、高速连接器和I/o模块，其特征在于，具体设计步骤如下: 1)中背板两侧设置有高速连接器，高速连接器通过数据线与服务器计算节点和I/o模块相连，中背板上的高速连接器的数目为20组，上下各有10组高速连接器，分别对应于系统中的20个计算节点； 2)高速连接器布线为6X12结构，总共72组差分对，对于每个单独的高速连接器，连线分为三组，在背板两侧高速连接器重叠的区域，节点上的信号走线通过高速连接器后直接与I/O模块相连，称为正交，在其他区域，节点上的信号走线到达高速连接器后，需要经由背板上的中转走线后，才能到达I/O模块，称为非正交，与服务器节点相连的高速连接器部分划分为三个区域:1/3是正交的，1/3用于USB，100M, IG以太网和杂线，另外的1/3是非正交的，上下两层正交和非正交层都分布着X4的IB信号和X8的PCIE信号； 3)中背板设置有多I/O高密度服务器架构系统，整个系统机箱具有8U空间，最多可支持20个计算节点，计算节点在机箱内分布在上下两排排列，每排10个计算节点，中背板的一侧连接计算节点，另外一侧连接I/o模块； 4)在每个计算节点处，由处理单元发出PCIEX16信号，PCIE信号到达连接器，被分成两路X8信号，分别经过高速连接器的正交区和非正交区，I/O模块有两个端口，一路PCIEX8信号正交直连到后面的一个I/O端口，另一路经由中背板非正交连到另外一个端口，通过正交与非正交两个PCIE X8组合的方式，计算节点与I/O模块PCIE X16的正交与非正交连接，实现了 I/O模块和服务器节点之间的相互独立，同时支持X16的PCIE走线，满足了新一代Infiniband的技术要求。
【专利摘要】本发明提供一种面向云服务器应用的多I/O高密度多节点服务器系统设计方法，系统架构由计算节点、系统中背板、I/O模块、电源组成。系统可最多可支持20个节点，每个计算节点都是一个独立的计算单元。I/O模块是一种可插拔的外设模块，最多可支持5个。每个I/O模组内配有2块I/O板，每个I/O板上有2个PCIE插槽，可外插PCIE卡，I/O板通过高速连接器与系统中背板相连。发明为云服务器体系结构的模块化提供了一种高效可行的实现方法，必将广泛地用于未来的云服务器架构设计中。
【IPC分类】H04L29-08
【公开号】CN104580527
【申请号】CN201510055010
【发明人】王辉
【申请人】浪潮电子信息产业股份有限公司
【公开日】2015年4月29日
【申请日】2015年2月3日