“怪异”的内存架构设计

    “怪异”的内存架构设计 

    至强5500相对于上一代5400最大的区别之一就是内置了内存控制器，并且是3路的DDR3内存。而这个3路的设计，也使5500服务器在内存架构设计上，有了一些约定俗成的东西。

    从上图可以看出，三通道内存设计在提供了无与伦比的带宽性能外，也对DIMM的数量提出了新的要求。传统的双通道时代，在设计DIMM时一般都是2的倍数，而这次每个CPU有3条DIMM，对于双路服务器而言，就意味着DIMM的数量应该是6的倍数，即6、12、18个。因为只有这样才能完全利用上3通道的带宽，但至强5500上，Intel给出了更为灵活的内存搭配设计，从而也给厂商们提供了更为广阔的设计方案，5500可以不按通道数量成倍累加DIMM，可是3650 M2的DIMM数量却是16条，不是6的倍数，而且就差两条就是满额的18条DIMM了，在这其他厂商的产品中很少见到，所以的确显得有些怪异。

    从Intel给出的至强5500与内存配置图中可以看出，当通道内的3条DIMM配齐后，容量最大，可速度也最低，能达到最高DDR3-1333速率的只有每通道插一条DIMM的时候。

    但IBM这么设计肯定有它自己的道理，在IBM看来，满配的18条DIMM，在速度上并没有优势，可以说是“有价无市”，而6条DIMM的设计，在速度上最优，可容量扩展也将受到限制，所以12条DIMM是IBM比较推崇的，但为什么要做到16条呢？下面这个图则给出了清晰的解释。

    出于系统的高可靠与高可用性考虑，IBM认为有必要为用户保留内存镜像的功能，即两路内存互为镜像（Mirror）或进行精确同步（Lockstep），以保证内存的绝对可靠，但这个时候就要废掉一个通道（三个通道无法进行相互镜像），这样16条DIMM较12条DIMM所多出来的4条DIMM就可以满足这个需求，虽然此时的速率只能到DDR3-800，但也最大限度满足了容量的需求。

    虽然Mirror与Lockstep应用并不常见，可从IBM在这个设计来看，显然是经过深思熟虑的，也让“怪异”的设计变得合情合理，更给用户提供了高级的应用功能选择，同时也尽可能的节省了成本。