数据中心的建设经验杂谈

服务器 数据中心
数据中心的建设是个复杂的过程,从初期需求收集到中期产品选型到后期资金的分配,再到最终的测试验收,每一部分都有自身的规律。数据中心建设又是一个长期的过程,通常从需求收集到最终交付要2-3年的时间,并且需求是会随时间而变化的。怎样让数据中心在建设过程中满足不断变化的需求,并且能让新数据中心有一个更长的生命周期,是摆在面前的一个现实问题。

数据中心的建设是个复杂的过程,从初期需求收集到中期产品选型到后期资金的分配,再到最终的测试验收,每一部分都有自身的规律。数据中心建设又是一个长期的过程,通常从需求收集到最终交付要2-3年的时间,并且需求是会随时间而变化的。怎样让数据中心在建设过程中满足不断变化的需求,并且能让新数据中心有一个更长的生命周期,是摆在面前的一个现实问题。

有幸参与建设了一个中等规模的金融类数据中心。从数据中心建设全过程中,积累了一些小的经验和大家分享一下。

从最初的需求收集阶段谈起,当时摆在面前的问题有很多。首先,需求的收集和数据中心建成的交付日是有2-3年的时间,这个时间需求是会有变化的;从三年前的只有小型机、高端存储、机架式服务器的部署需求;到现在的小型机逐渐要被机架式服务器集群所取代,存储也可以是中低端产品;从我们不会用刀片式服务器,到现在刀片式服务器要大行其道。这些给新建数据中心建设带来是每机柜的容量的变化,非标准服务器区和标准服务器区比例的变化。需求的变化也要求机房设计能动态的适应。还有怎样选择产品既能保证高可用性,又兼顾灵活性。灵活的设备部署是我们能解决这些问题***的办法。怎样让主机房区具备更加灵活能力,是我们是通过把需求的动态变化转换成对主机房区的配电容量、制冷、综合布线三个维度的产品选型来解决的。这样衍生出来三个问题。一、机柜的配电怎么配才合适,低密度区和高密度区怎样分配才合理?二、机柜制冷怎样才能满足变化的容量要求?三、综合布线怎样满足长远的规划要求?解决了这三个问题,就解决了需求变化的要求。

而这三个问题最关键的是配电。还好在产品选型时我们发现了轨道式母线配电这个好东西。轨道式母线配电系统让我把机柜配电思考方式转变了一个角度,我们定义的机柜配电容量不再是以每个机柜的容量来定义,而是按照每列机柜的总容量来定义的。以一个原来单个机柜容量是3KW的机柜为例:一列有14个标准机柜,每列机柜的容量是3KW,现在我可以为每列机柜配置两条250A容量的轨道式母线,根据机柜实际容量选取不同规格的母线接插单元,把轨道式母线的总容量当作一个池子,可局部分配给一个机柜5KW甚至8KW的容量接插单元。这样一来我配电的方式由原来的以机柜为单位的配置,升级到了以列为单位的配置;原来需要区分低密区、高密区,我现在统称为“混合密度区”。很简单的做到了高低密度区相间。这样我的机柜在容纳设备时就更从容,2U-4U的机架式服务器可以放,4U的刀片式服务器也可以放,小型机也可以放。只需要控制整列机柜的总配电容量即可。

第二个问题是制冷,机柜单位密度的变化带来的问题制冷的有效性,我采用封闭冷通道的办法来统一解决。封闭冷通道后,我单个机柜的容量达到8KW也不会存在过热问题。如果存在局部热点我可以通过增加冷通道地板风扇的方法来解决。这样一来我每机柜可承载的服务器数量即使动态变化,制冷也不会存在问题。2U的机架式服务器,4U的机架式服务器的数量也随者机柜容量的弹性变化而变化。由于母线的接插单元是可以带电热拔插的,我们可以根据CFD的检测来调整不同密度的机柜位置,让母线的接插单元随着机柜走,有效利用整个模块空调的送风系统。

***一个问题是,布线的数量多少是合理的?光缆铜缆的比例是多少?毫无疑问光缆替代铜缆是趋势,40G也是未来发展的方向。但同样的问题,新数据中心既要兼顾原有老旧设备的网络物理链接需要,也要兼顾未来发展。我们不能在铜缆上跑40G;也不能在光缆上跑100M;更不能因增加一部分设备而重新布一次线。布线系统和网络系统的融合是必不可少的,新一代数据中心的网络构架也是必不可少的。我们最终的解决方案是以思科的Nexsas7000、5000、2000构架作为骨架,以结构化布线作为肌肉搭建了我的数据中心网络平台。在柜内用Nexsas2000作为柜顶交换机,解决柜内光铜混合连接问题;在列中用Nexsas5000作为汇聚中心;用Nexsas7000作为模块网络核心。在局部需要线缆数量多的区域,可以用预端接线光缆+Nexsas2000快速部署布线的数量,解决局部问题。

总结我们的数据中心建设,作为一个中型的金融类数据中心,在注重高可用的前提下留给我们灵活性的余地就很少了,当然模块化建设在不同类型的数据中心的理解是不一样的。怎样能让新建的数据中心有更长的生命周期也是我们追求的目标。还好数据中心的产品供应商给我们提供了这么多可选择的新产品,能让我们实现一些想法,来提高我数据中心的利用率,从而变相延长整个数据中心的生命周期

责任编辑:何妍 来源: 机房360
相关推荐

2012-03-12 10:51:41

数据中心灾难备份

2011-07-04 11:08:52

数据中心机房建设扩容

2017-01-07 11:00:05

阿里万国数据数据中心

2023-03-10 10:20:13

数据中心服务器

2015-11-03 11:29:56

2009-09-28 10:38:47

2014-03-31 17:41:17

云数据中心云计算

2015-06-10 15:36:51

数据中心

2021-09-13 13:33:07

数据中心数据中心架构数据中心网络

2018-07-18 10:07:51

数据中心机房维护

2013-12-16 14:16:05

数据中心

2015-07-09 09:35:26

2015-10-16 17:59:24

数据中心建设

2014-04-09 13:33:13

云数据中心云计算云应用

2022-05-12 14:44:38

数据中心IT云计算

2013-04-10 15:46:57

绿色数据中心数据中心

2015-10-26 09:47:17

云服务数据中心

2015-11-03 16:16:03

数据中心建设羊群效应

2016-06-01 15:07:57

数据中心

2010-06-28 13:48:32

中心数据中心建设
点赞
收藏

51CTO技术栈公众号