厦门超级计算中心(以下简称厦门超算)是厦门市政府于2010年12月批准,由美亚柏科承担的市级重大科技平台项目,是厦门市政府实施十二五科技发展规划,加快城市创新体系建设,提升城市自主创新能力的一项重要内容。作为全国唯一一个由企业进行运营管理的超算中心,它是厦门市乃至海西地区第一个面向社会开放,资源共享,设施一流,功能齐全的高性能计算公共服务平台。全球能效管理专家施耐德电气旗下的APC携手厦门超级计算中心为其打造绿色高性能数据中心,凭借以往在超算领域丰富的数据中心搭建经验,结合厦门超算的实际情况和需求,为其量身定制了包含空调、机柜和电力分配单元在内的InfraStruxure™英飞解决方案,并提供涵盖设计、部署、运营及维护的全生命周期服务。
厦门超级计算中心本着"绿色超算,服务海西"的宗旨服务海西地区的科研机构和企事业单位,一期实现每秒200万亿次的峰值计算能力和500TB的数据存储能力,中心秉承“以企业应用为基础、市场需求为导向”的理念,面向海西地区多个行业及领域提供“云计算”与“超级计算”服务,为地方的信息化建设及经济发展提供强力的支撑。
背景
美亚柏科厦门超级计算中心负责人张旭表示:“在构建超级计算中心时,制冷与配电是数据中心基础设施建设中非常重要的一部分。因为现在的服务器包括机柜,其方案基本是固定的。那么制冷和配电就要根据机房的形状,包括机房产生的热量来选择不同的产品、不同的方案以及不同的实施环境。”
“厦门超算采用全国首例开放式环形机房,让大家能近距离感受超级计算的魅力。但是,这种形式的机房有效面积比方方正正的机房要小一些,而计算热量需求也相应增加,因此对制冷的要求就非常敏锐。”
此外,大数据的出现导致数据中心IT基础设施投入成本加大,虚拟化有助于降低IT基础设施成本,但同时产生的是功率密度大幅提升和随之而来的制冷问题。超算中心需要高密度制冷解决方案,实现高效节能。
数据中心制冷”量体裁衣”
“厦门超算是公共开放计算平台,应用于科学研究、动漫渲染、哈希计算、公共服务、商业金融等多种领域。目前该中心利用率达到80%。在制冷方面,我们主要采用水冷+GPU的混合模式。”
“在建设该超算中心时,经过广泛的市场调研与评估,我们选择与施耐德电气合作,帮助我们进行机房设计、模拟计算,施耐德电气根据我们的需求不断完善方案,并且在整个过程中给予我们很大的信心。首先,施耐德电气在数据中心机房解决方案里的知名度很高,可以提供可信赖的高可靠技术设施方案。其次,由于我们环形机房的特殊性,需要三个月左右的时间进行论证,这期间施耐德电气专业的技术与团队给予了我们很大的支持与帮助,根据我们机房的实际情况,量身定制最适合我们的解决方案。此外,其产品的模块化设计能够为之后的部署和实施带来便利,方便我们后期进行集成,并能大大节约成本。”
高效运维绿色节能
“我们一直倡导绿色节能的超算中心,其具体的量化指标就是PUE(数据中心能源效率)。厦门超算的PUE值在1.5左右,而传统的值是2,所以仅从电费支出这一项计算,我们每年可以节省上百万的电费。”
“在此次项目中,施耐德电气主要为我们超算中心提供了32台机柜和8台行级的冷冻水型空调,结合热通道封闭系统,打造了一个机柜遏制系统的高密度制冷解决方案。冷冻水型相较于传统风冷型更节能,通道遏制系统极大地改善冷热交换的制冷效率,而机柜级的解决方案使得制冷更精确、无遗漏。这种解决方案美观大方,符合超算中心对技术和视觉规划的定位。”
“施耐德电气InRow ACRC103行级空调不仅可以应对10-12kW的IT负载,更可以做到对负载的动态响应,让制冷量可以跟着负载走,使数据中心在各种情况下都能拥有很好的能效表现。此外,我们还采用了InfraStruxure™英飞解决方来进行数据中心的监控管理,案,智能的图形化管理界面可使IT人员能够实时掌握数据中心运行情况,降低管理难度,从而达到节省成本的目的。”
“我们在部署的时候有一套统一的机房管理系统。不管是风冷与水冷系统、配电甚至是机房环境系统,包括服务器,我们都会纳入到统一的管理平台,拥有相应的有专业维护团队和相应的制度。运行了两年的时间,我们在维护方面还是比较顺利的。另外对于水冷空调可以说是我们在机房环境里最担心也是最重视的,这部分除了我们自己的团队有定期的巡检,施耐德电气的团队也会定期来现场做一些检查、确认、包括巡检工作,我觉得是他们的优质服务保障了数据中心这两年地顺利运行。”
打造超算行业高密度制冷典范
“由于物理环境限制,超算行业对运算能力要求日益增加。随着CPU、GPU的升级,运算能力提高的同时提升了密度,这对数据中心基础设施带来了挑战。制冷量更大,要求更精确、更节能与更有效率。”
“我们采用施耐德电气提供的完整数据中心解决方案,实现了全生命周期的管理,打造了绿色节能的超算云计算中心,在最大程度地提升系统运算能力的同时大大降低了系统能耗,实现了节能减排。借助施耐德电气在数据中心能效管理及总体拥有成本等方面的优势,我们可以为企业用户提供传统的超级计算服务,以及新兴的SaaS与IaaS服务。”