当前位置:文档之家› 【高性能计算中心】 高性能计算中心机房设计方案

【高性能计算中心】 高性能计算中心机房设计方案

高性能计算中心机房设计方案目录1.1 总述 (3)1.1.1 设计目标 (3)1.1.2 需求分析 (3)1.1.3 系统特点 (3)1.1.4 高性能机房建设方案 (4)1.2 空调系统 (6)1.2.1 选型分析 (6)1.2.2 空调配置 (6)1.2.3 空调特点与优势 (7)1.2.4 空调性能参数 (8)1.3 机柜系统 (9)1.3.1 机柜配置 (9)1.3.2 机柜特点 (9)1.3.3 机柜规格参数 (10)1.4 机柜配电系统 (10)1.4.1 配电模块配置 (10)1.4.2 配电模块规格 (11)1.5 行级监控系统 (11)1.6 场地条件需求 (13)1.6.1 摆放要求 (13)1.6.2 机房环境 (13)1.6.3 室外场地 (13)1.6.4 UPS (14)1.6.5 电源接入 (14)1.6.6 接地 (14)1.7 配置清单 (14)2高性能计算中心机房设计方案1.1总述1.1.1设计目标高性能计算中心的建设和稳定高效运行,需要一套可靠的信息系统基础设施作为支撑保障,确保高性能计算中心机房各种电子设备的高效、稳定、可靠运行。

本方案提供一套易管理、易维护、便于扩展、高效节能的机柜级制冷、配电、布线及监控系统一体化解决方案,与高性能计算IT设备配套集成一站式服务。

1.1.2需求分析本项目高性能计算中心IT设备总功耗不超过31KW,可用设备装机空间为126U。

根据IT设备功耗及装机空间需求,配置机柜、机柜行级空调、行级配电及监控系统,确保设备散热良好、气流组织有序、系统高效节能、易于控制管理。

1.1.3系统特点本机房方案采用曙光云座C1000系统整体解决方案,提供机柜、空调、配电和监控四个子系统模块整合的一体化方案,做到给用户一个全面的、先进的、功能满足要求的一站式解决方案,并适应高性能计算应用对机房基础设施的节能性、扩展性、智能性及建设周期的新要求。

曙光云座C1000系统具有以下几大优势。

3CloudBase C1000机柜排级机房基础设施系统,是曙光公司为解决高密度刀片服务器散热问题所推出的以机柜排为单位、封闭风道的、以氟利昂为冷媒,包含机柜、配电、制冷、监控等四个子系统的整体解决方案。

C1000机柜排级机房基础设施系统解决了服务器设备高密度安装时产生的散热问题、配电问题、线缆管理问题及监控问题,具有高制冷能力、高可用性、节能等特点。

曙光C1000系统采取机柜排内循环制冷,专门针对IT设备冷却散热,可以有效解决高密度制冷瓶颈,降低机房PUE值、节能降耗,降低对机房环境的依赖。

另外,C1000系统还有智能化的配电管理模块和丰富的监控管理模块,可以统一集成到曙光管理软件平台下监控,实现机房基础设施与IT系统的智能化综合控制管理。

此外,C1000机柜制冷系统和服务器等设备统一为曙光自有产品,机柜在风量、风压、风温上可以实现与服务器的最佳匹配,机柜配套和IT设备均由曙光统一设计,并由曙光统一提供一站式售后服务。

1.1.4高性能机房建设方案机房共配置4个机柜,其中3台设备机柜、1台列头配电机柜、2组行间制冷空调。

机房还需配置相关的机房空调、灭火柜、UPS、电池柜和配电柜等。

各台设备摆放布局见下图4图机房布置图图 C1000系统设备摆放布局51.2空调系统1.2.1选型分析随着新一代计算机的晶体管集成密度越来越高,处理器的速度越来越快,服务器的发热量也急剧增长。

当前,高集成的刀片式服务器已经成为科学计算的主力,刀片式服务器在提供更高密度、更高计算能力的同时也带来了更多的功耗。

对于传统机房开孔地板下送风进行制冷的方式,由于气流难以像电流一样被约束,冷热气流的混合、对流、短路等,均会造成气流组织偏离设计值,从而使部分机柜得不到足够的风量或者机柜内的部分服务器得不到足够的冷量,产生局部热区或热点;而同时又有一部分冷风没有被利用。

这种情况降低了系统制冷的工作效率,浪费电能。

美国采暖, 制冷与空调工程师学会研究得出,这种开放式的精密空调开孔地板下送风进行制冷的机房环境,只能解决约1.100- 1.500 W/m² 的热量。

那么如果按照每个机柜占用3m² 空间计,那么也就是仅可以解决3-5 KW/机柜的热量。

本方案IT设备主要采用高密度刀片服务器,单箱刀片5U高、功耗就高达4~6KW,传统地板下送风方式制冷远不能解决刀片应用的高密度散热需求。

曙光云座C1000系统突破传统制冷概念,采用独立的水平送风制冷空调柜,配合机柜排柜门通道封闭设计,制冷效率高、系统噪音低,冷热通道分离,就近精确送风,可以提供单机柜最高10KW至30KW的制冷能力。

本项目高性能计算中心IT设备制冷采用曙光云座C1000系统氟冷行间空调与柜门封闭机柜实现。

曙光C1000系统采取机柜排内循环、氟利昂制冷,专门针对IT设备冷却散热,可以有效解决高密度制冷瓶颈,降低机房PUE值、节能降耗,降低对机房环境的依赖。

1.2.2空调配置本方案采用曙光云座C1000系统空调为机柜内IT设备制冷,由冷却环境的“冷库”方式转变为冷却设备的“冰箱”方式。

C1000系统效果图见下图。

6图 C1000系统整体效果图IT设备总功耗不高于31KW,共配置2台C1000氟冷空调室内机模块,每台空调提供30kW 显冷量,一共提供60kW显冷量,空调具有除尘除湿功能。

穿插在机柜排中摆放,每台C1000氟冷空调室内机模块显冷量为30KW,机组内部双系统高可靠性设计。

配套配置2台C1000空调室外机,每台室外机内压缩机均为3+1冗余设计,其中3台为定速涡旋压机、1台为数码涡旋压机,数码涡旋压机可以调节冷媒量、有效保证制冷量的稳定输出。

1.2.3空调特点与优势曙光C1000系统,空调机穿插在机柜排中布局,且与机柜为左右并柜布置,空调与机柜的主体框架前后均留有通道设计,机柜排两端安装侧板,机柜排内形成冷热通道分离,正面为冷通道,背面为热通道,气流组织见下图示意,有效避免冷热风混合现象,实现就近精确送风,提高机组的制冷效率。

78图 C1000封闭系统水平送风气流组织机柜和空调前后门形成封闭的冷热通道,冷风由空调前部的风机吹出,分配到两侧机柜的服务器前端,带走服务器产生的热量,之后集中回到空调机柜的后部,通过热交换产生冷风,完成一次循环。

曙光云座C1000系统采用氟冷空调模块左右两侧送风形式,配合机柜排柜门通道封闭设计,冷热通道分离,气流组织有序,就近精确送风,循环风阻小、风量大,提高制冷效率,实现高密度制冷;出风温度设定20-25°C ,与传统下送风空调机相比能效比提高10-15%;全正面水平送风,保证了服务器机柜不同高度进风温度的均衡性,避免了局部热点,延长设备的使用寿命;制冷效率高、系统噪音低,可以解决最高单机柜30KW 的散热需求;空调机并排安装在机柜排中间,占地面积小,节省空间;与机柜一体化设计,外形一致,整体统一、美观。

1.2.4 空调性能参数云座C1000空调 技术规格室内机外形尺寸高2000mm ×宽600mm ×深1365mm 室内机框架尺寸高2000mm ×宽600mm ×深1200mm 全冷量38KW显冷量30KW室内机最大风量7000m3/h室内机自重305Kg温度控制精度±2.5℃室内机电源消耗 2.5KW(建议采用UPS供电)室内机工作电压220V, 50HZ室内机工作温度范围15 °C至30 °C室外机外形尺寸高1772mm×宽1980mm×深880mm室外机电源消耗16.2KW室外机净重600kg室外机运行重量720kg室外机工作电压380V, 50HZ室外机工作温度范围-10 °C至45 °C1.3机柜系统1.3.1机柜配置机房共配置4台C1000机柜,其中3台作为设备机柜、1台作为列头机柜。

机柜采用曙光C1000机柜排封闭机柜,曙光C1000机柜打破传统的网孔门机柜模式,采用独特的主体框架配合机柜排柜门通道封闭方式,机柜自带进回风通道,和行间空调有效结合实现高密度的高效制冷。

1.3.2机柜特点全封闭式机柜,采用冷热通道隔离的方式,配合空调实现高密度制冷;双侧走线单元,方便高度密度线缆有序管理;标配顶部一体化电源/数据线槽,更方便于走线;精心设计的走线方案有效减少线缆占用空间,保证系统散热;表面采用静电粉末喷涂处理,效果美观;9强度高、重量轻、结构坚固。

1.3.3机柜规格参数云座C1000机柜技术规格框架尺寸高2000mm×宽600mm×深1200mm外形尺寸高2000mm×宽600mm×深1365mm有效空间42U立柱安装孔中心距465.1mm±1.6mm立柱间开裆尺寸451mm前后立柱间距650mm(服务器导轨、托轨安装距离需按此制作)立柱方孔尺寸9.5mm×9.5mm自重173KG总载承重1000kg(静载)1.4机柜配电系统1.4.1配电模块配置曙光C1000系统采用机柜排列头配电模块PDM实现配电分散控制,机柜区域的配电由机柜列头配电模块PDM分配给各个机柜配电单元PDU和空调室内机,便于控制管理。

共配置1台列头配电模块、6根机柜PDU,PDM放置在机柜中机架式安装。

PDM通过IEC309工业连接器与机柜PDU可靠连接,机柜的配电线缆通过工业连接器安全可靠的给机柜内电源插排供电。

PDM放置在列头配电机柜中机架式安装,每个机柜后部配电通道分别挂接两条PDU。

10图 PDM与PDU连接示意图1.4.2配电模块规格PDM配置:输入端三相200A空开,配置防雷开关及防雷模块,输出配置14位IEC309 32A 3P+ E+N输出插座、4位IEC309 16A 2P+ E输出插座、14位三相32A空开、4位单相25A 空开,具备输入电量(包括有功功率、无功功率、功率因数、电压、电流和电度)及各路输出电流监测功能,具备主输入防浪涌保护功能,具备RS485接口。

PDU(电源分配单元),是专为机柜内服务器等设备提供电力分配的机柜专用电源分配单元。

相对于普通插座,PDU具有安全质量好、承载功率大、插座制式种类多、功能齐全、使用方便、智能化管理等多方面的优点。

PDU总容量三相32A,每PDU含15位10A C13插座+12位16A C19插座、3个32A单相空开,含1个32A 3相5芯 IEC60309工业连接器,垂直免工具安装,用于刀片设备机柜的大容量配电。

1.5行级监控系统配置一套曙光机房基础设施监控管理系统(IMMS),IMMS监控系统可以和集群管理系统Gridview融合到统一平台管理,工作方式为:数据收集收集探测器上传的信号,收集器将数据整合转发至上层软件,通过上位机进行告警及操作设置,实现与IT设备在同一监控平台下统一管理。

相关主题