48V架构在数据中心的突起——记谷歌数据
在年3月9日的OCP(OpenComputeProject)峰会上,谷歌宣布加入OCP同盟,并贡献了其48V整机柜解决方案,根据会议相干资料,笔者做了简单整理,供国内同行学习研究时参考。
谷歌高级副总裁UrsHolzle介绍了谷歌数据中心能效发展之路:
开始提倡采取高效率PSU(PowerSupplyUntits,电源部件)
12V高效率PSU正式落地
开始采取集装箱来建设数据中心
将铅酸电池安装到了服务器主板上,12V板上UPS供电架构落地
范围建设仓储式数据中心,并将UPS电池移出服务器托盘
举行了高效数据中心行业峰会
举行了欧洲数据中心能效峰会
第一代48V供电架构,机柜级采取48V,但仍采取12V输入的服务器主板,通过机柜内DC/DC降压到12V,最后再进一步降压到CPU的POL节点
举行了绿色互联数据中心峰会,并改进到了第二代48V机柜和UPS,第二代48V机柜和第一代不一样的地方是服务器主板直接支持48V,并直接从48V降压到CPU的POL节点,减少了12V中间转换环节,效力更高,本钱更低
第三代48V供电架构采取锂离子电池包,替换掉原来使用的铅酸电池
宣布和OCP合作,并贡献了其48V整机柜架构给OCP
从上述谷歌数据中心能效发展之路上看,谷歌在不断优化并精简其数据中心的供电架构,从最早的定制高效率PSU,去掉机房级UPS,将UPS搬到服务器主板上,提升供电效力并减少机房级UPS投资及消耗;随着服务器机柜功率不断增加,和进一步下降能耗,谷歌转而采取了48V供电架构,在这个方向变化进程中,中间还过渡有12V中间转换环节的阶段,直到年才实现了从电到48V再到CPU的极致精简架构,去掉了机房级UPS,去掉了机柜级48V到12V的二次转换,并在服务器主板级实现了48V到CPU的单级变换,最后在年最后将铅酸电池替换成锂电池,终究实现了最新的48V整机柜架构。
图1是在OCP峰会上谷歌介绍的48V机柜资料。
谷歌这个半柜高度48V供电整机柜的几个特点:
1采取48V供电POL架构比起传统的12V服务器架构下降了30%以上的能耗,大大下降了全球云数据中心的能耗;
2采取了定制的48V供电POL服务器,所有服务器供电均来自整机柜后侧的48V母线排,采取48V母线也可以支持未来单机柜功率密度增加到50kW以上
3将48V电源插框放到机柜顶部,将48V锂电池放到了机柜底部,估计是担心服务器温度影响电池寿命
4采取了48V供电的TOR交换机,由两个较小的48V电源给交换机供电,其实可以不用单独配置
5POL服务器采取了混搭的方式,部份可能为CPU节点,GPU节点,或存储节点等任何配置
6小于2U高度的PSU插框里边有8个48V的插槽,安装了6个PSU电源模块,斟酌5用1备和UPS充电功率,参考了行业典型的3kW高效率电源模块,估计半机柜负荷大约在12到14kW的峰值功率,全部机柜中两套UPS的功率将翻倍。
748V的UPS电池也是模块化设计,可以根据IT功率和备电时间来选择需要的模块电池数量,图1(a)满配时可以支持多达10个电池包
8谷歌已大规模使用这个技术多年,技术上非常成熟,效力很高，本钱上也得到明显下降
图1(b)是谷歌贡献给OCP的48V机柜,有以下几个特点:
121英寸的内宽,可以支持各种类型的服务器,但可能在机柜深度方面比通用OCP机柜更短,以便在数据中心内可以安装更多机柜列
2可以安装在各种类型的数据中心内，满足各种用户和部署在全球各地的数据中心内使用
3冷通道保护,前面两侧可安装线,或可选的48V直流PDU(电力分配单元)
448VUPS插框安装在机柜的中部,大约2U的高度为电源空间(不含电池),配置6个PSU模块,如果采取3kW的典型48V电源模块,则可以支持最大15kW的机柜
5由于采取了机柜内的UPS架构,机房级直接采取市电直供,由机柜顶部的母线排直接给整机柜供电,即插即用,供电架构非常简单和扁平,效力和本钱较优
6如果其他用户的服务器依然采取12V输入的主板,那也可以通过在这个48V机柜内增加一个48V转12V的DC/DC变换器来满足原有12V输入服务器
7目前谷歌已和facebook对这个新的机柜和48VUPS技术准备一个新的规格提交给OCP审批，给行业增加更多的选择。
上述简单分析了该48V整机柜的特点，该整机柜自带48V锂电池BBU，不再需要机房级的UPS，配电结构非常精简，可以大大减低投资和系统能耗，下面做一下48V整机柜架构和传统UPS供电架构的简单能效比较。
采取传统的UPS供电架构,每台服务器自带PSU的传统系统，从电到12V服务器主板,大约有22%的能耗被浪费了，传统UPS架构下即使采取目前高效率的供电系统，市电到服务器的12V主板也会有6.4%的能耗浪费。
而采取谷歌推荐的48V整机柜供电架构，不再需要UPS和复杂变配电单元，市电直接给到整机柜来供电，市电到服务器主板的典型消耗为7%，目前业界领先水平可以控制在4%之内的消耗。
因此二者比较下来,采取市电直供48V整机柜带BBU电池包的供电架构比采取传统UPS带12VPSU的机架式服务器供电架构,从电到服务器主板典型的系统能节能量为15%。图2给出了传统UPS供电架构和传统48V整机柜供电架构的供电能效。
再看一下服务器主板到CPU的供电路径上,采取12V主板和48V主板能耗的比较,这里以数据中心所采取的典型Vicor公司产品为例来计算,分别比较机柜级PSU整流模块效力、12V和48V方案在服务器主板上的传输消耗,和12V或48V到CPU、RAM等的降压POL电源的综合效力。从AC/DC电源的输出端经过连接器,传输路径,再经过转换最后输送到处理器。对整体效力来讲,传输路径上的消耗也不容忽视。图3是从AC到CPU的全路径状态。
表1为谷歌在OCP峰会上发布的效力比较。特别指出,在采取48V的供电架构路径上的消耗将更进一步减少。
从表1可以计算得到,采取48V供电的整体消耗为7.9%,而采取12V传统架构的消耗为10.7%,消耗减少超过30%。
图4给出Vicor的48V架构称为FPA(FactorizedPowerArchitecture),由两个部份构成。前端为采取升降压拓扑结构的预稳压模块(PRM),提供稳定的Vf母线电压,输出电压会根据负载的变化快速响应。后端为采取专利正弦幅值变换器(Sineamplitudeconverter)的电压变压模(VTM),将Vf母线电压转换到负载点电压,其工作特性为理想变压器,可以将能量存储在高压侧电容,从而极大减少负载点的大电容。VTM采取零电压、零电流的软开关技术,工作频率高达2MHz以上,具有领先的功率密度,Intel实验室的测试表明,其噪声比传统12V的UR低一个数量级,因此可以放置在非常靠近CPU的地方,进一步减少电源输出端到CPU电源引脚间的功率消耗。
采取AC-12V-1V的方案不管是PSU整流模块的效力,还是服务器主板上的传输消耗,和降压POL电源的效力都低于采取AC-48V-1V的供电架构,采取12V母线架构下12kW整机柜仅在传输消耗上就到达了W,占了将近4%的能耗。12kW的机柜在12V输出下电流高达A,因此即使1mΩ的传输阻抗都会带来1kW的能耗(固然也可以通过采取更大尺寸的铜排来下降传输阻抗,但会带来更大的体积和更高的本钱),而一样的负载功率下采取48V供电架构,电压提升了4倍,电流下降为原来的四分之一,传输消耗得到很大下降。
从图5可以看到传统的方案和VicorFPA方案的一些简单比较情况。
因此对大功率的整机柜,如果仍采取12V的中间母线架构,会带来很大的传输消耗,如果单机柜功率在8kW之内,消耗的问题还不太明显,但如果机柜功率到达了12kW以上,这个传输消耗问题就会变得比较严重,而48V母线架构可以支持单机柜功率高达30kW以上,具有很好的未来扩展性并大大下降了传输消耗。图6给出了AC-V和AC-V的传输消耗。
随着高性能计算,和GPU等运用发展,未来的服务器功耗将不断增加,如果单机柜功率在10kW以下,12V母线还能委曲应对,但随着机柜功率的不断增加,12V母线带来的消耗,和压降将成为难以承受之重,因此未来机柜内母线电压一定会往48V方向发展,特别是在HPC等高性能计算场合。
随着谷歌公司宣布加入OCP,并且将其48V贡献给OCP的消息一经发布,马上有知名芯片厂商宣布对48V到POL负载点的支持,并且发布相应的芯片。这1消息已极大增进了48V产业链的生态完全,表明在数据中心供电架构上在稳步朝着48V的方向前进。我们已看到有国内服务器厂商已推出了关于48V直流输入的服务器验证机,相信随着谷歌加入OCP增进这个产业生态的发展,将来会有愈来愈多的服务器及络装备等支持48V的整机柜生态。
最后,将有可能在数据通信领域看到如图7所示的电源发展趋势。
文章来源:UPS运用
白癜风皮肤病儿童白癜风的早期症状