把旧数据“冷冻”起来 Facebook这是在干吗?

  • 时间:
  • 浏览:22
  • 来源:uu快3官网app_uu快3豹子赚钱

作者:奚晓音

如今,Facebook的数据库中含数十亿的图片,而你肯定无法想像为了存储什么图片是愿因分析消耗掉几条电力。在2013年,Facebook的图片存储系统HayStack一共产生了1EB的数据流量。(1EB=1024PB;1PB=1024TB;1TB=1024GB)这个数字是非常惊人的。人太好什么图片在大多数情形下在被分享几周我想要就很少再会被查看到,我想要Facebook仍然都要保存亲们,我想要都要要确保即使是在硬盘一个劲一个劲出现故障的情形下也要保障图片文件的完整性性。

这就愿因分析Facebook都要在数据中心保存大量的数据,为了保证这个点就都要其提供大量的电力。而Facebook的工程师则巧妙的利用了“负瓦特”,开发了另4个叫石"Cold Storage"的系统。Cold Storage有助允许Facebook数据中心内超过一半的磁盘在任何我想要关机,从而实现大幅降低功耗。现在,Facebook的存储团队正在考虑进一步节约能源,比如将老旧的图像拷入蓝光磁盘内。

某些互联网巨头时会 想法律法律依据改善这个情形——建设本人的数据中心。亲们本人搭建本人的硬件系统,努力使得亲们的数据中心更加环保。另4个多做对亲们来说最直观的益处本来有助降低运营成本,我想要运转起来相对也更加的便捷。很明显,有某些公司在环保方面下的力度很大,其中另4个典型例子本来Facebook。Facebook大量采用本人自家的技术来搭建绿色环保的数据中心,我想要把这个经验开放出来跟亲们共享。Facebook最先进的阿尔图纳数据中心就采用了由廉价交换机组成的网状连接交换架构来提升性能,Facebook称之为下一代的数据中心——Data Center Fabric。这对于提升数据中心的网络性能、降低成本以及提高能效起到了非常关键的作用。

目前Facebook是愿因分析在Prineville及 Forest 另4个中心建设了两套cold storage系统。cold storage系统的每个服务器机柜可容纳1.92 PB的数据。我想要,在完整性架设完毕的情形下,每另4个数据中心还都可否 存储1EB的数据。我想要Facebook在设计时还考虑到了未来。好多好多 系统在规模扩大是愿因分析利用率上升时往往就会一个劲一个劲出现性能下降的问提,而Facebook的这套系统则从一现在开始设计时就考虑到了。Facebook的做法是每次增加容量时,都将软件对现有数据进行再平衡。也却搞笑的话将原有数据分配到新的硬件上,并释放我想要用过的空间。这个过程并不一定实时进行,十分适合用于系统的逐步移植。另4个多既不影响系统的使用,又能逐步将数据迁移到新硬件上。是愿因分析把Cold Storage看作一块大硬盘搞笑的话,这个再平衡的做法就还都可否 视为智能硬盘分类整理应用程序。

冷存储(cold storage)

为了尽是愿因分析降低能耗,Cold Storage 允许服务器不带硬盘一同启动,我想要将由软件来控制其闲时八时。不过另4个多就要求Facebook对Open Vault的存储规范进行修改。Facebook最大的改动本来——每次只允许为每个托盘上的一块硬盘供电。为了处里软件bug错将所有硬盘都供电,愿因分析数据中心保险烧坏,Facebook甚至还专门修改了每一块硬盘驱动器的固件。此外,是愿因分析不都要每次都给所有硬盘供电了,Facebook还通过一系列的优化成功使得机架的存储密度大大增加,与传统存储服务器相比,其耗电不到后者的 1/4。

所有这个切都现在开现在开始8年前,当时Facebook正在着手设计其所处Prineville的第另4个数据中心。Facebook自那时现在开始,本来愿因分析聘用了专门负责可持续发展的董事Bill Weihl,他直接对Facebook的环保工作负责。在此期间,Facebook是愿因分析做了很长时间的实验,来研究何如设计建立用可持续能源来供电的绿色数据中心。

来源:51CTO

而Facebook所处北卡莱罗纳的数据中心仅通过使用自然风制冷,并提高服务器硬件的耐热性能,就打发明者人了PUE能耗带宽单位值仅为1.07的超级绿色数据中心。这个数值也大大超过了Google数据中心PUE能耗带宽单位值——1.12。据介绍,Facebook使用Bin Maker软件分析天气数据,预测出北卡莱罗纳的温度和湿度,我想要通过美国采暖、制冷和空调工程师针灸学会(ASHRAE)的数据来判断是不是 都要使用空调。

当大家提到“可持续发展”这个词语的我想要,第另4个一个劲一个劲出现在你脑海里的肯定无需是数据中心。而实际上,什么有着庞大的计算机组、网络架构以及存储设备的大楼却是典型的耗电大户。愿因分析就在于,为了保障什么设备正常运转,都要要另4个巨型的冷却系统来保证其一个劲在低温情形下运行。它们的配电系统会在这个制冷过程中损失近千瓦的电力。我想要,为了保障设备不受突发情形愿因分析的停电所影响,什么大厦往往还都要配备有备用电池和柴油发电机。而很明显,这两者并时会 什么洁净厂房能源,会严重影响俯近的环境。

此外,Facebook还根据其发布的Open Compute标准开发出了能耐受更高室内温度和湿度的服务器硬件,并通过改善传统数据中心电力供应链来减少在电力转换过程中的能源损失。对传统服务器来说,是愿因分析另4个UPS坏了是愿因分析电源部件坏了,整个数据中心就瘫痪了,而对Open Compute来说,本来某个部分不到继续使用罢了。另外,在维修传统服务器时,维修人员都要将整个服务器拿下来,用工具拆开后才还都可否 修理;而Open Compute则采用了通用电源插座,维修时直接通过滑轨拉出来就还都可否 实现在线维修。为了进一步提高能源使用带宽单位,甚至连数据中心楼道里的灯时会 不到在人通过的情形下才会亮。Facebook在提高数据中心能源使用带宽单位上下的功夫可见一斑。

降低耗电是开发Cold Storage系统的主要目的之一。据介绍这套系统的耗电极低,仅需消耗传统数据中心 1/6的电量。其主要手段本来以空间换功耗——Facebook的数据中心占地面积非常大。我想要随着我想要单盘容量的提升,其存储规模还还都可否 进一步扩大。一同是愿因分析cold storage存放的时会 活跃数据,本来历史数据,好多好多 Facebook还都可否 把冗余电力系统(不间断电源、柴油发电机、备用电池等)也抛妻弃子了,从而进一步提升了能效。

在2012年,纽约时报的一篇报道揭露了IT业数据中心带宽单位低下,耗电量惊人的问提。自此我想要,降低数据中心能耗带宽单位值(PUE)便成了考核数据中心的热门指标之一。(PUE指数据中心总耗电量与IT设备耗电量的比值,这个值越接近1,数据中心的能耗带宽单位就越高)。

提升能源使用带宽单位