Facebookが高効率なデータセンターの仕様を公開 Open Compute Project 発足

http://itpro.nikkeibp.co.jp/article/NEWS/20110408/359257/Datacenter-Electrical-Large.jpg

2011年04月07日,Facebookはパロアルトの本社で開催されたプレスイベントで,同社で培われてきたサーバ効率化技術を公開するOpen Compute Projectの発足を発表した.

Facebookでは最初の自前のデータセンターをOregon州Prinevilleに設立し,データセンターのイノベーションに成功したという.はこの10年間で他社の開発した数々の技術的恩恵を受けているため,同社がデータセンターの開発と運用で積み重ねた経験とノウハウを詳細に公開することで貢献し,公開によるテクノロジーのさらなる発展で再度同社が利益を得ることを望んでいるようだ.

要点

Oregon州Prinevilleのデータセンター
  • 1万3700平方メートル
  • 稼働率99.9999%
  • PUE1.07
  • 業界平均1.5
  • エネルギー効率38%アップ
  • コスト24%ダウン
  • 現在2つ目のデータセンターをNorth Carolinaに建設中
  • 3人のサーバエンジニアが開発
冷却・空調
  • 外気冷却
  • エアコン(冷媒,コンプレッサー,空調配管)なし
  • 霧を噴射して水の気化熱で冷却
  • 外気が低すぎるときは内部の暖かい空気と混合
  • 調整エリアとフィルターシステムを通ってサーバに降下
シャーシ・筐体

http://itpro.nikkeibp.co.jp/article/NEWS/20110408/359257/Chassis-Large.jpg

  • 独自設計
  • 前面や上面のカバーがないオープンな構造
    • 部品の交換が用意になる
    • 材料を22%減らすことに成功
  • サイズは幅480mm高さ66mm(約1.5U)
  • "vanity-free server"
    • 無駄を排除した飾りのないサーバ
    • ネジをも排除
電源
  • 三相交流480V配電
  • サーバへの供給電圧は単相交流227V
    • 標準値の208Vから昇圧
    • 変圧器の損失を11-17%から2%に抑制
  • バックアップバッテリユニットから直流48V入力可能
  • 電源効率は95.4%
  • 電力を12%削減できるUPS(特許出願中)
温度管理
  • 巨大なヒートシンクを設置してCPU冷却効果を高める
    • →冷気の温度を高めに設定できる
    • →消費電力減
  • マザーボードの前部,最背部,CPUに温度センサを設置
  • 背面に60mm程度の大きめな冷却ファンを4個設置
    • センサの温度に基づいて1120rpmから7600rpmまで回転数が可変
マザーボード

http://itpro.nikkeibp.co.jp/article/NEWS/20110408/359257/Intel-Motherboard-Large.jpg

IntelマザーボードXeon 5500/5600シリーズ2ソケットとDIMMスロット18本を装備

http://itpro.nikkeibp.co.jp/article/NEWS/20110408/359257/AMD-Motherboard-Large.jpg

AMDマザーボードOpteron 6100シリーズ2ソケットとDIMMスロット24本を装備

  • AMD Opteron 6100(12コア/8コア)
  • Xeon 5500/5600(2〜6コア)
  • デュアルソケット
  • ハードディスク用のドライブベイ(それぞれ2台のドライブを収容可能)を3つ設置可能
  • 拡張スロットはPCI-eスロットが1本
BIOS
  • 入れ替え可能
    • チップはソケットで装着
    • ネットワークで更新
    • 遠隔からハードウェアリブート可能
  • PCI/PCI-eレーンを無効化可能
  • USBポートも無効化可能
ラック
  • ラックが3つつながった特殊サイズのキャビネット
    • 幅1713mm,奥行914.4mm,高さ2410.27mm
  • 1ラックにサーバ30台
  • 1キャビネットあたりイーサネットスイッチ2台
  • 外気冷却のため密度は上げない
    • 一般のデータセンタより密度は低い
  • 輸送の浪費を少なくするため運送用コンテナに収まるように筐体とサーバを設計
バックアップバッテリ
  • 直流48Vを供給
  • サーバキャビネット2つに対して1つの割合で2つのサーバキャビネットに挟みこむようにして設置される
  • UPSをインラインで接続することはしていない
    • 交直交の変換が電力ロスの原因
照明
  • モーションセンサーで人を感知して点灯するLED照明
Open Compute Project
  • 技術仕様やCADを公開
  • サーバー
  • 電力供給
  • サーバラック
  • 電源バックアップシステム
  • 建築設計
建設協力
プロジェクト参加