apple i cloud dc
DESCRIPTION
勝手にAPPLE iCloud データセンターの内部を想像してみました。TRANSCRIPT
iCloudiCloudiCloudiCloudData CenterData CenterData CenterData Centerを解剖を解剖を解剖を解剖
(勝手に想像)(勝手に想像)(勝手に想像)(勝手に想像)
sugipoohsugipoohsugipoohsugipooh
AppleAppleAppleAppleは使っているのか?は使っているのか?は使っているのか?は使っているのか?Mac Mac Mac Mac mmmmini Server ini Server ini Server ini Server 特長と特長と特長と特長と熱対策熱対策熱対策熱対策
StudioMilehighStudioMilehighStudioMilehighStudioMilehighさんのブログさんのブログさんのブログさんのブログMacminiMacminiMacminiMacmini分解&改造から分解&改造から分解&改造から分解&改造から
http://homepage.mac.com/milehigh/milehigh/mini/25_mid2011/mid2011.html
http://homepage.mac.com/milehigh/milehigh/mini/32_ram16gb/ram16gb.html
16GB!
MacMacMacMac mini Server mini Server mini Server mini Server をををを高密度実装したら?高密度実装したら?高密度実装したら?高密度実装したら?
Mac mini を預かってくれるコロケーションサービス
http://www.macminicolo.net/facility.html
ラスベガス スイッチコミュニケーションDC内
Mac mini を預かってくれるコロケーションサービス
$35 って?・回線使用料・電気代・管理サービス料
日本事情で大きく違うのは土地代が高い?1ラックに、何台搭載出来る?
・サイズ・積み重ね・消費電力・冷却・回線
など、コストを考えてみます。
http://www.apple.com/jp/macmini/environment.html
最大消費電力 85W電源効率 89%
AC100Vで使用すると電源効率が5%以上悪化
プロセッサプロセッサプロセッサプロセッサ2.0GHzクアッドコアIntel Core i7、6MBオンチップ共有三次キャッシュ
プロセッサプロセッサプロセッサプロセッサ2.3GHzデュアルコアIntel Core i5、3MBオンチップ共有三次キャッシュ
モバイル用i7、i5を搭載している。I7のTDP45W、ファン、メモリ、HDDなどで起動時85W以下として
定常は、Mac mini Server 1台の消費電力は 50Wとみなせる。
http://www.intel.com/jp/products/processor/corei7/mobile/index.htm
棚の上に 168台
PUE=2.2以上だから 1台50Wとして
1ヵ月電気代は、50W×2.2(PUE)×24時間×30日÷1000×22円=1,742円場所代、回線料、人件費や経費を入れると$35は適正かと。
新型省電力サーバーであれば120台でも30A
ラック内に仕切りを設置
温風が給気側に戻らない
空調効率改善の秘訣
ヒートシャッターヒートシャッターヒートシャッターヒートシャッター
排気が戻らないと吸気側温度は、気温以上に、上昇しない。
<<<< 40℃℃℃℃最新サーバーは、40℃でも稼働出来る
床
天井ヒートシャッター
ヒートシャッター導入
床下から天井まで、ヒートシャッターで仕切ります。
アイルキャッピング完成
PUE=1.65以下にはなるので、
1ヵ月電気代は、50W×1.65(PUE)×24時間×30日÷1000×22円=1,307円
毎月の電気代が、1台435円も安くなる!!
http://www.apple.com/jp/macmini/specs.html
排気口
給気
排気http://www.apple.com/jp/macmini/
給気
給気
給気と排気
50Wを換気するのにこのファンは?CFM
10~15CFM
高さ5U 1段11台1ラック 77台
50W×77=3,850W
HUBを入れて
4KVA契約
1ラック両面実装 156台 8KVA契約
2,340CFM
1Uトレイに Mac mini 8台
435mm
900mm
36U で 288台も搭載出来るが、
風が流れないので実装出来ない
AC220V
イーサネット
引き出しトレイに Mac mini 4台
高さ6Uに10列×4台36U に 6段 = 240台
900mm
1ラック 240台 12KVA契約
4200㎥/h ÷ 60 = 70 ㎥/min× 35.31 = 2470 CFM
大型軸流ファン
三菱電機製
1ラック 240台 12KVA契約
3,600CFM
ファンΦ50cm
アップルアップルアップルアップル
環境報告書環境報告書環境報告書環境報告書
AppleAppleAppleAppleは慎重に環境影響を管理するは慎重に環境影響を管理するは慎重に環境影響を管理するは慎重に環境影響を管理する私たちの施設で、にもかかわらず、彼らはわずか私たちの施設で、にもかかわらず、彼らはわずか私たちの施設で、にもかかわらず、彼らはわずか私たちの施設で、にもかかわらず、彼らはわずか2222%を占める%を占める%を占める%を占める私たちの評価温室効果ガス排出量。残りの私たちの評価温室効果ガス排出量。残りの私たちの評価温室効果ガス排出量。残りの私たちの評価温室効果ガス排出量。残りの温室効果ガス排出量は、生産、輸送、から来た温室効果ガス排出量は、生産、輸送、から来た温室効果ガス排出量は、生産、輸送、から来た温室効果ガス排出量は、生産、輸送、から来た使用して、製品のリサイクル。使用して、製品のリサイクル。使用して、製品のリサイクル。使用して、製品のリサイクル。
アップルと環境アップルと環境アップルと環境アップルと環境2006200620062006年以来、年以来、年以来、年以来、AppleAppleAppleAppleは評価することによって、総合的に環境負荷を報は評価することによって、総合的に環境負荷を報は評価することによって、総合的に環境負荷を報は評価することによって、総合的に環境負荷を報告しています告しています告しています告しています出荷されるすべての製品に関連付けられたフルライフサイクルの温室出荷されるすべての製品に関連付けられたフルライフサイクルの温室出荷されるすべての製品に関連付けられたフルライフサイクルの温室出荷されるすべての製品に関連付けられたフルライフサイクルの温室効果ガス(効果ガス(効果ガス(効果ガス(GHGGHGGHGGHG)の排出量。)の排出量。)の排出量。)の排出量。我々は、総排出量の限り我々は、総排出量の限り我々は、総排出量の限り我々は、総排出量の限り98989898%が温室から来ていることを知っている%が温室から来ていることを知っている%が温室から来ていることを知っている%が温室から来ていることを知っている生産、輸送、使用、および製品のリサイクルから放出されるガス。生産、輸送、使用、および製品のリサイクルから放出されるガス。生産、輸送、使用、および製品のリサイクルから放出されるガス。生産、輸送、使用、および製品のリサイクルから放出されるガス。
当社施設は私たちの当社施設は私たちの当社施設は私たちの当社施設は私たちのGHGGHGGHGGHG総排出量の総排出量の総排出量の総排出量の2222%を占めています。と一致す%を占めています。と一致す%を占めています。と一致す%を占めています。と一致するるるる我々の業界のリーダーシップの役割、我々の業界のリーダーシップの役割、我々の業界のリーダーシップの役割、我々の業界のリーダーシップの役割、AppleAppleAppleAppleは慎重に環境への影響をは慎重に環境への影響をは慎重に環境への影響をは慎重に環境への影響を管理する管理する管理する管理する世界中で日常の操作は、我々はエネルギーに大きな投資を行う世界中で日常の操作は、我々はエネルギーに大きな投資を行う世界中で日常の操作は、我々はエネルギーに大きな投資を行う世界中で日常の操作は、我々はエネルギーに大きな投資を行う効率とクリーン技術ソリューションを提供しています。私たちの環境、効率とクリーン技術ソリューションを提供しています。私たちの環境、効率とクリーン技術ソリューションを提供しています。私たちの環境、効率とクリーン技術ソリューションを提供しています。私たちの環境、健康、安全(健康、安全(健康、安全(健康、安全(EHSEHSEHSEHS))))管理システムは、規制や企業との継続的な遵守を確保することができ管理システムは、規制や企業との継続的な遵守を確保することができ管理システムは、規制や企業との継続的な遵守を確保することができ管理システムは、規制や企業との継続的な遵守を確保することができますますますますすべてのアップルの設備全体の規格。すべてのアップルの設備全体の規格。すべてのアップルの設備全体の規格。すべてのアップルの設備全体の規格。
このレポートには、を含むこのレポートには、を含むこのレポートには、を含むこのレポートには、を含むAppleAppleAppleAppleの世界的な施設の環境影響を、ドキュの世界的な施設の環境影響を、ドキュの世界的な施設の環境影響を、ドキュの世界的な施設の環境影響を、ドキュメントメントメントメントアップル小売店、企業のアップル小売店、企業のアップル小売店、企業のアップル小売店、企業のRRRR&&&&DDDD施設、操作やデータセンター、そしてそ施設、操作やデータセンター、そしてそ施設、操作やデータセンター、そしてそ施設、操作やデータセンター、そしてそれれれれエネルギーと水消費量を削減するための方法の下で活動を強調し、エネルギーと水消費量を削減するための方法の下で活動を強調し、エネルギーと水消費量を削減するための方法の下で活動を強調し、エネルギーと水消費量を削減するための方法の下で活動を強調し、無駄を生成します。無駄を生成します。無駄を生成します。無駄を生成します。
メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター(1)(1)(1)(1)
メイデン施設のエネルギー効率に優れたデザイン要素は、次のとおりです。メイデン施設のエネルギー効率に優れたデザイン要素は、次のとおりです。メイデン施設のエネルギー効率に優れたデザイン要素は、次のとおりです。メイデン施設のエネルギー効率に優れたデザイン要素は、次のとおりです。・・・・10400104001040010400 kWhkWhkWhkWhを転送することにより、冷却効率を向上させるために冷水を転送することにより、冷却効率を向上させるために冷水を転送することにより、冷却効率を向上させるために冷水を転送することにより、冷却効率を向上させるために冷水····ストレージストレージストレージストレージ····シスムシスムシスムシスム・電気消費時間帯を・電気消費時間帯を・電気消費時間帯を・電気消費時間帯をオフピークオフピークオフピークオフピーク・霧吹き・霧吹き・霧吹き・霧吹きエコノマイザーエコノマイザーエコノマイザーエコノマイザーによるによるによるによる空気冷却空気冷却空気冷却空気冷却 フリークーリングフリークーリングフリークーリングフリークーリングの使用の使用の使用の使用・夜間・夜間・夜間・夜間と涼しい天候時間と涼しい天候時間と涼しい天候時間と涼しい天候時間は、は、は、は、チラーチラーチラーチラー稼働稼働稼働稼働時間時間時間時間をををを75757575%以上オフする。%以上オフする。%以上オフする。%以上オフする。・・・・冷たい空気の封じ込めポッドの冷却配布を管理冷たい空気の封じ込めポッドの冷却配布を管理冷たい空気の封じ込めポッドの冷却配布を管理冷たい空気の封じ込めポッドの冷却配布を管理している(コールドアイル)している(コールドアイル)している(コールドアイル)している(コールドアイル)・・・・可変速ファンは、正確にサーバー可変速ファンは、正確にサーバー可変速ファンは、正確にサーバー可変速ファンは、正確にサーバーへ必要なへ必要なへ必要なへ必要な空気空気空気空気がががが流れ流れ流れ流れるるるるように制御ように制御ように制御ように制御されている。されている。されている。されている。・・・・電力損失を低減することにより効率を向上させる高電圧電力損失を低減することにより効率を向上させる高電圧電力損失を低減することにより効率を向上させる高電圧電力損失を低減することにより効率を向上させる高電圧配電を行っている配電を行っている配電を行っている配電を行っている。。。。・・・・最大最大最大最大限、限、限、限、太陽光太陽光太陽光太陽光をををを反射反射反射反射させるさせるさせるさせるためためためためのののの、白い涼しい屋根のデザイン。、白い涼しい屋根のデザイン。、白い涼しい屋根のデザイン。、白い涼しい屋根のデザイン。・・・・高効率高効率高効率高効率な、な、な、な、モーションセンサーと組み合わせたモーションセンサーと組み合わせたモーションセンサーと組み合わせたモーションセンサーと組み合わせたLEDLEDLEDLED照明。照明。照明。照明。・運転・運転・運転・運転中中中中は、は、は、は、リアルタイムリアルタイムリアルタイムリアルタイムにににに電源監視と分析電源監視と分析電源監視と分析電源監視と分析を行っているを行っているを行っているを行っている。。。。・・・・サイトサイトサイトサイト500500500500 kmkmkmkm以内以内以内以内からからからからリサイクル素材をリサイクル素材をリサイクル素材をリサイクル素材を14%活用、近隣から資材を14%活用、近隣から資材を14%活用、近隣から資材を14%活用、近隣から資材を93939393%購入%購入%購入%購入
金物も近隣から金物も近隣から金物も近隣から金物も近隣から41414141%%%%調達。調達。調達。調達。
メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター(1)(1)(1)(1)
メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、次の次の次の次の通り通り通り通りです。です。です。です。
・・・・10400104001040010400 kWhkWhkWhkWhを転送することにより、冷却効率をを転送することにより、冷却効率をを転送することにより、冷却効率をを転送することにより、冷却効率を向上させるために冷水向上させるために冷水向上させるために冷水向上させるために冷水····ストレージストレージストレージストレージ····シスムシスムシスムシスム
・電気消費時間帯を・電気消費時間帯を・電気消費時間帯を・電気消費時間帯をオフピークオフピークオフピークオフピーク・霧吹き・霧吹き・霧吹き・霧吹きエコノマイザーエコノマイザーエコノマイザーエコノマイザーによるによるによるによる空気冷却空気冷却空気冷却空気冷却
フリークーリングフリークーリングフリークーリングフリークーリングの使用の使用の使用の使用・夜間・夜間・夜間・夜間と涼しい天候時間と涼しい天候時間と涼しい天候時間と涼しい天候時間は、は、は、は、チラーチラーチラーチラー稼働稼働稼働稼働時間時間時間時間をををを
75757575%以上オフする。%以上オフする。%以上オフする。%以上オフする。・・・・冷たい空気の封じ込めポッドの冷却配布を冷たい空気の封じ込めポッドの冷却配布を冷たい空気の封じ込めポッドの冷却配布を冷たい空気の封じ込めポッドの冷却配布を
管理管理管理管理している(コールドアイル)している(コールドアイル)している(コールドアイル)している(コールドアイル)・・・・可変速ファンは、正確にサーバー可変速ファンは、正確にサーバー可変速ファンは、正確にサーバー可変速ファンは、正確にサーバーへ必要なへ必要なへ必要なへ必要な空気空気空気空気がががが流れ流れ流れ流れるるるるようようようよう
に制御に制御に制御に制御されている。されている。されている。されている。
メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター((((3333))))
メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、メイデン施設のエネルギー効率に優れたデザイン要素は、次の次の次の次の通り通り通り通りです。です。です。です。
・・・・電力損失を低減することにより効率を向上電力損失を低減することにより効率を向上電力損失を低減することにより効率を向上電力損失を低減することにより効率を向上させる高電圧させる高電圧させる高電圧させる高電圧配電を行っている配電を行っている配電を行っている配電を行っている。。。。
・・・・最大最大最大最大限、限、限、限、太陽光太陽光太陽光太陽光をををを反射反射反射反射させるさせるさせるさせるためためためためのののの、白い、白い、白い、白い涼しい屋根のデザイン。涼しい屋根のデザイン。涼しい屋根のデザイン。涼しい屋根のデザイン。
・・・・高効率高効率高効率高効率な、な、な、な、モーションセンサーと組みモーションセンサーと組みモーションセンサーと組みモーションセンサーと組み合わ合わ合わ合わせたせたせたせたLEDLEDLEDLED照明。照明。照明。照明。
・運転・運転・運転・運転中中中中は、は、は、は、リアルタイムリアルタイムリアルタイムリアルタイムにににに電源監視と分析電源監視と分析電源監視と分析電源監視と分析をををを行っている行っている行っている行っている。。。。
・・・・サイトサイトサイトサイト500500500500 kmkmkmkm以内以内以内以内からからからからリサイクル素材をリサイクル素材をリサイクル素材をリサイクル素材を14%14%14%14%活用、近隣から資材を活用、近隣から資材を活用、近隣から資材を活用、近隣から資材を93939393%購入%購入%購入%購入金物も近隣から金物も近隣から金物も近隣から金物も近隣から41414141%%%%調達。調達。調達。調達。
他の世界中のアップル施設他の世界中のアップル施設他の世界中のアップル施設他の世界中のアップル施設
長年アップル施設で実施されている私たちのエネルギー戦略。10年以上にわたりアップルは施設に再生可能エネルギーを購入している。
コーク(アイルランド)、ミュンヘン(ドイツ)、テキサス州オースチンおよびエルクグローブ、カリフォルニア州など。
今日、これらの施設はすでに、一緒に100%再生可能エネルギーで駆動され、これらのプロジェクトは、年間消費量5400万kW以上の価値がある。再生可能エネルギー源として、世界中のアップル関連施設の11%に当たる。
以下のいくつかの例を示します。私たちのコーク施設で、太陽熱温水器は、ほぼ100%を置換
現場の食堂では水の過熱のため使われます。また、さらなるプロジェクトとして、他の再生可能エネルギー使用タイプの
適用性を評価しているリンゴ施設があります。
エルクグローブの施設でLED照明システムは、駐車場で使われています。アップルストアはLED照明技術を看板や照明器具に使っています。
水利用
オースティン、テキサス州、クパチーノの施設での高度な灌漑システムを使用しています。カリフォルニア州地域の気象条件と土壌水分を監視し、調整し、場所の灌漑スケジュール機能が不要な水まきを行っていない。このシステムは40%から水の消費量を減少します。
さらに、サクラメントとクパチーノのサイト(干ばつに強い場所)灌漑をドリップ、再利用により水の要件と使用量を削減します。
シンガポールのAppleの施設で、我々はバスルームの蛇口やその他の備品を変更し、40%、建物全体の水消費量を減少させています。同様の変更をクパチーノの施設で
現在進行中です。
私たちのメイデン(ノースカロライナ州)のデータセンターでは、再利用する革新的な冷却システムを採用し、全体的な水の消費量を20%削減しました。同じ水の35倍。
データセンターでは、現場の灌漑のために雨水を利用できるシステムを使用しています。これにより、さらに全体的な水消費量を減らすことができます。
2011年度に、アップルは水を合計100万㎥を使用していました。
アップルの水消費量削減方法をご注目ください。
・・・廃棄物削減努力の説明が続きます。
iCloudiCloudiCloudiCloudData CenterData CenterData CenterData Centerを解剖を解剖を解剖を解剖
(勝手に想像)(勝手に想像)(勝手に想像)(勝手に想像)
どこどこどこどこ?、?、?、?、どれだけの規模?どれだけの規模?どれだけの規模?どれだけの規模?
内部は?内部は?内部は?内部は?回線遅延対策?回線遅延対策?回線遅延対策?回線遅延対策?
どこ?どこ?どこ?どこ?メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター
どれだけの規模?どれだけの規模?どれだけの規模?どれだけの規模?今年は、3今年は、3今年は、3今年は、3MWMWMWMWぐらいぐらいぐらいぐらい来年来年来年来年 10101010MWMWMWMWぐらいだろうぐらいだろうぐらいだろうぐらいだろう
メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター
内部は?内部は?内部は?内部は? 3つの分かれて3つの分かれて3つの分かれて3つの分かれて 最初のゾーンは、最初のゾーンは、最初のゾーンは、最初のゾーンは、1111,,,,000ラック000ラック000ラック000ラック来年来年来年来年 1111,,,,000ラック000ラック000ラック000ラック 増設。増設。増設。増設。
将来将来将来将来3333倍になるとして倍になるとして倍になるとして倍になるとして 3333,,,,000ラック?000ラック?000ラック?000ラック?
さらにさらにさらにさらに2222ゾーン増設。10ゾーン増設。10ゾーン増設。10ゾーン増設。10,,,,000ラック000ラック000ラック000ラック 1111ラック8ラック8ラック8ラック8KVAKVAKVAKVAとしてとしてとしてとして 80808080MWMWMWMWまでまでまでまで
最初のゾーン
ストレージシステム40ラック 10PB1年に20~50PB増えるとしても10年で1,000ラック程度か?
残りをMac mini で埋めると9,000ラック×240台=216万台
外気導入冷却により 1ヵ月電気代節約 135万台×834円=11億2,590万円(1KWh22円計算)
iCloudiCloudiCloudiCloudは、は、は、は、1111億ユーザー突破億ユーザー突破億ユーザー突破億ユーザー突破・ユーザー認証むずかしそう~・ユーザー認証むずかしそう~・ユーザー認証むずかしそう~・ユーザー認証むずかしそう~・回線遅延対策は、・回線遅延対策は、・回線遅延対策は、・回線遅延対策は、AkamaiAkamaiAkamaiAkamaiを使っているらしい。を使っているらしい。を使っているらしい。を使っているらしい。・・・・AWSAWSAWSAWS、、、、AzureAzureAzureAzureも使っているらしいも使っているらしいも使っているらしいも使っているらしい・新しい・新しい・新しい・新しいDCDCDCDCを西海岸に作るらしい。を西海岸に作るらしい。を西海岸に作るらしい。を西海岸に作るらしい。・・・・FacebookFacebookFacebookFacebookデータセンターを作った人がアップルへ?データセンターを作った人がアップルへ?データセンターを作った人がアップルへ?データセンターを作った人がアップルへ?・オレゴンにアップルが土地を購入?・オレゴンにアップルが土地を購入?・オレゴンにアップルが土地を購入?・オレゴンにアップルが土地を購入?
Facebook ③
http://www.apple.com/jp/macpro/design.html
Mac Pro メモリをたくさん搭載出来る。
44
Ver2仕様 1.5UTwinサーバー
高密度実装サーバー
Facebook ⑮ サーバーVer2
連結しなくても 耐震荷重が大きいラックがある。
Facebook ⑯ 連結強化したラック
Open Compute server triplet racks 1ラック30サーバー
1ラック ファン合計台数は、5×30=150台@20CFM×150=3,000CFMこの写真6ラック 18,000CFM必要
Facebook ⑰ サーバ実装
Facebook ⑧
Server CPU を変更
• ARM16ビットアーキテクチャ
– メモリをたくさん積める
– 省電力
• HP Mooshot
http://h17007.www1.hp.com/us/en/iss/110111.aspx
メイデンメイデンメイデンメイデン((((ノースカロライナ州ノースカロライナ州ノースカロライナ州ノースカロライナ州))))データセンターデータセンターデータセンターデータセンター
ゾーン増設。10ゾーン増設。10ゾーン増設。10ゾーン増設。10,,,,000ラック000ラック000ラック000ラック 1111ラック8ラック8ラック8ラック8KVAKVAKVAKVAとしてとしてとしてとして 80808080MWMWMWMW
最初のゾーン
残りをARMCPUを積んだMac mini Serverで埋めると9,000ラック×1152台
=約1億台
2つめのゾーン
Server CPU を変更
※こんだけ1箇所に集めることは
無いでしょ・・・・・
ご覧いただきありがとうございました。