電源10KVA

空調6KW

欲しい

⾦融系などハイエンドストレージで⼤きなシュア（半分？）を持つ『InfiniBox』

最上位シリーズは1ラック12KVA
引⽤先：GUTP/JDCC 「次世代データセンター勉強会」

稼働率を60%としても 電源10KVA
冷却能⼒は 1ラック6KWが欲しい
2021/11/10

スーパーコンピュータセンターを含む データセンター省エネ技術トレンド60

ここまでは、過去のこと

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド61

世界で⼀番たくさんGPUを売っている

PCIe
2021/11/10

Switchを使う⾼速通信が1ラックに収納
スーパーコンピュータセンターを含む

データセンター省エネ技術トレンド
スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド62

東⼤「次世代データセンター勉強会」
30KVAラックの設計ガイドライン
必要な⾵量は消費電⼒に⽐例する
10KW20ラック 34,000m3/hを6台で供給とするとおおよそ＠6,000m3/hを送⾵可能なファンを選択
ただし⾵損で⾵量が不⾜しないこと。

ホットアイル

冷却コイル内⾵損

ホットアイル
⾵損②コールドアイル

冷却コイル

EC遠⼼ファンΦ400機が適合気圧を制御、低速稼働し低騒⾳
引⽤先：http://www.ebmpapst.jp/pdf/RadiPac_US_18_12_201502_J.pdf

2021/11/10

サーバー内
⾵損
①①①①①①①①①①

ホットアイル①①①①①①①①①①

引⽤先：https://www.chiroro.co.jp/datacenter/

スーパーコンピュータセンターを含む データセンター省エネ技術トレンド

63

30KVA/1Rack 1.5MWDCデザイン
40Rack 間接外気冷却システムとリアドアとの2重ループ冷却

重要④ サーバ視点から⾒た

熱⼒学の法則遵守
内蔵ファン静圧が低い１U機を禁⽌して、リアドアとの冷却2重ループとして「ラック通過⾵速」を低く出来る。

作図：杉⽥

リアドア
⾵量と⾵速（1m/s）、気圧を考慮した たまご型
引⽤先︓
電気容量1.5MW 空調容量1.2MW
http://www.chilleddoor.com/files/uploads/2016/10/
MOT_chilledDoorHR_11-2016_REVnoflap.pdf

2021/11/10

スーパーコンピュータセンターを含む データセンター省エネ技術トレンド64

普通のデータセンターでは排熱が難しい。
左の構成は稼働するが、回りに何も設置されていない。
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド65

チップとチップを光ファイバで結ぶ

引⽤先︓https://www.servethehome.com/nvidia-gtc-china-2020-co-packaged-photonics-and-inference/?fbclid=
IwAR1oLhTZlOGxc6YEfEnsJX0X6iaNawpXWUowgES8TNl3NhrFIOHGkkcpKrI

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド66

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド67

TPUv3https://www.servethehome.com/google-tpuv3-discussed-at-hot-chips32/?fbclid=IwAR0RiFopRO9LtkUmGOOHByj5DJmXsWft9hP4XmbxUiuKno9k7nQ8N
8xluHo

本年TPUv4を使うスパコンが発表された
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド68

Googleのスパコン TPU3.0
クーワトッネ
速超⾼表
公未は
詳細

引⽤先：https://gigazine.net/news/20180510-google-tpu-3-ai-processor/

第3世代のTPU3.0では、さらに「トレーニング」に要する時間を⼤幅に短縮できる
TPU2.0と⽐べ8倍密度、たった8ラックで100ペタフロップス

2021/11/10

スーパーコンピュータセンターを含む データセンター省エネ技術トレンド69

データセンターはサーバーを置く場所

25Gbpsカッパー

25Gbpsカッパーコネクタ

2021/11/10

ケーブル※⽇本⼈営業がマイクロソフトに、このコネクタを売り込みに⾏きました。
マイクロソフトは3ヶ⽉で25万台サーバーを買うとのこと。
Goolge、AWSはMSより買っているとのこと・・・⽇本市場は全体で3ヶ⽉10万台規模・・・

スーパーコンピュータセンターを含む データセン
ター省エネ技術トレンド70

オフィスに設置出来るスパコン「液浸」引⽤先：⼤成建設
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド71

近い未来• Future
半導体は進化して さらに電気を⾷べる
NVIDIA

V100はPFNが作ったMN3は台湾TSMCが製造できる最⼤サイズのチップ

TDP=300W

TDP=600W

ウエハースケール（ウエハーを切断しない）は、TDP=20KW

20,000KW

https://cn.teldevice.co.jp/product/cerebras_cs-1/

みんな忘れている「サーバーはデータセンターに置く」ことを。
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド72

データセンターこそゼロエミッション
再⽣可能エネルギーによるデータセンター運⽤には先ず 省エネ が必須です。
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド73

⽇経エレクトロニクス 2020年9⽉号
特集 「いきなり⾵⼒発電⼤国」
洋上⾵⼒発電が実⽤化
1KWh7円以下を実現へ

当然 安価な⼤規模蓄電池も必須

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド74

⽇経エレクトロニクス 2020年9⽉号
特集 「いきなり⾵⼒発電⼤国」

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド75

さくらインターネット
⽯狩データセンター 直流給電システム

マイクログリッドとして他にもNEDOで実証試験が⾏われている。

出所：NTTデータ先端技術株式会社
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド76

建物コストを最⼩に、PUEも低い

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド77

未来• Future
半導体は進化して• さらに電気を⾷べる

みんな忘れている「サーバーはデータセンターに置く」ことを。
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド

78

内部にHPC対応コンテナ

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド79

データセンターの再エネ利⽤は進めないといけない。
これから10年でデータセンター世界需要は2倍から3倍になると予測されている。
全世界の電⼒需要の３％から５％に達する。
これを⽯炭・⽯油などによる発電でまかなうのは無理がある。
太陽光発電、洋上⾵⼒発電が安価になり、充電設備コストが下がると、⽯炭・⽯油による発電を利⽤するデータセンターは駆逐されてゆくだろう。

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド80

データセンターの再エネ利⽤は進めないといけない。
GAFAと⾔われるクラウド⼤⼿は、サービス性を上げるため益々データセンター設備を増強するだろう。⾼処理のための⼤規模データセンター利⽤は他社も追従するだろう。
しかし、クラウド⼤⼿は、会社存亡リスクとして、再⽣可能エネルギーに投資している。現状は主に債権スワップで再⽣可能エネルギー100%を実現したと⾔っている。

2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド81

データセンターの再エネ利⽤は進めないといけない。
東京は、わずか450ほどのビルが東京都の15％も電気を使っている。
⽇本の総電⼒の2％以上 データセンターが使っている。
中国でもITが使う電⼒量は問題になっていて、豪⾬で決壊が⼼配される三峡ダムが発電する総電⼒量をITが使っていると問題化している。
北京市内には新たなデータセンター建設が許可されていない。

以上
2021/11/10

スーパーコンピュータセンターを含む
データセンター省エネ技術トレンド82