普通の人々のためのスーパーコンピュータ
センターを目指して
東北大学サイバーサイエンスセンターの
高性能計算に関する研究開発活動
小林広明
センター長・教授
東北大学サイバーサイエンスセンター
koba@cc.tohoku.ac.jp
2015年3月20日
Cyber HPC Symposium
1
Hiroaki Kobayashi, Tohoku University
本日の内容
HPCに関する全国共同利用・共同研究拠点としてのサイバーサイエンス
センターの取り組み
なぜ、「普通の人々のためのスーパーコンピュータセンター」が必要
なのか？
そのための取り組み：
演算性能とメモリ性能がバランスした新スーパーコンピュータシス
テムの導入、ユーザコードの早期移行＆性能評価
スーパーコンピュータシステムを活用したリアルタイム津波浸水予
測システムの研究開発
高メモリバンド幅アプリケーションのための将来のスーパーコン
ピュータシステムに関する研究開発
Cyber HPC Symposium
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学サイバーサイエンスセンターの歴史
1969年に日本で2番目の全国共同利用型大型計算機センターとして設立
•
汎用大型計算機の運用
1985年よりスーパーコンピュータセンターとして活動
•
大規模科学計算システムとしてベクトル型のスーパーコンピュータ
を運用
2008年に情報シナジーセンターからサイバーサイエンスセンターへ改組
•
/
/
2010年より「学際大規模情報基盤共同利用・共同研究拠点」として
文科省より認定を受け，2012年よりHPCIに資源提供を開始し，HPC
に関する共同利用・共同研究拠点活動を強化
First Computer in 1969
SX-1 in 1985
SX-2 in 1989
SX-3 in 1994
SX-4 in 1998
SX-7 in 2003
SX-9 in 2008
SENAC-1 in 1958
ACOS 1000 in 1982
Cyber HPC Symposium
3
平成27年3月20日
サイバーサイエンスセンターのHPCに関する取り組み
…™‡›>VxL
c`0xux7EL
j'T[KwfrzBšGI-=<k
C5j•„xY9H[K‚„‰“x3šbBk
Š–„››™Ž”›‡k
hY9(FBšGI-=
<k
ŸF…™‡›œ6"wyzŒˆŠ˜›
-=&)k
„~•„››™Ž”›‡k
BQ1/šW+GIQS)k
GIx
š!4k
—€•“dD1/k
‚™‘ƒ}“d(#ž)
^Px!4k
A8B1/k
;j'T[KFxGIdDk
…™‡›2RvBQwyzGIx
š!4k
J(FvsxB,XwfrzGIx.ak
HPCI™†›‚{“<k
BQZ=u*pxmnl?x3o
BQ’”‹‰|x&)k
HPCI‚„‰“\[šbBk
j'T[KFxGIdDwfrzLOe
xNMk
HPCI]iGIQ1/
x:fvxGIx!4k
c@šg2Sk
"cg(HGIHš"GIHš"
GIHx^%vqt!_EšU$E2SGI
x.a
Cyber HPC Symposium
4
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学大規模科学計算システム (～H27.2.10)
最先端のスーパーコンピュータ設備の整備・運用
スカラ並列型
ベクトル並列型
クラスタシステム
スーパーコンピュータ
Cyber HPC Symposium
5
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学におけるスパコンサービス状況と
主な利活用分野
Upper Limit of 24/7
service
産業利用
アンテナ・電磁解析
浮動小数点演算量(×1015)
シミュレーションに活用された
航空機設計
学術利用（学内）
学術利用（学外）
材料・物性
気象・気候
地震
ターボ機械
磁気デバイス
燃焼
Cyber HPC Symposium
年度
6
6
平成27年3月20日
大学の知・設備の民間活用支援事例
MRJ
MHI
Eco-wave
TDK
国際競争力のある製品開発へ貢献
毎年10%程度を
民間利用支援へ
Cyber HPC Symposium
7
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
三菱航空機との航空機設計・開発に関する共同研究
TV program “Close-up GENDAI” by NHK (2013.1.8)
Advanced Perpendicular Magnetic
Recording Hard Drive
Highly Efficient Turbines
for Power Plants
Exhaust Gas Catalyst
Industry Use
Base Material for PCBs
Cyber HPC Symposium
Regional Jet
8
平成27年3月20日
利用者支援機能の強化：プログラムの高速化に関する取り組み
センター職員・教員・ベンダエンジニアによる高速化支援体制を平成9年に
整備し，ユーザ支援，および計算科学・計算機科学的共同研究を実施　40
センター共同研究
JHPCN
HPCI
:EC?B1")\%
'A>8QXGV
SB3#Z2,\
$0B
産業利用
30
,+
20
5B\<EA>
82@/(TNWB
&\.A9=,7
777777B%'3#
"*
!IJMS"B5Z
2",B%'Z3#
!IJMSB
2\6
"A
4;D,B
RYL[,*
77771"?=$-77
7777FA
J[O[HYPU[KI
JMSB%'3#
10
第5号
0
H11年 H12年 H13年 H14年 H15年 H16年 H17年 H18年 H19年 H20年 H21年 H22年 H23年 H24年 H25年 H26年
これまで約200件の共同研究を推進，高速化支援対象となるコード数も増加
8
9
10
7
18
20
8
16
10
15
8
8
4.5
2.5
1.6
2.2
6.7
2.9
1.5
2.9
33
9.3
381
47
16.2 19.7 16.7
4.9
2.8
18.6
4.5
4.1
8.1
1.9
5.1
3.6
48
17.2 15.3 12.9
平成27年3月20日
31.7 8.6
Cyber HPC Symposium
9
13
6
11
利用者プログラム開発支援、共同研究の取り組み
平成9年よりセンター職員・教員・ベンダエンジニア
による高速化支援体制を構築し、ユーザ支援を強化　•
特に若手技術者育成を目指して、職員あたり常時2，
3本のコード最適化を担当　山下毅
ナノ粒子生成過
程解析　(阪大
茂田先生）
乱流解析（工学
研究科伊澤先生）
他
佐々木大輔 森谷友映
熱中症シミュレー
電子系・原子核
系シミュレータ
タ（名古屋工業
(産総研宮本様)
大学平田先生）
先進複合材料シ
第一原理材料シ
ミュレーション
ムレータ（産総
（工学研究科岡
研石橋様）
小野敏
大泉健治
部先生）
高速化支援取りまとめ
齋藤敦子
高分子流体解析
(理学研究科村
島先生)
三次元可視化コ
ンテンツ作成支
援(大阪大学茂
田先生)
ナノ粒子生成過程解析
Cyber HPC Symposium
熱中症シミュレータ
電子系・原子核系シミュレーション
10
高分子流体解析
平成27年3月20日
普通の人々のためのスーパーコンピュータセンターを目指して
11
Hiroaki Kobayashi , Tohoku Univ.
エクサフロップを追い求めて・・・
FLAGSHIP2020?
1E+08
RMAX
Predicted (All years)
Predicted (Recent 4 years)
Predicted (Recent 4 years + 150PF)
1E+07
1E+06
TFlops
1E+05
US?
1E+04
1E+03
1E+02
1E+01
1E+00
1E-01
24
23
20
20
21
20
20
20
18
20
17
20
15
14
20
20
12
20
11
20
09
20
08
20
06
05
20
20
03
20
02
20
00
20
99
19
97
96
19
19
94
19
93
19
Year
Cyber HPC Symposium
12
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Flagshipにまつわる最悪のシナリオ！？
•
Flagship開発における性能右肩上がりの限界
•
Mooreの法則の減速を電力が許す限り数でカバー
•
•
50~100億の運転費？
Exa-flops(前)？をめざし、演算優先
•
Co-desingというけど、道具優先なので、結果的
にはアプリの選別に！？
•
大量のflagship難民の発生！？
•
Hennessy&Patterson (2014)
HPCミドルクラスへのサポートが必須
Cyber HPC Symposium
13
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
スパコンに関する誤信と落とし穴：その１
単にピーク性能が高ければ良いってもんじゃない
SX-ACE 1B/F (256Gflop/s)
256.0
128.0
6
m
rea
B/s
St
64.0
性能上限(Gflops/s)
BW
25
am
e
Str
32.0
B/s
G
.95
16.0
am
e
Str
BW
72
B/s
1G
.6
58
Sandy Bridge 0.27B/F (187.5Gflop/s)
K computer 0.5B/F(128Gflop/s)
SX-9 2.5B/F
(102.4Gflop/s)
/s
GB
BW
Power7 0.52B/F(245.1Gflop/s)
FX-10 0.36B/F (236.5Gflop/s)
Tesla C1060 1.3B/F (78Gflop/s)
G
4.7
6
B/s
G
3.3
Nehalem EX 0.47B/F (72.48Gflop/s)
B/s
4
G
BW 34.8
m
ea
BW
Str
m
ea
Str
Nehalem EP 0.55B/F (46.93Gflop/s)
FX-1 1.0B/F (40.32Gflop/s)
SX-8 4B/F (35.2Gflop/s)
B/s
G
s
6
7. GB/
e
1
r
t
0
.
S
BW 17
B/s
G
m BW
a
.0
e
10
Str eam
BW
Str
m
a
e
Str
8.0
4.0
am
BW
2.0
高メモリバンド幅
アプリ
1.0
演算指向アプリ
Source: 2012 report
of computational
science roadmap
0.5
8
Cyber HPC Symposium
4
2
1
0.5
0.25 0.125 0.063 0.03 0.01
アプリ B/F (アプリメモリ要求度)
14
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
スパコンに関する過信と落とし穴：その２
単に数を増やせば良いってもんじゃない
超大規模数値計算に基づく核融合炉先進ブランケットデザイン条件における高精度
Sustaine
d Gflop/
s
MHD 熱伝達データベースの構築（山梨大学　山本教授とのJHPCN共同研究）
Parallel Effi
ciency(%)
Efficiency
20%
Efficiency
10%
Efficiency
5%
SX-
9
タ
ピュー
Kコン
Efficiency
2.5%
Cyber HPC Symposium
9
15
SX-
ータ
ュ
Kコンピ
,%)' *' '!'#,
,*+"& $'(*
,%)' '*' '%(,+)
Y. Yamamoto, Progress Report of JHPCN12 - NA14
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学サイバーサイエンスセンターの
今後のスーパーコンピュータ整備・運用・研究開発計画
～次の10年間の活動計画～
基本戦略: Supercomputers for the rest of usの研究開発・整備・運用を目指して．．．
第2階層に位置するNISとして, 特にflop/s指向のフラグシップマシンを補完すべく，flop/sとバランスしたメモリ性能を有するマシンの研究・開発に取
組み，導入時にリーディングマシンの1/10程度のシステムでも高い生産性（Short time to Solution)を提供できるシステムの整備・運用を目指す
システム運用と開発を両輪に，ユーザ支援・共同研究で得た知見を，次のシステムの設計・開発に生かす
教員・技術系職員・ベンダー技術者が一体となった現ユーザ支援体制のさらなる強化
学部・研究科（リーディング大学院等）と連携したHPC教育プログラムへの参画
社会貢献として産業利用支援の強化、復興支援基盤としてスパコンの活用
全国共同利用型の学内スパコン連携体制の構築, およびHPCI基盤を活用した学外スパコン機関との連携のさらなる推進
08
09
10
11
12
13
14
{€x„… SX-9('z{|‚)?(
&
<)
{€x„…y† (1,500m2)=
<…2
<1y†…vwƒy†…
;750~†}Cs"6
‡H248$ˆ
15
16
17
18
#z{|‚?(
Z\HQSUEPJP[VGD
KOJ[RGDONJ[RIgFD
W\DNJOY_LEMK[VFD
Zhdf]`_DZjgh_cgD
ENXRFD
MTD[ab_^DTageb]j
#z{|‚=<…!
…>@4n
.+ksHPCIz{|‚sD
mt>-/ls
Cyber HPC Symposium
19
FSsu%(oq
R&Ds34D
‡-/ABs=5ˆ
16
20
21
22
23
24
##z{|‚?(
KRIVr‰D
LJis6D
u*p
,:u
##z %(oq
{|‚=
<
(9ˆ
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
新スパコン棟の建設と新スパコンの導入
Cyber HPC Symposium
17
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学新スーパーコンピュータシステムの構成
IXS
IXS
Cluster 0
Cluster 4
Core
CPU(Socket)
Node
Cluster
Total System
Size
1
4 Cores
1CPU
512 Nodes
5 Clusters
Performance
(VPU+SPU)
69GFlop/s
(68GF+1GF)
141Tflop/s
(139TF+ 2TF)
707Tflop/s
(697TF+10TF)
276GFlop/s
(272GF+4GF)
Mem. BW
256GB/s
131TB/s
655TB/s
Memory Cap.
64GB
32TB
160TB
IXS Node BW
Cyber HPC Symposium
-
4GB/s x2
19
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
東北大学新スーパーコンピュータシステムの特徴
SX-9　(2008)
CPU性能
システム性能・規
模・消費電力
SX-ACE (2014)
コア数
1
4
4x
理論最大演算性能
118.4Gflop/s
276Gflop/s
2.3x
メモリバンド幅
256GB/sec
256GB/sec
1
ADB容量
256KB
4MB
16x
理論最大演算性能
34.1Tfop/s
706.6Tflop/s
20.7x
総メモリバンド幅
73.7TB/s
655TB/s
8.9x
総メモリ容量
18TB
160TB
8.9x
最大消費電力
590kVA
1,080kVA
1.8x
計算機室床面積
293平米
430平米
1.5x
SX-ACE(2014)
CPU
（ノード)
性能
Cyber HPC Symposium
性能向上比
京(2011)
性能比
クロック周波数
1GHz
2GHz
0.5x
コア性能
64Gflop/s
16Gflop/s
4x
コア数/CPU
4
8
0.5x
積和演算性能
256Gflop/s
128Gflop/s
2x
メモリバンド幅
256GB/s
64GB/s
4x
メモリ容量
64GB
16GB
4x
20
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
SX-ACEプロセッサの特徴
4つの高性能ベクトルコア＆オンチップメモリ機構の強化
272Gflop/s of VPU + 4Gflop/s of SPU per socket
•
SX-ACE Processor Architecture
4-core configuration, 68Gflop/s + 1Gflop/s per core
256 GB/s memory bandwidth
•
Core 0
1B/F in 4-core Multiply-Add operations
VPU
SPU
256GB/s
1MB private ADB per core (4MB per socket)
Core
2
Core
3
4GB/s
ADB 1MB
4GB/s
MSHR
4x compared with SX-9
256GB/s
4-way set-associative
Crossbar
MSHR with 512 entries (address+data)
MC
MC
MC
MC
MC
MC
MC
MC
MC
MC
MC
MC
MC
4B/F for Multiply-Add operations
MC
•
MC
256GB/s to/from Vec. Reg.
256GB/s
MC
•
•
•
•
Core
1
RCU
～ 4B/F in 1-core Multiply-Add operations
256GB/s
短ベクトル処理および間接メモリ参照処理の強化
Source: NEC
Out of Order execution for vector load/store operations
Advanced data forwarding in vector pipes chaining
Shorter memory
HPC Activities of Cyberscience
Center latency
Cyber HPC Symposium
than SX-9
21
March 26, 2014
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
センター利用者の実コードを用いたSX-ACEの評価
評価のポイント
ソケット性能の向上＆マルチベクトルコア化の効果は？
•
Is there any negative effect of the reduction in B/F from 2.5(SX-9) to
1.0(SX-ACE) on the sustained performance?
ADB強化の効果は？
•
•
Exploitation of locality in the inner-most loop
Enlarged Capacity (4x compared with SX-9)
間接参照，短ベクトル処理に対する効果は？
•
•
•
Cyber HPC Symposium
OoO Vector Load/Store Operations
Shorter Memory Latency (1/2 of SX-9)
Direct Data Forwarding in Vector Pipe Chaining
22
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
評価対象システム一覧
Perf./
No. of
Perf./
Perf. /
Mem.
No. of
No. of
System System
Sockets Socket
core
BW
nodes
Cores
(Tflop/s)
/Node (Gflop/s)
(Gflop/s) GB/sec
SX-ACE
131.1
512
1
256
4
64
256
SX-9
26.2
16
16
102.4
1
102.4
256
ES2
104.2
128
8
102.4
1
102.4
256
LX 406
29.4
64
2
230.4
12
19.2
59.7
On-chip
NW BW Sys.
mem
(GB/sec) B/F
1MB ADB /core 2 x 4 IXS 1.0
256KB
ADB/core
256KB ADB/
core
256KB L2/core
30MB Shared
L3
2.5
2 x 64IXS 2.5
5 IB
0.26
5 - 50
0.36
Tofu NW
5 - 50
K
524.2
4096
1
128
8
16
64
6MB Shared L2
0.5
Tofu NW
2 x 24 256KB L2/core
SR16K
96
62.7
64
4
245.1
8
30.6
128
32MB shared
0.52
M1
custom
L3
NW
Remarks: Listed performances are obtained based on total Multiply-Add performances of individual systems
23
Cyber HPC Symposium
平成27年3月20日
FX10
22.7
96
1
236.5
16
14.78
85
12MB shared
L2
2 x 128
IXS
Hiroaki Kobayashi, Tohoku University
評価に用いたアプリケーション一覧
Applications
QSFDM
GLOBE
Barotropic
ocean
MHD (FDM)
Seism 3D
Fields
Seismology
OGCM
(Ocean General
Circulation Model)
MHD
Seismology
MHD
(Spectral)
MHD
TURBINE
CFD
BCM
CFD
Cyber HPC Symposium
Methods
Mem Access
Code
Mesh Size
Characteristics
B/F
Spherical 2.5D
Stencil with sequential
FDM
memory accesses
Shallow water
Stencil with sequential
model
memory accesses
Finite Difference
Stencil with sequential
Method
memory accesses
Finite Difference
Stencil with sequential
1024 x 512 x 512
Model
memory accesses
4096 x 2048 x 2048
Pseudo spectral
Method
DNS
Stride memory access
0.78
4322 x 216
1.97
1.11
200 x 1920 x 32
3.04
1.41
2.15
1.68
2.21
2.18
1.78
5.47
7.01
5.86
†
‡
†
‡
91 x 91 x 91 x 13
Navier Stokes
Stencil and Indirect
(128 x 128 x 128 cells)
Equation
memory access
x 64 Cubes
24
ACE
2.16
3600 x 3072 x 2048
with short vectors
B/F on
4.3 x 107 grids
900 x 768 x 96
Indirect memory access
Actual
†
for single-node evaluation
‡
for multi-node evaluation
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
SX-ACEの性能評価結果:単一CPU性能
2.5x
SX-9
SX-ACE
LX 460
SR16K M1
60
2.9x
2x
[Gflop/s]
41.1%
2.3x
35.6%
45
39.4%
32.2%
30.1%
29.4%
30
27.4%
1.5x
17.5%
4.5x
17.5%
3.2x
12.3%
15
10.4%
9%
6.7%
Efficiency [%]
プログラム性能
47%
45.9%
9.8%
7.7%
5.5%
7.9%
3.5%
2.8%
7.0%
3%
5.9%
3.4%
2.5%
3%
3.5%
0
全球地震
伝搬解析
大気海洋解析
電磁流体解析
地震伝搬
電磁流体解析
｛差分法）
振動解析
(スペクトル法）
MHD
MHD
タービン設計
航空機設計
TURBINE
BCM
QSFDM
Barotropic
Code B/F
2.16
1.97
3.04
2.15
2.21
1.78
7.01
Actual B/F
0.78
1.11
1.41
1.68
2.18
5.47
5.86
Cyber HPC Symposium
(FDM）
Seism3D
25
(Spectral)
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Stream Memory Bandwidth
•
STREAM (TRIAD)
300
Stream memory bandwidth (GB/sec.)
SX-ACE
LX406
SR16K M1
FX10
225
150
75
0
0
2
4
6
8
10
12
14
16
Number of threads
Cyber HPC Symposium
26
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Sustained Performance of SX-ACE Processor
2core (2B/F)
4core (1B/F)
Sustained Performance
[Gflop/s]
1core (4B/F)
MHD
QSFDM
Barotropic
Code B/F
2.16
1.97
3.04
2.15
Actual B/F
0.78
1.11
1.41
1.68
Cyber HPC Symposium
(FDM）
Seism3D
27
MHD
TURBINE
BCM
2.21
1.78
7.01
2.18
5.47
5.86
(Spectral)
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Performance of Indirect Memory Accesses in TURBINE
Sustained Performance
[Gflop/s]
DO 200 K=1,KF;
DO 200 J=1,JF;
DO 200 L=lstart,lend;
ADB ON
DO 200 I=IS(L),IT(L) ADB OFF
DQL = RH(AMIN0(I-2,IS(L)),J,K) - RH(AMIN0(I-3,IS(L)),J,K)
DQM = RH(I-1,J,K) - RH(AMIN0(I-2,IS(L)),J,K)
DQN = RH(I,J,K) - RH(I-1,J,K)
DQP = RH(AMIN0(I+1,IT(L)),J,K) - RH(I,J,K)
DQR = RH(AMIN0(I+2,IT(L)),J,K) - RH(AMIN0(I+1,IT(L)),J,K)
・・・・・・・・・・・・・
SX-9
DQLM=SQL*DMAX1(0.0D0,DMIN1(AQL,COEFQ*SQL*DQM,
COEFQ*SQL*DQN))
DQMM=SQM*DMAX1(0.0D0,DMIN1(AQM,COEFQ*SQM*DQL,
COEFQ*SQM*DQN))
DQNM=SQN*DMAX1(0.0D0,DMIN1(AQN,COEFQ*SQN*DQM,
COEFQ*SQN*DQL))
DQNN=SQN*DMAX1(0.0D0,DMIN1(AQN,COEFQ*SQN*DQM,
COEFQ*SQN*DQP))
SX-ACE ・・・・・・・・・・・・・
SX-ACE SX-ACE
1core
2cores 4cores
DDQM=DQNM-2.0D0*DQMM+DQLM
DDQN=DQPN-2.0D0*DQNN+DQMN
・・・・・・・・・・・・・
QLL(I,J,K,M)=DQL0+COEFB*DPQM0+COEFC*DMQN0
QRR(I,J,K,M)=DQR0-COEFB*DMQP0-COEFC*DPQN0
200 CONTINUE
Cyber HPC Symposium
28
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Performance of Indirect Memory Accesses in TURBINE
on Modern HPC Processors
20
15
11.1%
10.6%
9.6%
10
5
Efficiency [%]
Sustained Performance
[Gflop/s]
18%
0
Cyber HPC Symposium
29
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Sustained Performance
[Gflop/s]
Performance of Short-Vector Processing in TURBINE
ADB OFF
ADB ON
DO 10 M=MMIN,MMAX;
DO 10 K=KSTA,KEND;
DO 10 I=ISTA,IEND
UC11=U(I-1,J,K,1)*XIX(I-1,J,K,1)
&
+U(I-1,J,K,2)*XIX(I-1,J,K,4)
&
+U(I-1,J,K,3)*XIX(I-1,J,K,7)
UC22=U(I,J,K,1)*XIX(I,J,K,1)
&
+U(I,J,K,2)*XIX(I,J,K,4)
&
+U(I,J,K,3)*XIX(I,J,K,7)
・・・・・・・・・・・・
SX-9
SX-ACE SX-ACE SX-ACE
1core
2cores 4cores
AJXIX1=(AJR(I-1,J,k)*XIX(I-1,J,k,1)
&
+AJR(I,J,k)*XIX(I,J,k,KL))*0.5D0
AJXIX2=(AJR(II,JJ,kk)*XIX(II,JJ,kk,KL+3)
&
+AJR(I,J,k)*XIX(I,J,k,KL+3))*0.5D0
・・・・・・・・・・・・
10 continue
Cyber HPC Symposium
30
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Performance of Short-Vector Processing in TURBINE
on Modern HPC Processors
10
7.5
5.6%
5
2.7%
1.8% 2.5
Efficiency [%]
Sustained Performance
[Gflop/s]
8.3%
0
Cyber HPC Symposium
31
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Sustained Performance of Barotropic Ocean
on Multi-Node Systems
ES2
Perforrmance (Gflop/s)
1,200
SX-ACE
LX 406
FX10
SR16K M1
SMP-MPI Hybrid
900
600
300
0
0
8
16
24
32
40
48
56
64
72
80
88
96
Number of MPI processes (Nodes)
Cyber HPC Symposium
32
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
スパコン評価指標HPCGによる評価の取り組み
HPLの性能評価指標としての限界
•
実アプリケーションとの性能乖離
HPCシステムの研究開発をゆがめる？
•
長時間実行が必要
LINPACK
HECTRF Report
耐久試験，信頼性評価にはよいかも？
実アプリケーションの挙動に近い新しい評価指標が求められてきた
HPCG ベンチマークの誕生
•
実アプリケーションで頻繁に使用される疎行列計算と通信の性能を重視
疎行列ベクトル積，内積演算，総和通信，隣接間通信等
•
アプリケーション最適化技術も評価の対象
Cyber HPC Symposium
33
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
スパコン評価指標HPCGでのランキング(2014.11版）
Rank
Site
Computer
cores
HPL
(PFlops)
HPL Rank
1
NSCC/Guangihou
Tianhe-2 NUDT, Xeon 12C, 2.2
GHz + Xeon Phi 57C +Custom
3,120,000
33.9
1
0.632
1.5
1.1
2
RIKEN AICS
K Computer, SPARC64 VIIIfx
8C + Custom
705,024
10.5
4
0.461
4.4
4.1
3
DOE/OS Oak Ridge
Nat Lab.
Titan, Cray XK7 AMD 16C +
Keplar 14C + Custom
560,640
17.6
2
0.322
1.8
1.19
4
DOE/OS Argonne
Lab.
Mira Bluegene/Q, Power BQC
16C 1.6GHz +Custom
786,432
8.59
5
0.167
1.9
1.7
5
Sewiss CSCS
Piz Daint Cray XC30, Xeon 8C
+ Keplar 14C +Custom
115,984
6.27
6
0.105
1.7
1.3
6
Leibniz
Rechenzentrum
SuperMUC, Intel8C +IB
147,456
2.90
14
0.0833
2.9
2.61
7
DOE/OS L Barkley
Nat Lab.
Edison XC30, Xeon 12C
+Custon
133,824
1.65
24
0.0786
4.8
3.1
8
GSIC Center
TiTech
Tsubame 2.5 Xeon 6C+Keplar
20x +IB
76,032
2.78
15
0.073
2.6
1.3
9
MaxPlanck
iDataPlex Xeon10C+IB
65,320
1.28
34
0.061
4.8
4.2
10
CEA/TGCC-GENCI
Curie tine nodes Bullx B510
Xeon 8C +IB
77,184
1.36
33
0.051
3.8
3.1
11
Exploration and
Production Eni S.p.A
HPC2, Xeon 10C + Keplar 14C
+IB
62,640
3
12
0.0489
1.6
1.22
12
Grand Equipment
National de Calcul
Occigen Xeon 12C
50,554
2.07
0.0448
2.8
2.2
13
U of Tokyo
Oakleaf-FX SPARK64 16C
+Tofu
76,800
1.043
36
0.0448
4.3
3.9
14
TACC
Stampede, Dell Xeon8C + Xeon
Phi(61c) + IB
462,462
5.168
7
0.044
0.9
0.5
15
IFERC
Helios Xeon 8C+IB
70,560
1.24
30
0.0426
3.4
2.8
16
HWC U of Stuttgart
Hornet Cray Xeon
94,656
2.763
-
0.0391
1.4
1.0
17
Surf Sara
Cartesius Xeon
25,920
0.848
-
0.0195
2.3
1.8
SX-ACE, 4C + IXS
34
2,048
0.123
-
0.0134
Tohoku U
18 Symposium
Cyber HPC
Cyberscience Centr
HPCG
( PFlops)
HPCG/HPL HPCG/Peak
10.8 平成27年3月20日
10.3
電力当たりの性能
[Mflops/W]
ピーク性能に対する
実効性能[%]
2
0
120
100
80
60
40
20
Cyber HPC Symposium
35
$'(
%%!-%
,(+$
%%*"%*(
,(+$
#' $
)$
$ .
&"%') %$'%*) %$
GPU
'!"-
)%
'%$$
京/FX
$
%#&*)'
)%
&"%') %$
'%*) %$
)$
Xeon
$
'%$$
$ .
%%*"%*(
$
$'(
,"$!
'!"-
%%!-%
%#&*)'
SX-ACE
#' ,"$!
4
%%!*
6
%%!*
8
Hiroaki Kobayashi, Tohoku University
スパコン評価指標HPCGによる
計算能力の質の評価(1/2)
Xeon Phi
Bluegene
12
10
0
平成27年3月20日
同じHPCG性能を得るのに
必要なコア数
（SX-ACEで正規化）
6
4
2
20
10
10
50
40
Cyber HPC Symposium
36
)$
$
&"%') %$'%*) %$
,(+$
$
'%$$
#' 18
,(+$
&"%') %$
'%*) %$
#' )%
GPU
)$
'%$$
京・FX
14
$'(
16
$ .
)%
'!"%%!-%
$
$ .
Xeon
%%*"%*(
%%*"%*(
'!"-
12
%#&*)'
SX-ACE
$'(
%%!-%
60
70
%#&*)'
0
,"$!
$
30
,"$!
%%!*
8
%%!*
同じHPCG性能を得るのに
必要なピーク性能
（SX-ACEで正規化）
Hiroaki Kobayashi, Tohoku University
スパコン評価指標HPCGHPCGによる
計算能力の質の評価(2/2)
Xeon Phi
Bluegene
20
0
平成27年3月20日
スパコンを活用した学際的R&Dの取り組み:
リアルタイム津波浸水・被害予測・災害情報
配信による自治体の減災力強化の実証事業
37
Hiroaki Kobayashi, Tohoku University
•
本事業の目的
東日本大震災における津波被害の教訓を踏まえ，世界最先端のシ
ミュレーション・センシング・ICTを融合し，迅速かつきめ細やか
な被害情報の推計・把握と配信によるG空間防災モデルを構築
•
沿岸部10mメッシュの分解能での「世界初」のリアルタイム津波浸
水予測とG空間情報の活用による建物被害予測を，地震発生から20
分以内に完了させ，実証自治体での災害対応の基盤情報に組み込
み，準天頂衛星からのメッセージ送信や災害に強いワイヤレスネッ
トワークを活用し，ユーザに対して確実に情報を配信
Cyber HPC Symposium
38
東北大 越村教授提供
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
リアルタイム津波浸水・被害予測・災害情報配信
による自治体の減災力強化の実証事業体制図
4ZL'
*89"K?A!
>
[=<
[=
*
5@V?A!
ebo|ebczghzi|
VG,
dr
D
5,^7
T%;
*+
vawibr21{M3
F5
ybtxgsjfu
kgmqjn
Y
O&)l|i
4Z
Y{[=
J{*{&BN!
L'hze]_`M#$
&BSI{[=[
*X?{UO
021P3
[=<{[=Q
>Q
*
W/R?A.-
*+Q
H:E
%C(apv
\6
YQ
事業代表者：　東北大学災害科学国際研究所　越村俊一教授
Cyber HPC Symposium
39
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
社会に役立つスーパーコンピュータ技術の創出：
リアルタイム津波浸水・被害予測システムの研究開発
地震発生後20分以内に
地震断層モデルに基づく津波発生予
測 (10分）
SX-ACEによる10mメッシュの津波
浸水予測および被害推計（10分）
()
Cyber HPC Symposium
40
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
%$
Condition
TUNAMI-Code
Non-linear Shallow Water Equations
"
Staggered Leap-frog FDM
dx
Nested Grid810m, 270m, 90m, 30m, 10 dt
0.25 sec. (Satisfying stability condition)
HWL
Items
TohokuUniversity’s Numerical
Analysis Model for Investigating
Tsunami
5
('+
.),
#-&!*
Cyber HPC Symposium
41
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
リアルタイム津波・浸水被害予測システムにより得られる情報
浸水開始時間
Webインタフェース
（津波到達時間）
Cyber HPC Symposium
最大浸水深分布
42
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
計測・シミュレーション・可視化・配信まで
運用システムへの実装
SX-ACE joins the system as soon as a
large earthquake (>M7) occurs
Earthquake
RAPiD System
SX-ACE
RTK-GPS analysis
Quake Information
GPS Obs. data
Local
Government
Inundation forecasts
Damage estimations Cyber HPC Symposium
Fault model estimation
SX Job submit
NQSII: Urgency
Function
Delivery Server
Tsunami Analysis
Tohoku Univ.
International Research
of Disaster Science
Tohoku Univ.
Cyberscience Center
43
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
リアルタイム津波浸水シミュレーションの実現に向けて
例えば，静岡市の場合：
太平洋沖 1404Km×845km
741万格子（810mから10m）
領域4
領域3
領域2
地震・
津波発生
領域１
シミュレーション領域
領域5
G空間情報を活用した次世代防災･被災地支援システム研究会　Cyber HPC Symposium
第３回シンポジウム
ΔT = 0.05　432,000ステップ（6時間）
浮動小数点演算数 2.5× 1015回
44
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
津波浸水予測プログラム
プログラムフロー
地震による海面水位の変動を入力として，津波が到達す
る時刻，津波の高さ等を計算
•
•
時刻更新
計算モデル：非線形長波理論
計算スキーム：Staggered leap-frog法
プログラムの特徴
•
•
Xeonサーバ用に開発されたコードがベース
•
メモリバンド幅制約：B/F = 1.82 (単精度）
質量保存の式とナビエ・ストークスの式において，
計算負荷とメモリ負荷が非常に高い
チューニングのポイント
•
•
•
初期評価結果
(single core)
ADBの効果的な活用
•
差分式での局所性活用
高ベクトル化率：99.6%，平均ベクトル長:235
ループ内条件式の削減，インライン展開等
Cyber HPC Symposium
LX 406Re-2
45
SX-9
SX-ACE
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
津波浸水予測プログラムのスケーラビリティ評価
(高知市の例）
LX 406Re-2
SX-9
SX-ACE
算定・リモート
120
ジョブ投入
80
60
40
20
0
4
16
:4
1
:1
8
シミュレー
13
:5
12
52
アップ
後処理
可視化
ション実行
了
終
送
転 終了
果
結 実行
ブ
ョ
ジ
地震発生
セット
始
開 了
行 完
実 信
ブ 受
ョ タ
ジ ー
メ
ラ
100
7:
断層パラメータ
パ
実行時間（分）
140
7:
0:
00
160
22
180
10分ライン
32
64
128
256
512
プロセス数
Cyber HPC Symposium
46
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
今後の展開
•
3月16~18日　国連防災会議で成果発表
•
3月末　運用システムとして整備完了
2
3
4月以降　•
•
日本海側を含む全国展開へ
Regionally-distributed
multiplexing system
阪大，JAMSTEC との連携
•
相補的，かつ重層的にシステムを強化へ
m
•
対象エリア・対象自治体の拡大
Osaka
University
380 Km
Cyber HPC Symposium
47
Tohoku
University
330 K
•
1
JAMSTEC
平成27年3月20日
高メモリバンド幅アプリケーションのための
次世代スーパーコンピュータR&D
48
Hiroaki Kobayashi, Tohoku University
高メモリバンド幅アプリケーションのための次世代スーパーコンピュータに関する取り組み
～文科省「将来のHPCIシステムのあり方に関する調査研究」～
HPCI調査研究の背景と東北大チームがめざすところ
y
NGV 1B/F (256Gflop/s)
128.0
am
e
Str
64.0
BW
256.0
.95
m
128.0
8.0
ea
Str
BW
4.0
64.0
2.0
32.0
B/s
1G
.6
58
B/s
B/s
.6G /s
6G
17 .0GB
5
2
s
7
/
BW 1
GB
m BW
0W
.B
ea
10
Str eam
m
a
Str
rBeW
mt
eaS
Str
m
ea
Str
72
BW
For MemoryB/s
G
intensive
.95
/s
72
GB
applications
BW
.61
1.0
16.0
0.5
m
ea
Str
Nehalem EX 0.47B/F (72.48Gflop/s)
SX-8 4B/F (35.2Gflop/s)
SX-9 2.5B/F
(102.4Gflop/s)
/s
BW
.7
64
Sandy Bridge 0.27B/F (187.5Gflop/s)
K computer 0.5B/F(128Gflop/s)
Tesla C1060 1.3B/F (78Gflop/s)
GB
B/s
Nehalem EX 0.47B/F (72.48Gflop/s)
.3G
/s
GB
Nehalem EP 0.55B/F
W
8
.
B
34
m
a
e
BW
FX-1 1.0B/F
Str
For Computationam
e
SX-8 4B/F (35.2Gflop/s)
r
St
intensive applications
m
ea
Str
58
Power7 0.52B/F(245.1Gflop/s)
Nehalem EP 0.55B/F (46.93Gflop/s)
FX-10 0.36B/F (236.5Gflop/s)
NGV 1B/F (256Gflop/s)
FX-1 1.0B/F (40.32Gflop/s)
43
(40.32Gflop/s)
/s
GB /s
m
6
.
a
4Stre 2 17 71.0GB 0.5
0.25 0.125 0.063 0.03 0.01
BW 1
B/s (Memory Access Intensity)
Application
B/F
G
m BW
a
.0
e
10
Str eam
BW
Str
m
多くのアプリがメモリ性能律速の状況を打破！
ea
Str
8
8.0
4.0
BW
0.5
8
4
2
1
HPCI
0.5
0.25 0.125 0.063 0.03
WX
Za=
CJ@S
U
BGGi
IN
[Y_
U
L9TDHbcd^g\U#OR
2.0
@JLPQiK!QFH:R
UBi
]h\f`eML"R@JUI>RE?<
1.0
A;iKV_dI#:UCR
Source: 2012 report
of computational
science roadmap
(46.93Gflop/s)
16.0
/s
GB
BW
Tesla C1060 1.3B/F (78Gflop/s)
B/s
.3G
/s
43
GB
BW 34.8
m
ea
BW
Str
m
ea
Str
m
ea
Str
32.0
B/s
.7G
64
Useless when only flop/s improved!
FX-10 0.36B/F (236.5Gflop/s)
Sandy Bridge 0.27B/F (187.5Gflop/s)
K computer 0.5B/F(128Gflop/s)
SX-9 2.5B/F
(102.4Gflop/s)
B/s
6G
25
'201$&+
'201$&+
'201$&+
*4,33$-,5,-278 )2..3/$-,5,-278 (,60/$-,5,-278
256.0
Attainable PerformanceAttainable
(Gflops/s)
Performance (Gflops/s)
Need
balanced yimprovement
p
Power7
both
in 0.52B/F(245.1Gflop/s)
flop/s and BW!
y
0.01
%
Application B/F (Memory Access Intensity)
Cyber HPC Symposium
49
平成27年3月20日
Hiroaki Kobayashi , Tohoku Univ.
ポストペタ時代こそバランスの良いシステムが重要
～ハイエンドHPCシステムの「脳梗塞」状態からの脱却～
データ転送隘路（メモリ制約）で膨大な数の演算器に十分データが届いていないた
め，演算器が無駄になっている
•
例外としてLINPACK：90％以上の実行効率を達成できるので，CPU単体とシステ
ム規模のピーク性能が意味を持つが．．．
数％の効率を前提にシステム規模で必要性能をリカバーするまえに，チップ内に眠っ
ている演算器を有効活用することを考えるべき．そのためには
メモリサブシステム設計（先進デバイスとアーキテクチャ技術の融合）と利用技術（ソ
フトウェアによるデータ管理）のコデザインによるシステム再設計をする時期
SIMDをワイド化してベクトルユニットを強化する方向性はIBM/AMD/INTELなども
目指すところ．我々のFSはそれをすでに先取りしており，重要なポイントはそれ
を生かすメモリサブシステムをいかに他に先駆けて実現するかである
メモリから撤退したといわれているインテルが次期プロセッサ向けメモリサブシ
ステム設計/開発に取り組んでいる
IBMはメモリインタフェースを強化し大容量・高バンド幅のpower8プロセッサを
開発
>OG/P>?EB8DK?AF@L7O9@:>J(0,654
%#$&%#%# -(135+'4N!,*+P"HIKC
CyberMANHIK;D<=@G.7O9@:>J.2-)+'4
HPC Symposium
平成27年3月20日
Hiroaki Kobayashi , Tohoku Univ.
研究開発体制
アプリ・システム・デバイス三位一体でスパコンをバランス良く再設計!
&
ldw†lde„no„p†
*…-NEˆ'!
;8<;
2;R8<
#%;D
8<o„p†
S.K8<
S.K8<-+
108<M6-+
-NEYL5AC
$S.(:
-NEY,$g
&
O
!"
B=8<M6-+
Q>;DP
&zdhƒsrh(:
.J
4
8<
|}|†f
ˆ:7…;7I
Tb!9_Z‡\`G
/cy`)H^M6
Ġvzry`?
ˆp†krucy_
zrqZ]VXUWmns{
`)H^\`M6Ġ
vzry`?
ˆc†gshq~b
3[aF@twdn
D`)H^\`M6
Ġvzry`?
cyj†m€„)H
lxi‚†y
Cyber HPC Symposium
mns{)H
lxi‚†y
51
twdnD)H
lxi‚†y
平成27年3月20日
Hiroaki Kobayashi , Tohoku Univ.
HPCI FSで得られたシステム概念設計結果
ikpzƒt„sc„epfn}
  @> I†2&
Ncw;(7XSQikpz@>
Node0 4TFlop/s
CPU01 TFlop/s
core core core core
  J^aR>4C,b!JX*1TP`i
kpz
•  ikpzv„f7N100PF
•  ikpz{|7N 100 ~ 200 PB/s
•  ikpz{|HNM3.2PB ~ 6.4PB
Node xxxx
CPU0
1 2 3
24B/F
1 2 3
core core core core
VLSB VLSB
12B/F
Shared memory
Shared memory
Storage
  $?U5#‰ikpz.‰
 ƒH"{|Y0
  t„sR_Y{|H‡128‰256GB
 t„s-47‡4TFlop/s
  {|u‚s‡4ˆ8TB/s
  UMAc„epfn}
  LFD9b1OR+BK
t„s
E
 4CPU(16gc)X]`SMPt„s%
  CPUZ8/YLOy€ngcƒxfr€w
loh
  2.5'†3'39WV<qudk
9b1OR1{||j~„€:X]`
L{|u‚sY0
  )1|j~„€…1|j~„€Y1
\$?
  ikpzƒqudkA@>
  -4[Yq„m67G=@>
Cyber HPC Symposium
52
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
FS検討システムとXeonベース推定システムの比較
高次元トーラス
40GB/s x2
Socket: 1TF
20GB/s
10GB/s x2
2~4 B/F
Socket: 1.6TF
core : 90GF
1 B/F
1~2TB/s
0.05TB/s
0.1TB/s
128GB x 2
(NUMA)
検討中のFS機
SMP(UMA)アーキテクチャ
4TF, ~8TB/s(~2B/F), ~512GB, 1~1.6KW
Cyber HPC Symposium
Xeon推定@2018
NUMAアーキテクチャ
3.3TF, 0.2TB/s(0.1B/F), 128GBx2, 0.4KW
53
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
高メモリバンド幅システムの優位性(1/2)
～INTEL Xeonベースのシステムとの性能比較～
全体実行時間（=通信時間＋演算処理時間)を評価
Xeon(推定)で正規化
Xeon推定
正規化性能
正規化性能/Watt
FS機
FS機
Xeon(推定)
Tread/proc
4
4
PeakPF/proc
1TF
0.36TF
2.79
PeakPF/100,000proc
100PF
35.84PF
2.7
Node数 /100,000proc
25,000
11,111
2.25
Total MemBW
200PB/s
3.4PB/s
58.6
Total キャッシュ容量
3.2TB
0.8TB
4
Cyber HPC Symposium
比率
◆ 要求B/Fが高いSeism3D,RSGDXの消費電力
あたりの性能は，FS機の方が4～8倍高い
◆ 要求B/Fが低い数値タービンににおいても
FS機はXeonと同等の性能/消費電力
54
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
高メモリバンド幅システムの優位性
～INTEL Xeonベースのシステム(2018年頃)との性能比較～
実行時間(hour)
Seism3D
Xe
プ on:
ロ
セ
ス
数
→
増
加
Su
に
pe
よ
rs
ca りキ
ャ
la
ッ
bi
シ
lit
ュ
yが
ヒ
得
ッ
ら
ト
れ
率
る
up
要求時間: 8時間以内
FS機
Xeon推定
Xeon：
キャッシュ
ヒット率変
わらず
プロセス数
（並列処理規模）
プロセス数を増やす事でキャッシュヒット率が向上し，実行時間が短縮されるが，最終的にはキャッシュヒットしないリクエストのメ
モリアクセス時間が性能を決める　HWの持つメモリ帯域が大きいシステムが有効
Xeon推定機を用いてFS機(100Pflop/s)と同等の実行時間を実現するためには，FS機の64倍のプロセス数，
すなわち640万プロセスを処理できる640万ノードのシステム,ピーク性能3.2EFlop/sの性能が必要
：そのときの消費電力は291ＭＷ(14nmを想定）　→　非現実的　Cyber HPC Symposium
55
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
我が国のHPC基盤の安定維持・高度化を目指して
～東北大学サイバーサイエンスセンターに求められる役割～
現在のHPCIシステムの安定運用・高度化への貢献
Cyber HPC Symposium
将来のHPCIシステムの研究開発への貢献
56
平成27年3月20日
Hiroaki Kobayashi, Tohoku University
HPCに関する研究・人材育成機能の強化
高性能計算技術開発(NEC)共同研究部門の新設
設置期間: H26.7.1~H30.6.30
% ( # , 8
C
9
D
.
,
8
C
9
/
D
.
& ' ! 6 7 ; @
+ " )
=
:
0
-
<
B
D
/
3
-
-
7 D > D 5 C ? A D ; 2 C 4 -
サイバーサイエンスセンター
組織図
57
*
-
%
-
1 $ ' ! % 0 - /
・小林　広明　(教授)
・滝沢　寛之　(情報科学研究科・准教授〕
・江川　隆輔　(准教授〕
・撫佐　昭裕　(客員教授, NEC〕
・横川　三津夫(客員教授, 神戸大学〕
・百瀬　真太郎 (客員准教授, NEC〕
Cyber HPC Symposium
% 平成27年3月20日
Hiroaki Kobayashi, Tohoku University
Š7rxh<t„_Ò
ÓcfƒŸ
§l£˜ŸH5”©¨L
ynH…/…Ó
• 
P
¶Ñ¿Ñ²Ï
ÁÈѹŸvk<t
ž†—¨cf„_
³­¾Ñ
³­¯Ï¶
·Ï¹Ñ
ZG][#
ŸE€]ž†
—¨cf„_
´¶
ȂE
')
€]
Š1
– 
– 
• 
I
q9
:‘ Ÿ!bŸ3ԏ¥ ËѼ¬
ϱŴϟcf„_¡Ÿ{Y
&$Ÿxhe&oŸcfŸ
’a•›Ô´ÆÈÍÑ´ÉÏe&ŸŠ1
ž{Y
– 
– 
xhe&‚ŸcfoŸŠ1´
ÆÈÍÑ´ÉÏ<tž†—¨cf„_
DqÐcfB
• 
xhe&oÐM<toŸcf
8"
e&
cf
e
Cyber HPC Symposium
&
c
f
;
%
&
&
$
c
f
O
†
Q
…
M
58
– 
• 
g…ªU]•™Ë«Ì¹­ÇTS´ÆÈÍÑ´É
ÏÒW,e& ˆcf;ŸcfÓ
‡WÐVWž|—¨¶Ñ¿Ñ²ÏÁÈѹ´¶»
ǟcf„_ÒÐJ%lm`B)Ô
‰R~cfONŸcfԘŸÓ
ƒD‘=4—¨8"e&cfeŸ
!0Ðz2žŽ›Ôxhe&Ðxh
Oe&Ÿ‚žj~•™&ˆ`Ԑš
*}`Iq9
– 
&
$

.
´¶»ÇŸŠ1ž†—¨cf„_Ÿ*F
Ķ½ ˜©ªu(—¨´¶»Ç‘n’
¦©¨ËѼ¬Ï±Å´ÏŸcf„_¡Ÿ{Y
¥ ˜Ÿ$O†¦+DŸ
>p•‹cfÐDqž6
/18"e&cfeÂε®°½ŒÀº±¼Ñ
¹wKU]¸ËÈÑ´ÉÏÊßNi¡Ÿ^
ª~–›\&Bcf?XŸNi
– 
– 
ŸPH¶¿²Ïž†—¨cf
“©¢œžÔž-—¨sgO„_CAª¤
d¡¶¿²Ï@Ð]CAª*F
平成27年3月20日
Hiroaki Kobayashi , Tohoku Univ.
さいごに
高性能計算に関する共同利用・共同研究拠点として，東北大学サイバー
サイエンスセンターのミッション
メモリ性能と演算性能がバランスした最先端のスー
パーコンピュータシステムの導入・提供
*5-5(4
.15+&
%!#' 使い易い利用環境の整備・提供、利用者支援
現有スパコンの利用技術，および次世代スパコン実
現のための要素技術に関する研究開発
)*
,0
&$%!
#' 人材
"
育成
&$&")
/135)24%!#' 研究基盤としてだけでなく，社会基盤、産業基盤と
してのスパコンのあり方を追求
を果たし，
普通の人々に役立つスーパーコンピュータセンター
Supercomputer Center for the Rest of US!
をめざします
Cyber HPC Symposium
59
平成27年3月20日

船舶運航システムの運用における海技者の役割と海技者育成の研究

ガラスに金属微粒子を入れるかわりに、真空中で金や銀 を蒸発させて透明

大島芳彦 - 福井県建築士会

川本町定住促進住宅チラシ 表（PDF）

フランス：英政府が仏 EDF の英 EPR プロジェクトの契約締結を延期

パンフレットダウンロード - Cyber

HPC-35HD/62HD - MY

ご案内：印刷用 - サイコム・ブレインズ

医療従事者の心肺蘇生実習開始前の胸骨圧迫技能習熟度に関する解析