# MPI によるプログラミング概要 Fortran 編 中島研吾 東京大学情報基盤センター

223

(1)

## 編

(2)

(3)

(4)

(5)

(6)

(7)

(8)

(9)

(10)

(11)

(12)

(13)

(14)

(15)

(16)

### まずはプログラムの例

implicit REAL*8 (A-H,O-Z) include 'mpif.h‘

integer :: PETOT, my_rank, ierr call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT call MPI_FINALIZE (ierr)

stop end

#include "mpi.h" #include <stdio.h>

int main(int argc, char **argv)

{

int n, myid, numprocs, i; MPI_Init(&argc,&argv);

MPI_Comm_size(MPI_COMM_WORLD,&numprocs); MPI_Comm_rank(MPI_COMM_WORLD,&myid);

printf ("Hello World %d¥n", myid); MPI_Finalize();

}

(17)

16 16 16

(18)

17 17 17

(19)

18 18 18

(20)

19 19 19

## プロセス数

(21)

20 20 20

(22)

21 21 21

(23)

22

(24)

23

(25)

24

(26)

25

### 利用可能ノード数

(27)

26

\$ rbstat --rsc -x

QUEUE STATUS MIN_NODE MAX_NODE MAX_ELAPSE REMAIN_ELAPSE MEM(GB)/NODE PROJECT u-debug [ENABLE ,START] 1 24 00:30:00 00:30:00 244GB pz0105,gcXX u-short [ENABLE ,START] 1 8 02:00:00 02:00:00 244GB pz0105,gcXX u-regular [ENABLE ,START]

|---- u-small [ENABLE ,START] 4 16 12:00:00 12:00:00 244GB gcXX,pz0105 |---- u-medium [ENABLE ,START] 17 32 12:00:00 12:00:00 244GB gcXX

|---- u-large [ENABLE ,START] 33 64 12:00:00 12:00:00 244GB gcXX |---- u-x-large [ENABLE ,START] 65 128 06:00:00 06:00:00 244GB gcXX u-interactive [ENABLE ,START]

|---- u-interactive_1 [ENABLE ,START] 1 1 00:15:00 00:15:00 244GB pz0105,gcXX |---- u-interactive_4 [ENABLE ,START] 2 4 00:05:00 00:05:00 244GB pz0105,gcXX u-lecture [ENABLE ,START] 1 8 00:10:00 00:10:00 244GB gt00,gtYY u-lecture8 [DISABLE,START] 1 8 00:10:00 00:10:00 244GB gtYY u-tutorial [ENABLE ,START] 1 8 00:10:00 00:10:00 244GB gt00

### 実習では１つのみ

(28)

27

\$ rbstat --rsc –b

QUEUE STATUS TOTAL RUNNING QUEUED HOLD BEGUN WAIT EXIT TRANSIT NODE u-debug [ENABLE ,START] 1 1 0 0 0 0 0 0 54 u-short [ENABLE ,START] 9 3 5 1 0 0 0 0 16 u-regular [ENABLE ,START]

|---- u-small [ENABLE ,START] 38 10 6 22 0 0 0 0 288 |---- u-medium [ENABLE ,START] 2 2 0 0 0 0 0 0 288 |---- u-large [ENABLE ,START] 4 2 0 2 0 0 0 0 288 |---- u-x-large [ENABLE ,START] 1 0 1 0 0 0 0 0 288 u-interactive [ENABLE ,START]

|---- u-interactive_1 [ENABLE ,START] 0 0 0 0 0 0 0 0 54 |---- u-interactive_4 [ENABLE ,START] 0 0 0 0 0 0 0 0 54 u-lecture [ENABLE ,START] 0 0 0 0 0 0 0 0 54 u-lecture8 [DISABLE,START] 0 0 0 0 0 0 0 0 54 u-tutorial [ENABLE ,START] 0 0 0 0 0 0 0 0 54

(29)

### 環境管理ルーチン＋必須項目

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

#include "mpi.h"

#include <stdio.h>

int main(int argc, char **argv) {

int n, myid, numprocs, i;

MPI_Init(&argc,&argv);

MPI_Comm_size(MPI_COMM_WORLD,&numprocs); MPI_Comm_rank(MPI_COMM_WORLD,&myid);

printf ("Hello World %d¥n", myid);

MPI_Finalize(); }

(30)

(31)

### SPMD

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end #!/bin/sh #PBS -q u-lecture 実行キュー名 #PBS -N HELLO ジョブ名称（省略可） #PBS -l select=1:mpiprocs=4 ノード数，proc#/node #PBS -Wgroup_list=gt00 グループ名（財布） #PBS -l walltime=00:05:00 実行時間 #PBS -e err エラー出力ファイル #PBS -o hello.lst 標準出力ファイル cd \$PBS_O_WORKDIR 実行ディレクトリへ移動 . /etc/profile.d/modules.sh 必須 export I_MPI_PIN_DOMAIN=socket ソケット単位で実行 mpirun ./impimap.sh ./a.out プログラム実行

(32)

### mpif.h

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

#include "mpi.h"

#include <stdio.h>

int main(int argc, char **argv) {

int n, myid, numprocs, i;

MPI_Init(&argc,&argv);

MPI_Comm_size(MPI_COMM_WORLD,&numprocs); MPI_Comm_rank(MPI_COMM_WORLD,&myid);

printf ("Hello World %d¥n", myid);

MPI_Finalize(); }

(33)

### 完了コード

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

(34)

### 完了コード

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

(35)

### 完了コード

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

(36)

(37)

(38)

## 対象とするアプリケーション

### ：シリアル計算

Deformation of surface will be given as boundary conditions at bottom of tanks. Deformation of surface will be given as boundary conditions at bottom of tanks.

(39)

(40)

39

### 地震波：様々な波長の成分の合成

39 震度７： 兵庫県 南部地震（1995） （神戸大） 新潟県 中越地震 （小千谷） 震度７： 新潟県 中越地震（2004） （小千谷） 兵庫県 南部地震 （神戸大） 十勝沖地震 （苫小牧） h=5% 震度４： 十勝沖地震（2003） （苫小牧） 震度 固有周期 速度応答スペクトル シミュレーション可能範囲（1s<T）

(41)
(42)

## 地盤，タンクモデル

(43)

42 42 42

### 種類のコミュニケータの生成

meshGLOBAL%MPI_COMM basememt #0 basement #1 basement #2 basement #3 meshBASE%MPI_COMM tank #0 tank #1 tank #2 tank #3 tank #4 tank #5 tank #6 tank #7 tank #8 meshTANK%MPI_COMM meshGLOBAL%my_rank= 0~3 meshBASE%my_rank = 0~3 meshGLOBAL%my_rank= 4~12 meshTANK%my_rank = 0~ 8 meshTANK%my_rank = -1 meshBASE%my_rank = -1 meshGLOBAL%MPI_COMM basememt #0 basement #1 basement #2 basement #3 meshBASE%MPI_COMM basememt #0 basement #1 basement #2 basement #3 meshBASE%MPI_COMM tank #0 tank #1 tank #2 tank #3 tank #4 tank #5 tank #6 tank #7 tank #8 meshTANK%MPI_COMM tank #0 tank #1 tank #2 tank #3 tank #4 tank #5 tank #6 tank #7 tank #8 meshTANK%MPI_COMM meshGLOBAL%my_rank= 0~3 meshBASE%my_rank = 0~3 meshGLOBAL%my_rank= 4~12 meshTANK%my_rank = 0~ 8 meshTANK%my_rank = -1 meshBASE%my_rank = -1

(44)
(45)
(46)

45

### 完了コード

implicit REAL*8 (A-H,O-Z)

include 'mpif.h‘

integer :: PETOT, my_rank, ierr

call MPI_INIT (ierr)

call MPI_COMM_SIZE (MPI_COMM_WORLD, PETOT, ierr ) call MPI_COMM_RANK (MPI_COMM_WORLD, my_rank, ierr )

write (*,'(a,2i8)') 'Hello World FORTRAN', my_rank, PETOT

call MPI_FINALIZE (ierr)

stop end

(47)

(48)

### 過去のある時間からの経過時間（秒数）

real(kind=8):: Stime, Etime

Stime= MPI_WTIME ()

do i= 1, 100000000 a= 1.d0

enddo

Etime= MPI_WTIME ()

write (*,'(i5,1pe16.6)') my_rank, Etime-Stime

(49)

(50)

### 時間計測精度（単位：秒）

implicit REAL*8 (A-H,O-Z) include 'mpif.h' … TM= MPI_WTICK () write (*,*) TM … double Time; … Time = MPI_Wtick();

printf("%5d%16.6E¥n", MyRank, Time); …

(51)

(52)

(53)

(54)

(55)

(56)

(57)

(58)

(59)

(60)

(61)

MPI Programming

(62)

MPI Programming

(63)

(64)

(65)

(66)

### メッセージのデータタイプ

FORTRAN MPI_INTEGER, MPI_REAL, MPI_DOUBLE_PRECISION, MPI_CHARACTER etc. C MPI_INT, MPI_FLOAT, MPI_DOUBLE, MPI_CHAR etc

### 計算の種類

MPI_MAX, MPI_MIN, MPI_SUM, MPI_PROD, MPI_LAND, MPI_BAND etc

### 完了コード

Reduce P#0 P#1 P#2 P#3 A0 P#0 B0 C0 D0 A1 P#1 B1 C1 D1 A2 P#2 B2 C2 D2 A3 P#3 B3 C3 D3 A0 P#0 B0 C0 D0 A1 P#1 B1 C1 D1 A2 P#2 B2 C2 D2 A3 P#3 B3 C3 D3

op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3

(67)

(68)

(69)

(70)

### メッセージのデータタイプ

FORTRAN MPI_INTEGER, MPI_REAL, MPI_DOUBLE_PRECISION, MPI_CHARACTER etc. C MPI_INT, MPI_FLOAT, MPI_DOUBLE, MPI_CHAR etc.

### 完了コード

A0 P#0 B0 C0 D0 P#1 P#2 P#3 A0 P#0 B0 C0 D0 P#1 P#2 P#3 Broadcast A0 P#0 B0 C0 D0 A0 P#1 B0 C0 D0 A0 P#2 B0 C0 D0 A0 P#3 B0 C0 D0 A0 P#0 B0 C0 D0 A0 P#1 B0 C0 D0 A0 P#2 B0 C0 D0 A0 P#3 B0 C0 D0

(71)

### 完了コード

P#2 P#3 A1 B1 C1 D1 A2 P#2 B2 C2 D2 A3 P#3 B3 C3 D3 A1 B1 C1 D1 A2 P#2 B2 C2 D2 A3 P#3 B3 C3 D3

op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3 op.A0-A3 op.B0-B3 op.C0-C3 op.D0-D3

(72)

MPI Programming

(73)

(74)

(75)

MPI Programming

(76)

(77)

(78)

(79)

(80)

(81)

(82)

(83)

(84)

(85)

(86)

(87)

(88)

(89)

(90)

Updating...

Updating...