user "starbed" "[email protected]"
project "starproj"
rbhfile "master.his"
encd ipaddr "172.16.0.208"
ipaddrrange "192.168.0.0/16"
sparenodemin 0 sparenoderatio 100 assure pairnum = 3 export pairnum wolinterval 2000 nodenum = pairnum * 2 export nodenum
workdir="/var/tmp/"
bindir="/root/exp/"
pathifscan=bindir+"/ifscan"
pathnetperf="/usr/local/netperf/netperf"
pathnetserver="/usr/local/netperf/netserver"
epoch=time() export workdir export bindir export pathifscan export pathnetperf export pathnetserver export epoch
図 8.4: 評価実験用の変数定義部
SpringOSの実行に必要となる変数と、実験に利用する変数を定義し ている。
nodeclass svclass { method "HDD"
disktype "IDE"
partition 2 ostype "FreeBSD"
diskimage "ftp://usr:[email protected]/sintcla206-rad0s2-200701161207.gz"
netif media gigabitethernet scenario {
callw "/usr/sbin/ntpdate" "172.16.254.165"
chdir workdir
callw "/sbin/ifconfig" "-a"
netiffit pathifscan
callw "/sbin/ifconfig" self.netif[0].rname self.netif[0].ipaddr callw "/sbin/ifconfig" "-a"
callw "/bin/ls" "-l" pathnetserver callw "/usr/bin/pkill" "-9" "netserver"
call pathnetserver send "ssetupdone"
loop { recv x msgswitch x { "quit" {
callw "/usr/bin/pkill" "-9" "netserver"
call "/sbin/shutdown" "-p" "now"
} } } } }
図 8.5: 評価実験用設定記述 server（netserver）用クラス定義
SpringOSでノードおよびネットワークを定義するには、クラスの定義 を行う。この部分は、netserverを実行するためのクラス定義。ノード に要求される条件と、導入されるべきディスクイメージおよび、ノー ドの設定とシナリオ実行のためのノードシナリオが記述されている。
起動するだけであったが、本クラスでは、netserverが動作するノードのIPアドレ スをmaster から受取り、そのIPアドレスへの疎通確認のためのpingや、出力さ れたログファイルを管理用ノードにアップロードを行う。
図 8.7はネットワーククラスの定義である。SpringOSではネットワーククラス の定義としては基本的にメディアを指定する。利用するIPアドレスの範囲も指定 できるが、これはインスタンスに指定した方がわかりやすいことが多いためあま り利用されない。
図8.8では、これまでに説明したクラスのインスタンスを生成している。“svclass”
のインスタンス”server”と”clclass”のインスタンス”client”、“ethclass”のインス タンス”ethnet”をそれぞれ”pairnum”個生成している。“pairnum”は図8.4で示し たとおり”assure”で指定されているため、コマンドラインから指定できる。今回 のようにノード台数を変更して繰り返し実験を行う際には有用である。
図 8.9は、実験トポロジの定義部である。まず、それぞれのネットワークが利 用するIPアドレスの範囲を“ethnet[i].ipaddrrange”に設定している。これにより、
対象のネットワークに所属する各実験用ノードのネットワークインターフェースに 指定された範囲からIPアドレスが自動的割り当てられる。また、各ノードのネッ トワークインターフェースを、対象のネットワークに”attach”することにより、所 属するネットワークを指定している。どちらの設定とも”for”文を利用することに より効率よく設定できる。
図8.10は、ノードの協調用に利用されるグローバルシナリオである。“sync”を 利用すると、ブロック内に書かれたすべての条件がそろうまでグローバルシナリ オの進行を停止できる。ここでは、すべてのserverノードからの”ssetupdone”と、
すべてのclientノードからの”csetupdone”を受け取るまでシナリオを停止する。条 件がそろうと、すべてのclientノード群に、そのノードに対応するserverのIPア ドレスを送信する。この後、すべてのclientノードから”cdone”メッセージが届く までシナリオ進行を停止し、条件がそろえば、”quit”をserverノード群に送信し、
シナリオ実行を終了する。
図8.11はStarBED施設で提供している管理用サーバなどに関する設定記述であ
る。基本的にあまり変更されないため、別ファイルに用意することが多い。今回、
リソースマネージャはmasterが動作する管理用ノードで動作させた。その他には
nodeclass clclass { method "HDD"
disktype "IDE"
partition 2 ostype "FreeBSD"
diskimage "ftp://usr:[email protected]/sintcla206-rad0s2-200701161207.gz"
netif media gigabitethernet scenario {
repfile=self.rname+"-n"+tostring(nodenum)+"-"+tostring(epoch)+".out"
chdir workdir
callw "/usr/sbin/ntpdate" "172.16.254.165"
callw "/sbin/ifconfig" "-a"
netiffit pathifscan
callw "/sbin/ifconfig" self.netif[0].rname self.netif[0].ipaddr callw "/sbin/ifconfig" "-a"
callw "/bin/ls" "-l" pathnetperf send "csetupdone"
recv dst
callw "/bin/ping" "-c" "10" dst
callw "/bin/date" "+#%Y%m%d_%H%M%S" > repfile
callw "/bin/date" "-u" "+#%Y%m%d_%H%M%S UTC" >> repfile callw pathnetperf "-H" dst >> repfile
callw "/bin/cat" repfile
netput repfile "ftp://install:[email protected]/"
send "cdone"
call "/sbin/shutdown" "-p" "now"
} }
図 8.6: 評価実験用設定記述 client（netperf）用クラス定義
netperf を実行するためのクラス定義。netserver用のクラス定義と
同様にログのため、日付の出力なども行っている。“netput”を利用 することによりFTPでログファイルを管理用ノードにアップロード する。
netclass ethclass { media gigabitethernet }
図 8.7: 評価実験用設定記述 ネットワーククラス定義
ネットワークのクラス定義。基本的にはネットワークのメディアの指 定のみが必要である。
nodeset client class clclass num pairnum nodeset server class svclass num pairnum netset ethnet class ethclass num pairnum
図 8.8: 評価実験用設定記述 インスタンス生成部
すでに定義したクラスを利用して、ノード、ネットワークともインス タンスを生成している。
for(i=0;i<pairnum;i++){
ethnet[i].ipaddrrange = "192.168."+tostring(i)+".0/24"
}
for(i=0;i<pairnum;i++){
attach server[i].netif[0] ethnet[i]
attach client[i].netif[0] ethnet[i]
}
図 8.9: 評価実験用設定記述 トポロジ設定部
実験トポロジの設定部。ネットワークインスタンスが利用するIPア ドレスの範囲と、それぞれのインスタンスに所属する各ノードのネッ トワークインターフェースを指定している。
scenario { sync {
multimsgmatch server "ssetupdone"
multimsgmatch client "csetupdone"
}
for(i=0;i<pairnum;i++) {
send client[i] haddr(server[i].netif[0].ipaddr) }
sync {
multimsgmatch client "cdone"
}
multisend server "quit"
}
図 8.10: 評価実験用設定記述 グローバルシナリオ
ノードの協調のためにmasterが動作する管理ノードで実行されるグ ローバルシナリオ。基本的にはメッセージのやり取りを制御する。
FNCPやDMAN、WoL AgentのIPアドレスや、各スイッチのファームウェアの 種類やIPアドレスなどが記述される他、ディスクイメージ導入時に利用する、NI が動作する専用のディスクイメージやカーネルの情報が記述されている。
rmanager ipaddr "127.0.0.1" port "1234"
wolagent ipaddr "172.16.1.101" port "5959" ipaddrrange "172.16.0.0/24"
wolagent ipaddr "172.16.1.101" port "5959" ipaddrrange "172.16.1.0/24"
fncp ipaddr "172.16.3.101"
tftpdman ipaddr "172.16.3.101"
nidiskimage "FreeBSD/ni04.fs"
nikernel "recover_system/kernel_recover"
pxeloader "recover_system/pxeboot-nohang"
setuptimeout total 86400 warm 5 swtype name "silaswa001" type "IOS"
swtype name "silaswb001" type "IOS"
swtype name "silaswb002" type "IOS"
swtype name "silaswb003" type "Ironware"
swtype name "silaswc001" type "Ironware"
swtype name "silaswc002" type "Ironware"
swtype name "silaswc003" type "Ironware"
swtype name "silaswc004" type "Ironware"
図 8.11: 評価実験用設定記述 StarBED基本設定
StarBEDの施設としてあまり変更が行われない設定は、このような 別ファイルとして用意される。基本的には各サーバのIPアドレスや スイッチの種類、NIが起動するディスクイメージやカーネルの情報 が記述されている。