No11 Handson Multinode and Resource Control

(1)

基盤構築演習

Cloud Infrastructure Design and Deployment

11. チー OpenStackとー制御の演習

2017.v1

(2)

 本演習講義内容元ー上稼働

OpenStack _{環境構築}

 構築環境上複数ン構成中構成

仮想ワー動い確認ワー隔離い理解深

 演習環境い

o _{環境初期化}

o _{演習環境構築}

 ー OpenStack環境構築

 OpenStack上へ環境構築

 複数ー仮想ワー確認

 ーー設定配置順序差

 ン演習：

o _{ーー} _設定

2

(3)

演習環境にいて

(4)

演習環境の概要

 演習用 OpenStack環境上各自割当ン内演習行い

o _{各環境生徒} _独立 _い

 最初演習実施前共通演習環境構築実施必要あ

 前回演習環境残い場合演習環境削除方法実施くい

4 openstack

tenant-XX / student-XX tenant-YY / student-YY _・・・

物理ーーワー装置ー

資源層

抽象化層

ン

( )

仮想ーー

内部ワー

192.168.199.0/24

共通演習環境

演習環境 _演習環境

共通演習環境構築実施

構築：第N回演習環境構築作成

削除：演習環境削除方法実施

各自端末操作行う

(5)

演習環境の削除方法

各演習回の前に前回の環境を削除すめに実施

(6)

演習環境を構築す前の状態

 各演習環境構築前以下状態い事確認くい

o _default _以外 _存在 _{いい}

 ^default 共通演習環境作成

o _キ _{ー以外} _ー _存在 _{いい}

 以下 3 画面確認くい

o _何 _{ーや} _残 _{い場合} _{次項手順削除} _く _い

6

default

存在い

Security Groups _以

外消費いい

3 _存在

い

(7)

Stacks _の確認

 以下確認

o Orchestration _{→ Stacks} default _{以外存在} _{いい}

 ^default 以外存在い場合対象削除

o _削除 _default _以外 _選択 Delete Stacks _押下

default

存在い

例 ^hands-on-3 選

択

(8)

ー消費量の確認

 以下確認

o _Compute _{→ Overview} Limit Summary Security Groups _{以外消費}

0 _状態 _い

 ー残い場合前項手順 ^Stacks 確認不要

削除くい

 ー残い場合次項手順個別ー削除

くい

8

Security Groups _{以外消費}

いい ⁰ 状態確認

(9)

個別のー削除

 ー一覧表示残いー削除

o _{以下削除例}

ンン削除

Floating IP _削除

キー削除

(10)

ッワーの状態

 以下確認

o _Network → Network Topology [public] - [Ext-Router] - [work-net] _状態

い

 余分ー作成い場合個別削除く

い

10

3 _存在

い

(11)

第11回演習環境の構築

(12)

ッの起動

 左ー Orchestration _{→ Stacks} _選択

 後 Launch Stack _押下

12 第11回

(13)

ンプーの指定

 Template Source URL _指定

 Template URL http://<<repo_ip>>/hands-on/11_handson.yaml _指定

o <<repo_ip>> _{部分講師} _{値指定あ}

 値設定 ^Next 押下

URL _選択

http://<<repo_ip>>/hands-on/11_handson.yaml

第11回

(14)

メーーの指定

 ^{Stack Name} hands-on-11 _入力

 ^Password 自分 OpenStack ワー入力

 hands-on repository server _{ーー IP} _入力

o _IP _講師 _{指示あ}

14 hands-on-11

自分 OpenStack ワー

入力

ーー IP

起動ーー

ワー設定

後ン使用

第11回

(15)

正常終了の確認

 10〜15分前後作成完了 Create Complete

o _{設定完了待間} _{後演習進方} _い _キ _確認 _{いく} _い

 失敗場合 hands-on-11 _選択 Delete Stack _押下 _削除

 後再度作成や直くい

第11回

(16)

環境の確認

 ^Network → Network Topology 選択作成ワー環

境確認

 正常作成完了以下状態い

16 第11回

(17)

ーーの確認

 ^Compute → Instances 選択作成 ¹ 台ーー情報確

認

o ₄ _台 _{ーー起動} _い _確認

第11回

(18)

ン情報の確認

 作成ーーへン情報確認

 Orchestration → Stacks → hands-on-11 → Overview 選択

い

o _情報 _{後演習何回必要} _新規 _ン _開い _{く演習}

ー進

18 第11回

(19)

ン情報

 ^Overview 必要

情報確認

o _instance

 ーー IP

 ーー名

 Floating IP

 各自ー PC ^IP

対 ^SSH 行い

o _password

 上記ーーンワー

 ーー名 ^centos

 ワー自分設定値

表示

o private_key

 各ンン利用

秘密鍵

 ワー認証行え各PC

SSH _{ンへ設定} _く

ワー入力ン

可能

第11回

(20)

チー OpenStack環境の構築

20

(21)

演習の概要

 今回演習予 OpenStack環境構築完了い

o 演習環境構築行う以下状態い

o _{環境利用} _仮想 _ワー構成や資源管理仕組い理解い

 複数ー ^OpenStack 環境構築際基本的手順 All-in-One 大

差異あ

o _{興味あ方} _{環境構築} _利用 _参照 _く _い

o _構造 _い _{後講義説明行い}

外部ワー (public)

仮想ーー

ンーン openstack-cc

( _ン _{ーー)}

eth0 eth1

論理

work-net

Port

floating-net

論理 Port

openstack- node1 openstack-

node2

eth0

論理 Port

eth0

論理 Port 論理

Port

192.168.199.10 192.168.199.22 192.168.199.21 192.168.199.20

172.16.100.200 172.16.100.201 172.16.100.202 172.16.100.203 172.16.100.204

(22)

演習環境の確認

 ンーーー経由演習用OpenStackへン行い

o _{ン先 IP} Orhecstraion _{→ Stacks} Overview _確認

くい

 ン成功環境確認行い

22

# ssh centos@xx.xx.xx.xx

The authenticity of host '157.1.141.220 (157.1.141.220)' can't be established. ECDSA key fingerprint is c2:e3:e9:7b:f5:8e:67:4b:23:73:6a:4e:b9:d4:d0:11. Are you sure you want to continue connecting (yes/no)? yes

Warning: Permanently added '157.1.141.220' (ECDSA) to the list of known hosts. centos@157.1.141.220's password:

[centos@handson11-console ~]$

[centos@handson11-console ~]$ ssh root@192.168.199.20

The authenticity of host '192.168.199.20 (192.168.199.20)' can't be established. ECDSA key fingerprint is 4a:43:12:8a:ab:39:d7:ba:dc:f3:e2:09:2f:4c:8f:2f.

Are you sure you want to continue connecting (yes/no)? yes

Warning: Permanently added '192.168.199.20' (ECDSA) to the list of known hosts. Last login: Sun May 7 11:28:58 2017 from 192.168.199.10

[root@handson11-openstack-cc ~]# source keystonerc_admin [root@handson11-openstack-cc ~(keystone_admin)]# nova list +----+---+---+---+---+---+

ンーーー経由 OpenStack _ン

ーーへン

起動い OpenStack ー出い確認

(23)

OpenStack _{上への環境構築}

(24)

演習の概要

 構成 ^OpenStack 上以下環境構築い

o _ン _{同設定} _ワー _持 _{ン内} _{台仮想}

ン配置

o _{台仮想} _{ン別々ホ} _node1 _node2 _へ配置 _う _ン

ン起動

 う環境 ^OpenStack う動作い確認

24 openstack-node-2

openstack-node-1

ン 001 ン 002

仮想ン

10.10.10.0/24 10.10.10.0/24

(25)

演習の流

 ー登録

 外部ワー作成

 ーン設定

 ンーー作成

 仮想ワー設定

 allowed-address-pairs 設定

 仮想ン起動

(26)

メーとーーの登録

 起動ー新規ーー登録

26

[root@openstack-cc ~]# source keystonerc_admin

[root@openstack-cc ~(keystone_admin)]# glance --os-image-api-version 1 image-create --name "CentOS7" \ --disk-format qcow2 --container-format bare \

--copy-from http://reposerver/images/CentOS-7-x86_64-GenericCloud.qcow2 \ --is-public True --is-protected True --progress

[root@openstack-cc ~(keystone_admin)]# openstack image list +---+---+---+

| ID | Name | Status |

+---+---+---+

| 5245ce1c-2e7d-4a04-b103-f47710886833 | CentOS7 | active | +---+---+---+

[root@openstack-cc ~(keystone_admin)]# nova flavor-create my.standard 99 1024 10 1 [root@openstack-cc ~(keystone_admin)]# nova flavor-list

+----+---+---+---+---+---+---+---+---+

| 1 | m1.tiny | 512 | 1 | 0 | | 1 | 1.0 | True |

| 2 | m1.small | 2048 | 20 | 0 | | 1 | 1.0 | True |

| 3 | m1.medium | 4096 | 40 | 0 | | 2 | 1.0 | True |

| 4 | m1.large | 8192 | 80 | 0 | | 4 | 1.0 | True |

| 5 | m1.xlarge | 16384 | 160 | 0 | | 8 | 1.0 | True |

| 99 | my.standard | 1024 | 10 | 0 | | 1 | 1.0 | True | +----+---+---+---+---+---+---+---+---+

openstack-cc _上で実行

(27)

外部ッワーの作成

 外部ワー作成

[root@openstack-cc ~(keystone_admin)]# neutron net-create --router:external public

[root@openstack-cc ~(keystone_admin)]# neutron subnet-create --name public-subnet \

--allocation-pool start=172.16.100.200,end=172.16.100.204 \ --disable-dhcp \

--gateway 172.16.100.254 \ public 172.16.100.0/24

[root@openstack-cc ~(keystone_admin)]# neutron net-list

+---+---+---+

| id | name | subnets | +---+---+---+

| 268c3211-c195-451a-a06b-782d30553289 | public | 294ef643-2498-402a-a7ed-db5f1bc51067 172.16.100.0/24 | +---+---+---+

(28)

ベーン AZ の設定

 初期状態 ^nova いうAZ 作成全ホ属い

28

[root@openstack-cc ~(keystone_admin)]# nova hypervisor-list +----+---+---+---+

| 1 | openstack-node-2.novalocal | up | enabled |

| 2 | openstack-node-1.novalocal | up | enabled | +----+---+---+---+

[root@openstack-cc ~(keystone_admin)]# nova availability-zone-list

+---+---+

| Name | Status | +---+---+

| internal | available |

| |- openstack-cc.novalocal | |

| nova | available |

| |- openstack-node-1.novalocal | |

nova _認識 _い _ー _ーホ

確認

標準 AZ 確認

nova _{いうAZ 2台ホ}

所属い

(29)

AZ _の作成

 AZ ホーいう機能ホ束実現

 ー作成い

 ー ^AZ 作成意外様々利用方法あ

o _詳細 _参照 _く _い

o https://wiki.openstack.org/wiki/Host-aggregates

[root@openstack-cc ~(keystone_admin)]# nova aggregate-create ag-az1 AZ1 +----+---+---+---+---+

+----+---+---+

| Id | Name | Availability Zone | +----+---+---+

| 1 | ag-az1 | AZ1 |

| 2 | ag-az2 | AZ2 | +----+---+---+

ー ag-az1 作成 ^AZ1 いう名

前い

ー ag-az2 作成 ^AZ2 いう名

前い

(30)

AZ _へのホ _追加

 作成ーへホ追加

30

[root@openstack-cc ~(keystone_admin)]# nova aggregate-add-host ag-az1 handson11-openstack-node1.novalocal Host openstack-node-1.novalocal has been successfully added for aggregate 1

+----+---+---+---+---+

| 1 | ag-az1 | AZ1 | 'openstack-node-1.novalocal' | 'availability_zone=AZ1' | +----+---+---+---+---+

[root@openstack-cc ~(keystone_admin)]# nova aggregate-add-host ag-az2 handson11-openstack-node2.novalocal Host openstack-node-2.novalocal has been successfully added for aggregate 2

+----+---+---+---+---+

+---+---+

| Name | Status | +---+---+

| internal | available |

| |- openstack-cc.novalocal | |

| AZ2 | available |

| AZ1 | available |

ーへホ追

加

ーへホ追

加

AZ _{状態変わ} 確認

(31)

補足：のベーン

 先手順作成ーンンン作成時指定

ンン作成先ホンー

 AZ 利用配置先ンーーーー中 AZ

実現い

 ンン起動時 AZ 与え場合 ^AZ キ

 AZ 利用配置ンーン演習動作確認

(32)

ンとーーを作成

 ンーー追加

32

[root@openstack-cc ~(keystone_admin)]# keystone role-create --name student [root@openstack-cc ~(keystone_admin)]# keystone role-list

+---+---+

| id | name | +---+---+

| 9fe2ff9ee4384b1894a90878d3e92bab | _member_ |

| 70ae0d3f61fd4cfb974d17a5eab72312 | admin |

| 8b4115f0cbd54c8cb4eac401c178454b | student | 省略

[root@openstack-cc ~(keystone_admin)]# for i in 001 002 do

keystone tenant-create --name tenant-${i}

keystone user-create --name student-${i} --pass "pass-${i}"

keystone user-role-add --user student-${i} --tenant tenant-${i} --role student done

[root@openstack-cc ~(keystone_admin)]# keystone tenant-list +---+---+---+

| id | name | enabled | +---+---+---+

| 95013bff20904cb090b32128e6403ee3 | admin | True |

| 7b48e2a88bf64279a02199cf5bfc2c1c | services | True |

| 64b8212f72d544eb8395a9aa6880825f | tenant-001 | True |

| ae6dbcddc58748a29ba25bd2c48d44be | tenant-002 | True | +---+---+---+

[root@openstack-cc ~(keystone_admin)]# keystone user-list

+---+---+---+---+

ン作成

ンへーー追加

tenant-001/student-001 tenant-002/student-002

(33)

補足：keystoneコン実行時の警告メッセーにいて

 keystone ン実行以下警告表示

 現在OpenStack 各種ン (nova,keystone等) ^openstack

ンいうン形態へ集約進 ^keystone 既移行

完了い以降 openstack ン使くいいう

ー

o _ン _移行状況 _あ

/usr/lib/python2.7/site-packages/keystoneclient/shell.py:65: DeprecationWarning: The keystone CLI is deprecated in favor of python-openstackclient. For a Python library, continue using python-keystoneclient.

'python-keystoneclient.', DeprecationWarning)

(34)

仮想ッワーを作成(student001)

 ン 001,002 同設定ワー作成

o _実行 _いーー student-00X 注意くい

34

[root@openstack-cc ~(keystone_admin)]# wget http://reposerver/hands-on/openrc_student001 [root@openstack-cc ~(keystone_admin)]# source openrc_student001

[root@openstack-cc ~(student001)]# neutron router-create Ext-Router

[root@openstack-cc ~(student001)]# neutron router-gateway-set Ext-Router public

[root@openstack-cc ~(student001)]# neutron net-create work-net

[root@openstack-cc ~(student001)]# neutron subnet-create --ip-version 4 --gateway 10.10.10.254 --name work-subnet \ --dns-nameserver 8.8.8.8 --dns-nameserver 8.8.4.4 work-net 10.10.10.0/24 [root@openstack-cc ~(student001)]# neutron router-interface-add Ext-Router work-subnet

[root@openstack-cc ~(student001)]# nova keypair-add temp-key-001 | tee temp-key-001.pem [root@openstack-cc ~(student001)]# chmod 600 temp-key-001.pem

[root@openstack-cc ~(student001)]# neutron security-group-create open_all --description "allow all communications"

[root@openstack-cc ~(student001)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol icmp \ --remote-ip-prefix 0.0.0.0/0 open_all

[root@openstack-cc ~(student001)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol tcp \ --port-range-min 1 --port-range-max 65535 --remote-ip-prefix 0.0.0.0/0 open_all [root@openstack-cc ~(student001)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol udp \

--port-range-min 1 --port-range-max 65535 --remote-ip-prefix 0.0.0.0/0 open_all openstack-cc _上で実行

(35)

仮想ッワーを作成(student002)

 ン 001,002 同設定ワー作成

o _実行 _いーー student-00X 注意くい

[root@openstack-cc ~(keystone_admin)]# wget http://reposerver/hands-on/openrc_student002 [root@openstack-cc ~(keystone_admin)]# source openrc_student002

[root@openstack-cc ~(student002)]# neutron router-create Ext-Router

[root@openstack-cc ~(student002)]# neutron router-gateway-set Ext-Router public

[root@openstack-cc ~(student002)]# neutron net-create work-net

[root@openstack-cc ~(student002)]# neutron subnet-create --ip-version 4 --gateway 10.10.10.254 --name work-subnet \ --dns-nameserver 8.8.8.8 --dns-nameserver 8.8.4.4 work-net 10.10.10.0/24 [root@openstack-cc ~(student002)]# neutron router-interface-add Ext-Router work-subnet

[root@openstack-cc ~(student002)]# nova keypair-add temp-key-002 | tee temp-key-002.pem [root@openstack-cc ~(student002)]# chmod 600 temp-key-002.pem

[root@openstack-cc ~(student002)]# neutron security-group-create open_all --description "allow all communications"

[root@openstack-cc ~(student002)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol icmp \ --remote-ip-prefix 0.0.0.0/0 open_all

[root@openstack-cc ~(student002)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol tcp \ --port-range-min 1 --port-range-max 65535 --remote-ip-prefix 0.0.0.0/0 open_all [root@openstack-cc ~(student002)]# neutron security-group-rule-create --direction ingress --ethertype IPv4 --protocol udp \

--port-range-min 1 --port-range-max 65535 --remote-ip-prefix 0.0.0.0/0 open_all openstack-cc _上で実行

(36)

台目のンンを起動ン 001

 ^AZ 指定ンン起動いホン

ン起動確認う

36

[root@openstack-cc ~(keystone_admin)]# source openrc_student001

[root@openstack-cc ~(student001)]# nova-manage vm list

[root@openstack-cc ~(student001)]# function get_uuid () { cat - | grep " id " | awk '{print $4}'; } [root@openstack-cc ~(student001)]# export MY_WORK_NET=`neutron net-show work-net | get_uuid`

[root@openstack-cc ~(student001)]# echo $MY_WORK_NET debda615-21b1-47be-a1ae-beda0f33cf75

[root@openstack-cc ~(student001)]# wget -O userdata_setpass.txt http://reposerver/hands-on/userdata_setpass.txt

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \

--key-name temp-key-001 --security-groups open_all \ --user-data userdata_setpass.txt \

--nic net-id=${MY_WORK_NET} test-vm-1

instance node type state launched image

test-vm-1 openstack-node-1.novalocal my.standard building None 819f6604-de87-4bce-ac70-885d35b20d7c openstack-cc _上で実行

student001 _作業

ンン一覧管理者ー表示ン

時点ンン存在

ワー ^password 設定 ^useradata 使い

1_台目 _ン _{ン node-1}

起動確認 ^Note_ン _ン Active_状態 _{次手順進} _く

い

(37)

台目のンンを起動ン 001

 同くAZ 指定起動い今回ホ起動確認

う

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \

[root@openstack-cc ~(student001)]# nova-manage vm list

test-vm-2 openstack-node-2.novalocal my.standard building None 819f6604-de87-4bce-ac70-

885d35b20d7c test-vm-1 openstack-node-1.novalocal my.standard active 2015-12-01 08:28:28+00:00 819f6604-de87-4bce-ac70-885d35b20d7c

起動確認

Noteンン ^Active状態次手順進くい

(38)

台目のンンを起動ン 002

 次ン変更 ³ 台目起動

 ^AZ 指定ンン起動い

38

test-vm-1 openstack-node-1.novalocal my.standard building None 819f6604-de87-4bce-ac70- 885d35b20d7c

test-vm-2 openstack-node-2.novalocal my.standard active 2015-12-01 08:32:27+00:00 819f6604-de87-4bce-ac70- 885d35b20d7c

起動確認

student002 _作業

(39)

台目のンンを起動ン 002

 最後ンンン ^AZ 指定起動

起動確認

(40)

ンンの配置を確認

 ーー空容量多いホへ配置

いう動演習以下様動作

o _ン _{ン目}

 両ンー仮想ン起動いい他起動状況空多

いホ選

o _ン _{ン目}

 既ンン起動いホ空量少いンン持い

いホ選

o _ン _{ン目}

 ンン目同様

o _ン _{ン目}

 ンン目同様

o _ン演習ーー設定変え配置動確認

40

[root@handson11-openstack-cc ~(student-001)]# unset OS_USER_DOMAIN_NAME OS_PROJECT_DOMAIN_NAME OS_IDENTITY_API_VERSION OS_VOLUME_API_VERSION [root@openstack-cc ~(student002)]# source keystonerc_admin

[root@openstack-cc ~(keystone_admin)]# nova list --all

+---+---+---+---+---+---+---+

(41)

複数ーにま

仮想ッワーの確認

(42)

演習の概要

 本演習前演習作成ン環境実際ホ上う構成

確認い

42

？

(43)

演習の流

 ワー図作成

 ンーーい通信確認

 ワー図作成全体俯瞰う

o _{利用ー}

 plotnetcfg

 graphviz

[centos@console ~]$ cd

[centos@console ~]$ ssh root@192.168.199.20 plotnetcfg > cc.dot [centos@console ~]$ ssh root@192.168.199.21 plotnetcfg > node1.dot [centos@console ~]$ ssh root@192.168.199.22 plotnetcfg > node2.dot [centos@console ~]$ dot -Tpng cc.dot > cc.png

[centos@console ~]$ dot -Tpng node1.dot > node1.png [centos@console ~]$ dot -Tpng node2.dot > node2.png

[centos@console ~]$ sudo cp cc.png node1.png node2.png /var/www/html/ console _上で実行

plotnetcfg _ン _{ワー設定} 収集

収集ワー情報 Graphviz

使可視化

ンーーー httpd 起動

い公開用へ画像

ー

(44)

ッワーップ図例

44  ンー ^${FIP} へ以下図得

openstack-cc

openstack-node-1

openstack-node-2

(45)

ッワーップ図例

 以下見やく編集図

外部ーターや DHCP 関部分

All-in-One _同

こ部分 All-in-One

大く異い

(46)

コンーーをまい通信の確認

46  ンーー間転送 OpenFlow vxlan 実現い

こ部分内部を見い

(47)

br-tun _{のンー} _{ー構成}

 br-tun ^vxlan 転送ンーー作成い

 ンーー ^vxlan 受取設定ーホへ

転送行い

[centos@console ~]$ ssh root@192.168.199.21 [root@openstack-node-1 ~]# ovs-vsctl show 0057a055-40ba-413e-a508-b40fb8967771

Bridge br-int

fail_mode: secure Port "qvo26a3ca4b-6f"

tag: 1

Interface "qvo26a3ca4b-6f" Port patch-tun

Interface patch-tun type: patch

options: {peer=patch-int} Port br-int

Interface br-int type: internal Port "qvo256924b8-3c"

tag: 2

Interface "qvo256924b8-3c" Bridge br-tun

fail_mode: secure Port "vxlan-c0a86416"

Interface "vxlan-c0a86416" type: vxlan

options: {df_default="true", in_key=flow, local_ip="192.168.100.21", out_key=flow, remote_ip="192.168.100.22"} Port patch-int

Interface patch-int type: patch

options: {peer=patch-tun} Port "vxlan-c0a86414"

Interface "vxlan-c0a86414" type: vxlan

options: {df_default="true", in_key=flow, local_ip="192.168.100.21", out_key=flow, remote_ip="192.168.100.20"} Port br-tun

Interface br-tun type: internal ovs_version: "2.3.1"

openstack-node-1 _上で実行

転送先ホ

(48)

br-tun のOpenFlow構成

 br-tun ^OpenFlow 利用 ^br-int 側 vlan id vxlan idへ付替え操作行い

 ーンー確認

o _説明文 _{ー番号} _い _次項

48

[root@openstack-node-1 ~]# ovs-ofctl dump-flows br-tun NXST_FLOW reply (xid=0x4):

cookie=0x0, duration=15319.041s, table=0, n_packets=0, n_bytes=0, idle_age=15319, priority=0 actions=drop cookie=0x0, duration=15312.729s, table=0, n_packets=251, n_bytes=31418, idle_age=8293, priority=1,in_port=6 actions=resubmit(,4)

cookie=0x0, duration=15312.543s, table=0, n_packets=52, n_bytes=4926, idle_age=8228, priority=1,in_port=5 actions=resubmit(,4)

cookie=0x0, duration=15319.117s, table=0, n_packets=519, n_bytes=48378, idle_age=8263, priority=1,in_port=4 actions=resubmit(,2)

cookie=0x0, duration=15318.978s, table=2, n_packets=467, n_bytes=43380, idle_age=8263, priority=0,dl_dst=00:00:00:00:00:00/01:00:00:00:00:00 actions=resubmit(,20)

cookie=0x0, duration=15318.915s, table=2, n_packets=52, n_bytes=4998, idle_age=8885, priority=0,dl_dst=01:00:00:00:00:00/01:00:00:00:00:00 actions=resubmit(,22)

cookie=0x0, duration=15318.851s, table=3, n_packets=0, n_bytes=0, idle_age=15318, priority=0 actions=drop cookie=0x0, duration=15318.789s, table=4, n_packets=10, n_bytes=744, idle_age=9555, priority=0 actions=drop cookie=0x0, duration=9165.276s, table=4, n_packets=146, n_bytes=17703, idle_age=8302, priority=1,tun_id=0x5e actions=mod_vlan_vid:1,resubmit(,10)

cookie=0x0, duration=8913.296s, table=4, n_packets=147, n_bytes=17897, idle_age=8228, priority=1,tun_id=0x61 actions=mod_vlan_vid:2,resubmit(,10)

cookie=0x0, duration=15318.724s, table=10, n_packets=293, n_bytes=35600, idle_age=8228, priority=1

actions=learn(table=20,hard_timeout=300,priority=1,NXM_OF_VLAN_TCI[0..11],NXM_OF_ETH_DST[]=NXM_OF_ETH_SRC[],load :0->NXM_OF_VLAN_TCI[],load:NXM_NX_TUN_ID[]->NXM_NX_TUN_ID[],output:NXM_OF_IN_PORT[]),output:4

cookie=0x0, duration=15318.659s, table=20, n_packets=7, n_bytes=509, idle_age=8293, priority=0 actions=resubmit(,22)

cookie=0x0, duration=15318.592s, table=22, n_packets=14, n_bytes=1156, idle_age=8913, priority=0 actions=drop cookie=0x0, duration=8913.356s, table=22, n_packets=23, n_bytes=2218, idle_age=8293, dl_vlan=2

actions=strip_vlan,set_tunnel:0x61,output:6,output:5

cookie=0x0, duration=9165.336s, table=22, n_packets=22, n_bytes=2133, idle_age=8543, dl_vlan=1 actions=strip_vlan,set_tunnel:0x5e,output:6,output:5

openstack-node-1 _上で実行

vxlan id _いケッをvlan idへ付け替えー ¹⁰へ転送ー 4へケッを送ン

vxlan id _いケッをvlan idへ付

け替えー 6,5へ送信

(49)

OpenFlow _{のー番号}

 Open vSwitch 構成接続ンーー番号

ー番号持ー中番号指定い

o _{vxlan id} _い _{vlan id} _{付替え} _{ー 4へ転送}

o _{vlan id} _い _{vxlan id} _付与 _{ー 5,6へ転送}

[root@openstack-node-1 ~]# ovs-ofctl dump-ports br-tun vxlan- c0a86416

OFPST_PORT reply (xid=0x4): 1 ports

port 5: rx pkts=52, bytes=4926, drop=0, errs=0, frame=0, over=0, crc=0

tx pkts=45, bytes=4351, drop=0, errs=0, coll=0

[root@openstack-node-1 ~]# ovs-ofctl dump-ports br-tun vxlan- c0a86414

OFPST_PORT reply (xid=0x4): 1 ports

[root@openstack-node-1 ~]# ovs-ofctl dump-ports br-tun patch-int OFPST_PORT reply (xid=0x4): 1 ports

(50)

ーー設定に

配置順序の差

50

(51)

演習の概要

 本演習ーー重操作最容量少いホへ

仮想ン配置う設定動作確認

 Nova ーーンン配置先決定い

 配置先重決定

o _配置 _いホ _決定

o _重 _ホ _{台抽出}

 ホ最空容量多いホ

選

o _重 _計算際係数負値設定い

(52)

演習の流

 環境ーン

 ー上限値変更

 ーー設定変更

 ンン作成配置確認

52

(53)

演習の準備

 演習作成仮想ン削除

[centos@console ~]$ ssh root@192.168.199.20 [root@openstack-cc ~]# source keystonerc_admin

[root@openstack-cc ~(keystone_admin)]# nova list --all-tenants

+---+---+---+---+---+---+--- ---+

|

+---+---+---+---+---+---+--- ---+

+---+---+---+---+---+---+--- ---+

[root@openstack-cc ~(keystone_admin)]# for i in `nova list --all-tenants --minimal | grep test-vm | awk '{print

$2}'` do

nova delete ${i:?} done

[root@openstack-cc ~(keystone_admin)]# nova list --all-tenants +----+---+---+---+---+---+---+

全ンン削除

消えい環境あ場合個別以下実行

nova delete xxxxxx

(54)

ーの拡大

 ーー動作確認多数ンン起動 ^tenant-001 ー

上限上

54

[root@openstack-cc ~(keystone_admin)]# tenant=$(openstack project list | awk '/tenant-001/ {print $2}') [root@openstack-cc ~(keystone_admin)]# nova quota-show --tenant $tenant

+---+---+

| Quota | Limit | +---+---+

| instances | 10 |

| cores | 20 |

| ram | 51200 |

| floating_ips | 10 |

| fixed_ips | -1 |

| metadata_items | 128 |

| injected_files | 5 |

| injected_file_content_bytes | 10240 |

| injected_file_path_bytes | 255 |

～～省略～～

[root@openstack-cc ~(keystone_admin)]# nova quota-update --instances 30 $tenant [root@openstack-cc ~(keystone_admin)]# nova quota-update --cores 120 $tenant [root@openstack-cc ~(keystone_admin)]# nova quota-update --ram 512000 $tenant [root@openstack-cc ~(keystone_admin)]# nova quota-show --tenant $tenant

+---+---+

| Quota | Limit | +---+---+

| instances | 30 |

| cores | 120 |

| ram | 512000 |

| floating_ips | 10 |

| fixed_ips | -1 |

| metadata_items | 128 |

| injected_files | 5 |

| injected_file_content_bytes | 10240 |

| injected_file_path_bytes | 255 |

～～省略～～

クータ値を確認い

インン数コア数数クータを

変更い

変更後値を確認い

(55)

ーーの設定を変更

 重計算値使用う設定

o ： nova.scheduler.weights.all_weighers 利用利用可能重計

算式全利用設定

o nova.scheduler.weights.ram.RAMWeigher _変更

 上重値値設定ーー再起動

o ram_weight_multiplier

 ^1.0 ^-1.0 設定

 合わ以下値設定値重付行い降順ーホ

上位何個取出いうー

 取出ホンホ決定い

o scheduler_host_subset_size

o _今回 _{ーー紹介} _掲載 _い

[root@openstack-cc ~(keystone_admin)]# openstack-config --set /etc/nova/nova.conf \ DEFAULT scheduler_weight_classes nova.scheduler.weights.ram.RAMWeigher

[root@openstack-cc ~(keystone_admin)]# openstack-config --set /etc/nova/nova.conf DEFAULT ram_weight_multiplier -1.0

[root@openstack-cc ~(keystone_admin)]# openstack-config --set /etc/nova/nova.conf DEFAULT scheduler_host_subset_size 1

[root@openstack-cc ~(keystone_admin)]# systemctl restart openstack-nova-scheduler openstack-cc _上で実行

ケューーロを再起動設定

を反映させ

(56)

初期状態の確認

 tenant-001 作業進

 nova 構成管理DB 直接参照詳細利用状況把握

56

[root@openstack-cc ~(keystone_admin)]# source openrc_student001 [root@openstack-cc ~(student001)]# nova list

+----+---+---+---+---+---+

[root@openstack-cc ~(student001)]# function get_uuid () { cat - | grep " id " | awk '{print $4}'; } [root@openstack-cc ~(student001)]# export MY_WORK_NET=`neutron net-show work-net | get_uuid`

[root@openstack-cc ~(student001)]# wget -O userdata_setpass.txt http://reposerver/hands-on/userdata_setpass.txt

[root@openstack-cc ~(student001)]# mysql -uroot nova \

-e 'select host, vcpus_used, free_ram_mb, memory_mb_used, memory_mb, free_disk_gb, local_gb_used, local_gb from compute_nodes;'

+---+---+---+---+---+---+--- ----+---+

+---+---+---+---+---+---+--- ----+---+

| openstack-node-1.novalocal | 0 | 7311 | 512 | 7823 | 99 | 0 | 99 |

+---+---+---+---+---+---+--- ----+---+

student-001 _{認証情報を設定}

nova _ータベー _各ホ _{ー状況確認}

こ時点 ^xxx_used ¹ 台インタンを起動いい全ロ

い

(57)

台目の起動

 Nova 管理ンーー状態確認ンン起動

い

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \ --key-name temp-key-001 --security-groups open_all \

--user-data userdata_setpass.txt \ --nic net-id=${MY_WORK_NET} test-vm-1

[root@openstack-cc ~(student001)]# nova-manage vm list | grep -v deleted

+---+---+---+---+---+---+--- ----+---+

nova-manage _削除済 _{インタン} _情

報表示さここ表示を除外い

起動インタン分けー消費さいこ確認

(58)

台目の起動

 台目起動後ホー使用状況注目くい

 消費いー量選択ーー分

58

+---+---+---+---+---+---+--- ----+---+

(59)

台目の起動

 同く起動ホー使用量注目

 台目起動 ^vcpu ⁴ 消費ー ^CPU 数超えい

際う注目 ⁴ 台目以降起動くい

+---+---+---+---+---+---+--- ----+---+

| openstack-node-1.novalocal | 3 | 4239 | 3584 | 7823 | 169 | openstack-cc _上で実行

(60)

～台目の起動

60

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \ --key-name temp-key-001 --security-groups open_all --user-data userdata_setpass.txt \ --nic net-id=${MY_WORK_NET} test-vm-4

+---+---+---+---+---+---+--- openstack-cc _上で実行

搭載量インタン消費

多く値イい

搭載vcpuを大く超えノー 1 起動いこーーコッ設定さ

い後述

(61)

～台目を起動

 起動前ホ起動考えくい

[root@openstack-cc ~(keystone_admin)]# nova-manage vm list | grep -v deleted

test-vm-1 openstack-node-1.novalocal my.standard active 2015-12-01 17:03:15+00:00 819f6604-de87-4bce-ac70- openstack-cc _上で実行

(62)

台目を起動

 時ホ起動起動前考えう

o _環境 ₁₁ 台目 node1 起動場合あ時 12台目起動

くい

62

+---+---+---+---+---+---+--- openstack-cc _上で実行

(63)

台目起動ホ変わ原因

 ー量 N(memory_mb) MB mysql _値

 標準ーー値 1.5倍

→ ^{1.5N MB} 分ンン起動可能

 10台起動際ー消費量 <memory_mb_used> MB

o ーー my.standard 量 1,024MB

o _OpenStack _{各ー} _予 _{ーー} _見込 _い _量512MB

 10台目起動際予想使用量 10,752 (=1024 x 10 + 512)MB

 11台目起動際予想使用量 11,776 (=1024 x 11 + 512)MB

 12台目起動際予想使用量 12,800 (=1024 x 12 + 512)MB

 予想使用量 > 1.5<memory_mb>(起動可能容量) ¹¹ 台目

く 12台目ンンー起動い

 ーー数値関ン解説

(64)

プン演習

 ベーン

 ーーコッ設定

64

(65)

ベーン

(66)

環境を初期化

 ンン削除ーー設定戻作業

66

[root@openstack-cc ~]# openstack-config --set /etc/nova/nova.conf \

DEFAULT scheduler_weight_classes nova.scheduler.weights.all_weighers

[root@openstack-cc ~]# openstack-config --set /etc/nova/nova.conf DEFAULT ram_weight_multiplier 1.0 [root@openstack-cc ~]# systemctl restart openstack-nova-scheduler

[root@openstack-cc ~]# ps -ef |grep nova-scheduler

nova 2971 1 13 16:04 ? 00:00:01 /usr/bin/python /usr/bin/nova-scheduler

[root@openstack-cc ~]# unset OS_USER_DOMAIN_NAME OS_PROJECT_DOMAIN_NAME OS_IDENTITY_API_VERSION OS_VOLUME_API_VERSION [root@openstack-cc ~]# source keystonerc_admin

[root@openstack-cc ~(keystone_admin)]# for i in `nova list --all-tenants --minimal | grep test-vm | awk '{print $2}'` do

nova delete ${i:?} done

[root@openstack-cc ~(keystone_admin)]# nova list --all-tenants

+----+---+---+---+---+---+---+

標準重設定戻

荷算出負

値正戻

空多い

ホ選択う

全ンン削除

(67)

AZ _{を指定してン} _{ンを起動す}

 AZ 指定演習ー，対交互ンン作

成い

 AZ 指定場合う確認う

[root@openstack-cc ~]# source openrc_student001

[root@openstack-cc ~(student001)]# wget -O userdata_setpass.txt http://reposerver/hands-on/userdata_setpass.txt [root@openstack-cc ~(student001)]# nova availability-zone-list

+---+---+

| Name | Status | +---+---+

| AZ2 | available |

| AZ1 | available | +---+---+

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \ --key-name temp-key-001 --security-groups open_all --user-data userdata_setpass.txt \ --nic net-id=${MY_WORK_NET} --availability-zone AZ2 test-vm-1

[root@openstack-cc ~(student001)]# nova boot --flavor my.standard --image "CentOS7" \ --key-name temp-key-001 --security-groups open_all --user-data userdata_setpass.txt \

openstack-cc _上で実行 stundet-001 _操作

利用可能 AZ 確認

AZ2( _{ー 2) 指定}

4_台 _ン _ン _起

動い

Note

4_{台起動} _{う配}

置い確認くい

(68)

ーーコッ設定

68

(69)

ーーコッに関す設定

 ーー設定変更起動ンン台数い自由確認くい

 Nova ーーンーホ対実ー以上ンン配置可能



o RetryFilter

o AvailabilityZoneFilter o _RamFilter

o ComputeFilter

o ComputeCapabilitiesFilter o ImagePropertiesFilter o _CoreFilter

 代表的値値

o cpu_allocation_ratio = 16.0 o disk_allocation_ratio = 1.0 o ram_allocation_ratio = 1.5

 変更方法

o openstack-config --set /etc/nova/nova.conf DEFAULT key value

 例) openstack-config --set /etc/nova/nova.conf DEFAULT cpu_allocation_ratio 1.0

 ー使用状況確認

o mysql -uroot nova -e 'select host, vcpus_used, free_ram_mb, memory_mb_used, memory_mb, free_disk_gb, local_gb_used, local_gb from compute_nodes;'

(70)

No11 Handson Multinode and Resource Control

基盤構築演習

Cloud Infrastructure Design and Deployment

11. チ ー OpenStackと ー 制御の演習

2017.v1

Table of contents

 本演習 講義 内容 元 ー 上 稼働

OpenStack 環境 構築

 構築 環境上 複数 ン 構成 中 構成

仮想 ワー 動 い 確認 ワー 隔離 い 理解 深

 演習環境 い

o 環境 初期化

o 演習環境 構築

 ー OpenStack環境 構築

 OpenStack上へ 環境構築

 複数 ー 仮想 ワー 確認

 ー ー設定 配置順序 差

 ン演習：

o ー ー 設定

2

演習環境に いて

演習環境の概要

 演習用 OpenStack環境上 各自割 当 ン 内 演習 行い

o 各環境 生徒 独立 い

 最初 演習 実施 前 共通演習環境 構築 実施 必要 あ

 前回 演習環境 残 い 場合 演習環境 削除方法 実施 く い

4

openstack

tenant-XX / student-XX tenant-YY / student-YY ・・・

物理 ー ー ワー 装置 ー

資源層

抽象化層

ン

( )

共通演習環境

演習環境 演習環境

共通演習環境 構築 実施

構築： 第N回 演習環境 構築 作成

削除： 演習環境 削除方法 実施

各自 端末 操作 行う

演習環境の削除方法

各演習回の前に 前回の環境を削除す めに実施

演習環境を構築す 前の状態

 各演習環境 構築 前 以下 状態 い 事 確認 く い

o default 以外 存在 い い

 default 共通演習環境 作成

o キ ー 以外 ー 存在 い い

 以下 3 画面 確認 く い

o 何 ー や 残 い 場合 次項 手順 削除 く い

6

Stacks の確認

 以下 確認

o Orchestration → Stacks default 以外 存在 い い

 default 以外 存在 い 場合 対象 削除

o 削除 default 以外 選択 Delete Stacks 押下

ー 消費量の確認

 以下 確認

o Compute → Overview Limit Summary Security Groups 以外 消費

0 状態 い

 ー 残 い 場合 前項 手順 Stacks 確認 不要

削除 く い

 ー 残 い 場合 次項 手順 個別 ー 削除

く い

8

個別の ー 削除

 ー 一覧 表示 残 い ー 削除

o 以下 削除例

ッ ワー の状態

 以下 確認

o Network → Network Topology [public] - [Ext-Router] - [work-net] 状態

い

 余分 ー 作成 い 場合 個別 削除 く

い

10

第11回 演習環境の構築

ッ の起動

 左 ー Orchestration → Stacks 選択

 後 Launch Stack 押下

12

第11回

11. チー OpenStackとー制御の演習

 本演習講義内容元ー上稼働

OpenStack _{環境構築}

 構築環境上複数ン構成中構成

仮想ワー動い確認ワー隔離い理解深

 演習環境い

o _{環境初期化}

o _{演習環境構築}

 ー OpenStack環境構築

 OpenStack上へ環境構築

 複数ー仮想ワー確認

 ーー設定配置順序差

o _{ーー} _設定

演習環境にいて

 演習用 OpenStack環境上各自割当ン内演習行い

o _{各環境生徒} _独立 _い

 最初演習実施前共通演習環境構築実施必要あ

 前回演習環境残い場合演習環境削除方法実施くい

tenant-XX / student-XX tenant-YY / student-YY _・・・

物理ーーワー装置ー

演習環境 _演習環境

共通演習環境構築実施

構築：第N回演習環境構築作成

削除：演習環境削除方法実施

各自端末操作行う

各演習回の前に前回の環境を削除すめに実施

演習環境を構築す前の状態

 各演習環境構築前以下状態い事確認くい

o _default _以外 _存在 _{いい}

 ^default 共通演習環境作成

o _キ _{ー以外} _ー _存在 _{いい}

 以下 3 画面確認くい

o _何 _{ーや} _残 _{い場合} _{次項手順削除} _く _い

Stacks _の確認

 以下確認

o Orchestration _{→ Stacks} default _{以外存在} _{いい}

 ^default 以外存在い場合対象削除

o _削除 _default _以外 _選択 Delete Stacks _押下

ー消費量の確認

 以下確認

o _Compute _{→ Overview} Limit Summary Security Groups _{以外消費}

0 _状態 _い

 ー残い場合前項手順 ^Stacks 確認不要

削除くい

 ー残い場合次項手順個別ー削除

くい

個別のー削除

 ー一覧表示残いー削除

o _{以下削除例}

ッワーの状態

 以下確認

o _Network → Network Topology [public] - [Ext-Router] - [work-net] _状態

 余分ー作成い場合個別削除く

第11回演習環境の構築

ッの起動

 左ー Orchestration _{→ Stacks} _選択

 後 Launch Stack _押下

ンプーの指定

 Template Source URL _指定

 Template URL http://<<repo_ip>>/hands-on/11_handson.yaml _指定

o <<repo_ip>> _{部分講師} _{値指定あ}

 値設定 ^Next 押下

URL _選択

メーーの指定

 ^{Stack Name} hands-on-11 _入力

 ^Password 自分 OpenStack ワー入力

 hands-on repository server _{ーー IP} _入力

o _IP _講師 _{指示あ}

ーー IP

起動ーー

ワー設定

後ン使用

 10〜15分前後作成完了 Create Complete

o _{設定完了待間} _{後演習進方} _い _キ _確認 _{いく} _い

 失敗場合 hands-on-11 _選択 Delete Stack _押下 _削除

 後再度作成や直くい

 ^Network → Network Topology 選択作成ワー環

境確認

 正常作成完了以下状態い

ーーの確認