コア・スイッチAT-SBx908シリーズとデータセンタースイッチAT-DC2552XSシリーズで実現する10Gデータセンターネットワーク

(1)

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

■

主な目的



データセンタ内のサーバー間を

10G

で接続する構成例です。



REF

(Resilient

-

Ethernet

-

Fabric)

をサーバー

⇔

TOR

間、

TOR

⇔

Aggregator

間

、

Aggregator

⇔

C

ORE

Switch

間

で使用

。

ア

クティブ・アクティブな

経路冗長とし、スパニングツリーを

排除した

データセンター

構築の例です。



REF

から他ネットワークとの接続は、標準インターフェー

スである

LAG(LACP)

接続とすることにより、相手機器を選び

ません。



サーバー

1

1 台の仮想

台の仮想

OS

数は最大

10

10 、ラック内のサーバー台

、ラック内のサーバー台

数は最大

40

40 台、ラック自体の数は最大

台、ラック自体の数は最大

5

5 ラックまでサポート

ラックまでサポート

します。



AggregationS

witch

と

ToRSwitch

に

DC2552XS

各

2

2 台ずつ、計

台ずつ、計

4

4 台使用

台使用



Aggregator

には

2000VLAN

、

ToR

には

400VLAN

を作成



サーバー

OS

として

Microsoft

Windows Server 2008 R2

を使

用



サーバー

NIC

には、

AT

-

VNC10S

を使用し、

LACP

を用いた

Teaming

を行う



L2

マルチパス

(

アクティブ・アクティブ

)

を構築したい



スパニングツリーを使わずに

Layer2

の冗長をしたい



経路障害、機器障害に強いネットワークを構築したい



他ネットワークとの接続は、標準インタフェースを使いたい

■

概要

(2)

■

構築のポイント

REF

DC2552XS_3

VM

v1

VM

v3

VM

v2

DC2552XS_1

AGGR mode

TOR mode

1.0.53

1.0.57

1.0.53

1.0.61

1.0.61 1.0.1-4

eth0

1.0.1-4

VLAN2000個

VLAN400個

VM

v4

VM

v11

VM

v13

VM

v12

VM

v14

・・・・・・・・

40 Servers

1.0.5-12

1.0.49-56

1.0.1

1.0.2

1.0.1

1.0.2

1.0.61

1.0.57

1.0.49

SBｘ908 SBｘ908

1.2.1-1.3.2

2.2.1-2.3.2

Storage

Clients 9424T/SP DC2552XS_2 NMS

REF1

REF2

REF3

_REF4

eth0

Server1 IP

VM1 : 172.16.1.250

VM2 : 172.16.2.250

VM3 : 172.16.3.250

VM4 : 172.16.4.250

Server2 IP

VM1 : 172.16.11.250

VM2 : 172.16.12.250

VM3 : 172.16.13.250

VM4 : 172.16.14.250

9424T/SP

各MgtPortへ

Storage IP

172.16.100.252 NIC

v400

NIC

v400

NIC

v400

DC2552XS_4

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

1.4.1

2.4.1

1.1.1

2.1.1

・・

VM10 : 172.16.10.250

・・

VM10 : 172.16.20.250

1.1.2

2.1.2

1.0.57

(3)

■

SBx908

-

VCS

設定サンプル

その

1

hostname SBx908

!

log host 10.0.0.250

log host 10.0.0.250 level informational !

clock timezoneJST plus 09:00 !

snmp-server community public rw

snmp-server host 10.0.0.250 informs version 2c public !

stack virtual-mac

stack virtual-chassis-id 1979 stack resiliencylinketh0 ! ipmulticast-routing ! no spanning-tree rstpenable ! switch 1 provision x908 switch 1 bay 1 provision xem-12 switch 1 bay 2 provision xem-2 switch 1 bay 3 provision xem-2 switch 1 bay 4 provision xem-2 switch 2 provision x908 switch 2 bay 1 provision xem-12 switch 2 bay 2 provision xem-2 switch 2 bay 3 provision xem-2 switch 2 bay 4 provision xem-2 !

vlandatabase

vlan2-100 state enable

vlan101-2000,3000,4000 state enable

構成図に記載の機

器名と合わせる

特別な理由が無い

限り必要な設定

・Syslog

・NTP（Timezone）

・SNMP

Multicast Routing

の有効

Spanning-treeは

今回使わないため

無効

VirtualMACの有効

ResiliencyLinkは

eth0を使用

bay1にXEM-12T,

bay2,bay3,bay4に

XEM-2XS

VLAN1-2000はデー

タセンター側VLAN

VLAN3000はマネジ

メントVLAN

VLAN4000はホスト

側VLAN

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(4)

■

SBx908

-

VCS

設定サンプル

その

2

ippimrp-candidate vlan4000 !

interface port1.1.1 switchport

switchportmode access switchportaccess vlan4000 static-channel-group 1 !

interface port1.2.1-1.2.2 switchport

switchportmode trunk

switchporttrunk allowed vlanadd 1-2000 switchporttrunk native vlannone channel-group 1 mode active lacptimeout long

!

VLAN4000をRPと

して広告

ホスト側の

UntagVLAN4000

に所属

LAGのsa1に設定

マネジメント側の

UntagVLAN3000に

所属

LAGのsa2に設定

Master側

bay2,bay3 のXEM-

2XSのポートは全て

LACP

LAGのpo1に設定

サーバー側の

TagVLAN1-2000に

所属

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(5)

■

SBx908

-

VCS

設定サンプル

その

3

!

interface po1 switchport

switchporttrunk allowed vlanadd 1-2000 switchporttrunk native vlannone !

interface sa1 switchport

switchportmode access switchportaccess vlan4000 !

switchportmode access switchportaccess vlan3000

Slave側

bay2,bay3のXEM-

2XSのポートは全て

LACP

LAGのpo1に設定

サーバー側の

TagVLAN1-2000に

所属

po1はTagVLAN1-

2000に所属

sa1はUntagVLAN

4000に所属

sa2はUntagVLAN

3000に所属

XEM-2XSのbay4

はStatic LAG

LAGのsa3に設定

Storage側の

UntagVLAN400に

所属

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(6)

■

SBx908

-

VCS

設定サンプル

その

4

!

switchportmode access switchportaccess vlan400 !

interface vlan1

ipaddress 172.16.1.1/24 ipigmp

ippimsparse-mode passive ! interface vlan2 ipaddress 172.16.2.1/24 ! ～中略～ interface vlan11 ipaddress 172.16.11.1/24 ipigmp

ippimsparse-mode passive ! ～中略～ interface vlan1998 ipaddress 172.23.206.1/24 ! interface vlan1999 ipaddress 172.23.207.1/24 ! interface vlan2000 ipaddress 172.23.208.1/24 interface vlan3000 ipaddress 10.0.0.5/24 ! interface vlan4000 ipaddress 192.168.1.1/24 ipigmp

ippimsparse-mode passive

! ntppeer 10.0.0.250

サーバ側のVLAN

のIP

マルチキャストサー

バが存在する場合

はそのVLANに

igmpとPIMを設定

する

ホストとマネジメント

VLANのIP

マルチキャストを受

信するホスト側では

igmpとPIMを設定

する

特別な理由が無い

限り必要な設定

・NTP

sa3は

UntagVLAN400に

所属

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(7)

■

DC2552XS_1(Spine SW mode Aggregator

-

a)

設定サンプル

その

1

hostname DC2552XS_1

log host 10.0.0.250 level informational program any !

snmp-server

ntppeer 10.0.0.250 clock timezone+09:00

hardware profile interface port1.0.57 portmode10gx4 !

hardware profile interface port1.0.61 portmode10gx4

no spanning-tree rstpenable no ipigmpsnooping

ref system-id 01:01:01:01:01:01 ref mode aggr-a

vlan database vlan 2 vlan 3 vlan 4 ～中略～ vlan1998 vlan1999 vlan2000 interface eth0 ipaddress 10.0.0.1/24

構成図に記載の機

器名と合わせる

特別な理由が無い

限り必要な設定

・Syslog

・NTP

・SNMP

spanning-tree

igmp snooping

REFとの併用不可

Aggregatorは40G

の57、61を10G×4

として使用

REFのモード設定

DC2552XS_1は

aggr-a

system-idは

aggr-bと一致させる

Aggregatorは

VLAN2000個がREF

のサポートリミット

マネジメント用eth0

のIPアドレス

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(8)

■

DC2552XS_1(Spine SW mode Aggregator

-

a)

設定サンプル

その

2

interface port1.0.1-port1.0.4

snmptrap link-status switchportmode trunk

switchporttrunk native vlannone switchporttrunk allowed vlanadd 1-2000 ref-group 1 bypasstype40g

! !

interface port1.0.5-port1.0.12 snmptrap link-status switchportmode trunk

switchporttrunk native vlannone switchporttrunk allowed vlanadd 1-400 ref-group 2

TORへ接続

VLAN1-400のTag

REF Group2

SBx908へ接続

VLAN1-2000のTag

REF Group1

uplink REFなので

バイパスは40G

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(9)

■

DC2552XS_2(Spine SW mode Aggregator

-

b)

設定サンプル

その

1

hostname DC2552XS_2

snmp-server

hardware profile interface port1.0.57 portmode10gx4 !

hardware profile interface port1.0.61 portmode10gx4

ref system-id 01:01:01:01:01:01 ref mode aggr-b

構成図に記載の機

器名と合わせる

特別な理由が無い

限り必要な設定

・Syslog

・NTP

・SNMP

spanning-tree

igmp snooping

REFとの併用不可

Aggregatorは40G

の57、61を10G×4

として使用

REFのモード設定

DC2552XS_2は

aggr-b

system-idは

aggr-aと一致させる

Aggregatorは

VLAN2000個がREF

のサポートリミット

マネジメント用eth0

のIPアドレス

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(10)

■

DC2552XS_2(Spine SW mode Aggregator

-

b)

設定サンプル

その

2

interface port1.0.1-port1.0.4

switchporttrunk native vlannone switchporttrunk allowed vlanadd 1-2000 ref-group 1 bypasstype40g

! !

TORへ接続

VLAN1-400のTag

REF Group2

SBx908へ接続

VLAN1-2000のTag

REF Group1

uplink REFなので

バイパスは40G

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(11)

■

DC2552XS_3(Leaf SW mode ToR

-

a)

設定サンプル

その

1

hostname DC2552XS_3

snmp-server

hardware profile interface port1.0.49 portmode10gx4 hardware profile interface port1.0.53 portmode10gx4 hardware profile interface port1.0.57 portmode10gx4 hardware profile interface port1.0.61 portmode10gx4

ref system-id 02:02:02:02:02:02 ref mode tor-a

構成図に記載の機

器名と合わせる

特別な理由が無い

限り必要な設定

・Syslog

・NTP

・SNMP

spanning-tree

igmp snooping

REFとの併用不可

ToRは40Gポート全

てを10G×4として

使用

REFのモード設定

DC2552XS_3は

tor-a

system-idは

tor-bと一致させる

ToRはVLAN400個

がREFのサポートリ

ミット

マネジメント用eth0

のIPアドレス

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

(12)

■

DC2552XS_3(Leaf SW mode ToR

-

a)

設定サンプル

その

2

interface port1.0.1

switchporttrunk native vlannone

switchporttrunk allowed vlanadd 1-10,400 ref-group 3

! !

interface port1.0.2 snmptrap link-status switchportmode trunk

サーバー内VM接続

VLAN1-10のTag

REF Group3

一つのサーバー内

の最大VM数は10が

サポートリミット

サーバー内VM接続

VLAN11-20のTag

REF Group4

一つのサーバー内

の最大VM数は10が

サポートリミット

Aggregatorへ接続

VLAN1-400のTag

REF Group2

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズと

データセンタースイッチ

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク

Storage接続用

VLAN400のTag

Storage接続用

VLAN400のTag

(13)

■

DC2552XS_4(Leaf SW mode ToR

-

b)

設定サンプル

その

1

hostname DC2552XS_4

snmp-server

hardware profile interface port1.0.49 portmode10gx4 hardware profile interface port1.0.53 portmode10gx4 hardware profile interface port1.0.57 portmode10gx4 hardware profile interface port1.0.61 portmode10gx4

コア・スイッチAT-SBx908シリーズとデータセンタースイッチAT-DC2552XSシリーズで実現する10Gデータセンターネットワーク

アライドテレシス

コア・スイッチ

AT-SBｘ908 シリーズ と

データセンタースイッチ

AT-DC2552XS シリーズ で実現する

10G データセンター ネットワーク

■

■

主な目的

主な目的





データセンタ内のサーバー間を

データセンタ内のサーバー間を

10G

10G

で接続する構成例です。

で接続する構成例です。





REF

REF

(Resilient

(Resilient

-

-

Ethernet

Ethernet

-

-

Fabric)

Fabric)

をサーバー

をサーバー

⇔

⇔

TOR

TOR

間、

間、

TOR

TOR

⇔

⇔

Aggregator

Aggregator

間

間

、

、

Aggregator

Aggregator

⇔

⇔

C

C

ORE

ORE

Switch

Switch

間

間

で使用

で使用

。

。

ア

ア

クティブ・アクティブな

クティブ・アクティブな

経路冗長とし、スパニングツリーを

経路冗長とし、スパニングツリーを

排除した

排除した

データセンター

データセンター

構築の例です。

構築の例です。



AT-SBｘ908 シリーズと

AT-DC2552XS シリーズで実現する

10G データセンターネットワーク