Cisco HyperFlex System アップグレードガイド、リリース 1.7

(1)

Cisco HyperFlex System アップグレードガイド、リリース 1.7

初版：2016年07月06日最終更新：2016年09月01日

シスコシステムズ合同会社

〒107-6227 東京都港区赤坂9-7-1 ミッドタウン・タワー http://www.cisco.com/jp

お問い合わせ先：シスココンタクトセンター 0120-092-255 （フリーコール、携帯・PHS含む）

電話受付時間：平日 10:00～12:00、13:00～17:00 http://www.cisco.com/jp/go/contactcenter/

(2)

【注意】シスコ製品をご使用になる前に、安全上の注意（ www.cisco.com/jp/go/safety_warning/ ）をご確認ください。本書は、米国シスコ発行ドキュメントの参考和訳です。リンク情報につきましては、日本語版掲載時点で、英語版にアップデートがあり、リンク先のページが移動/変更されている場合がありますことをご了承ください。あくまでも参考和訳となりますので、正式な内容については米国サイトのドキュメントを参照ください。また、契約等の記述については、弊社販売パートナー、または、弊社担当者にご確認ください。

(3)

Cisco HyperFlex Systemアップグレードの概要 1

HyperFlexのアップグレードの概要 1 概要 1

Intel BroadwellおよびHaswell CPUベースのHXクラスタの導入およびアップグレードのワークフロー 3

アップグレードのワークフロー 4

Cisco HyperFlex Systemアップグレードの注意事項 7 アップグレードの前提条件 7

HXノードのアップグレードの検証 9 アップグレードの順序 11

HXノードのファームウェアのアップグレードの準備 11

Cisco HyperFlex Systemソフトウェアのコンポーネントのダウンロード 13 ソフトウェアのダウンロード 13

Cisco HyperFlexソフトウェアコンポーネントのアップグレード ₁₅

ファブリックインターコネクトでのUCS Managerのアップグレード 15 HXノードファームウェアのアップグレード 18

ESXiのアップグレード ₁₉ HXノードのメンテナンス操作 23

メンテナンス操作の概要 23

HXクラスタのvMotionの設定の確認 24 メンテナンスモードのタイプ 24 HXメンテナンスモードの設定 25 HXメンテナンスモードの終了 26

(4)

(5)

第

1

^章

Cisco HyperFlex System アップグレードの概要

• HyperFlexのアップグレードの概要, 1 ページ

• 概要, 1 ページ

• Intel BroadwellおよびHaswell CPUベースのHXクラスタの導入およびアップグレードのワークフロー, 3 ページ

• アップグレードのワークフロー, 4 ページ

HyperFlex のアップグレードの概要

Cisco HyperFlex Systemには、お使いの環境に応じてアップグレードされる可能性のある複数のコ

ンポーネントがあります。Cisco UCSサーバファームウェア、ファブリックインターコネクト、

HX Data Platformソフトウェア、ESXiハイパーバイザなど、HyperFlexクラスタ全体およびそのさ

まざまなコンポーネントを、VMが稼働している間にアップグレードすることが可能です。これは、HXクラスタ内の各ノードのローリングアップグレードを実行することで実現できます。ただし、システム負荷の低い計画されたメンテナンスの時間帯にアップグレードを実行することを推奨します。

エンドポイントのアップグレードの順序は、アップグレードパスによって異なります。適切な新規導入またはアップグレードパスを決定するために、ワークフローの表を参照してください。

概要

アップグレードはストレージクラスタのすべてのノードがオンラインであることが必要です。

Cisco HX Data Platformの開始バージョンによっては、ストレージクラスタがオンラインまたはオ

フラインになる可能性があります。

アップグレードがオフラインモードで実行されることは、Cisco HX Data Platformがオフラインであることを意味しますが、ストレージコントローラVMが起動しているため、Cisco HX Platform

(6)

の管理は、コマンドラインstcliへのアクセス、およびvSphere WebクライアントのHX Data

Platformプラグインを使用して確認できます。vSphere WebクライアントはストレージのI/Oレイ

ヤについてレポートできます。stcli cluster infoコマンドは、ストレージクラスタ全体のステー

タスがofflineであることを返します。

ストレージクラスタのアップグレードは、ストレージクラスタ内のノードのなかの1つのストレージコントローラVMから行われます。ストレージクラスタのすべてのノードが開始ストレージクラスタノードから順次アップグレードされます。Cisco HX Data Platformのアップグレードは、次の手順で行われます。

1 シスコサポートから最新のソフトウェアバージョンを入手します。

2 ストレージクラスタが正常であることを確認します。

3 ユーザVMを処理します。1つのメソッド、またはメソッドの組み合わせを選択します。ストレージコントローラVMでこの操作を実行しないでください。

•ユーザVMをシャットダウンします。これによりデータが保持されます。

•別のストレージクラスタに移動し、VMware Storage vMotionを使用します。これにより VMのアクティブ状態を保持しますが、Cisco HX Data Platformストレージコントロールの下で実行しないでください。

4 ストレージクラスタをシャットダウンします。vCenterクラスタのESXホストとストレージコントローラVMのオンライン状態を保持します。

5 ストレージクラスタのストレージコントローラVMからアップグレードコマンドを実行します。

•アップグレードプロセスはストレージクラスタのノードで順番に実行されます。アップグレードする最後のノードはアップグレードコマンドを実行するために使用されるノードです。

•アップグレードプロセスの間、アップグレード中の各ノードは、オフラインになった後にオフラインに戻ります。ノードがオンラインのステータスに戻った場合のみ、次のノードがアップグレードされます。

•アップグレードコマンドを実行中のノードがアップグレードされている間、そのノードへの直接通信が一時的に切断されます。このノードのアップグレード中に、アップグレードのステータスを確認するために、別のアップグレード済みのノードのストレージコントローラVMにログインできます。

Cisco HyperFlex System アップグレードの概要 概要

(7)

Intel Broadwell および Haswell CPU ベースの HX クラスタの導入およびアップグレードのワークフロー

Cisco HyperFlex Systemは、Intel HaswellおよびIntel BroadwellのCPUをどちらもサポートします。

お使いの環境に基づいて以下のテーブルを参照し、アクションカラムを確認して、アップグレードが必要か、またどの特定のコンポーネント対して必要かを特定します。

（注） 1 このワークフローは、HX220、HX240、およびB200 M4のHXノードだけに適用されます。

2 ファブリックインターコネクトバージョンはすべてのノードのHXノードファームウェアバージョンよりも高くする必要があります。

3 HXノードにIntel Broadwell CPUが搭載されている場合、HXノードのダウングレードはサ

ポートされません。そのため、前のバージョンのソフトウェアを含むファブリックインターコネクトは、アップグレードする必要があります。サポートされるファームウェアマトリッ

クスのCisco HCLのドキュメンテーションを参照してください。

4 アップグレードが必要となる可能性のあるコンポーネント

• Cisco UCS Manager

• HXノードファームウェア

• HXインストーラ

• HX Data Platformソフトウェア

• ESXi

Cisco HyperFlex System アップグレードの概要

Intel Broadwell および Haswell CPU ベースの HX クラスタの導入およびアップグレードのワークフロー

(8)

アップグレードのワークフロー

コンポーネントのバージョンへのアップグレード

既存のクラスタのソフトウェアコンポーネントのバージョン

アクション：アップグレード

ユーザ環境

• UCS Managerバージョン= 2.2(7c)

• HXノードFW = 2.2(7c)

• HX Data Platform = なし

• ESXi =なし

• UCS Managerバージョン2.2(6f)

• HXノードFW = 2.2 (6f)

• HX Data Platform バージョン= 1.7.1

• ESXi = 6.0U1b 同じFIドメインで

Broadwellノードに対して個別のクラスタを作成します。以下の手順に従います。

1 既存のFIでUCS Managerをアップグレードします。次の項を参照してください。

ファブリックインターコネクトでのUCS Managerのアップグレード, （15ページ）

2 Haswellノードごとに、

HXノードファームウェアをアップグレードします。次の項を参照してください。HX ノードファームウェアのアップグレード, （ 18ページ）

3 HX Installer 1.7.1-14835 バージョンをダウンロードします。

4 Intel Broadwellノードの新しいクラスタの追加を続行します。詳細については、『Getting Started Guide』を参照してください。

既存のHaswell クラスタのある新しいIntel v4 Broadwell ノード

Cisco HyperFlex System アップグレードの概要 アップグレードのワークフロー

(9)

ユーザ環境

• ESXi =なし

• ESXi = 6.0U1b 現在のHaswellクラスタを

新しいソフトウェアバージョンにアップグレードします。

新しいIntel v3 Haswellノードを追加して Haswellクラスタを展開

Cisco HyperFlex System アップグレードの概要

アップグレードのワークフロー

(10)

ユーザ環境

• ESXi =なし

• ESXi = 6.0U1b 現在のHaswellクラスタを

新しいソフトウェアバージョンにアップグレードします。

既存のHaswell クラスタに別のIntel v3 Haswellクラスタを追加

2

^章

Cisco HyperFlex System アップグレードの注意事項

• アップグレードの前提条件, 7 ページ

• HXノードのアップグレードの検証, 9 ページ

• アップグレードの順序, 11 ページ

• HXノードのファームウェアのアップグレードの準備, 11 ページ

アップグレードの前提条件

Cisco HyperFlexドメインのすべてのエンドポイントが完全に機能しており、それらのエンドポイ

ントのファームウェアのアップグレードを開始する前に、すべてのプロセスが完了している必要があります。たとえば、検出されていないサーバのファームウェアはアップグレードまたはダウングレードできません。各エンドポイントは、機能するためにファームウェアが必要なCisco

HyperFlexドメインのコンポーネントです。

エンドポイントのアップグレードの間、記載されているベストプラクティスに従ってください。

1 リリースノートおよび適切なハードウェアおよびソフトウェア相互運用性の表を参照し、すべてのHXサーバのオペレーティングシステムのドライバのレベルが、アップグレード予定のリリースに対して正しいレベルになっていることを確認します。

a 目的のUCSバンドルバージョンがHX HCLのリストに含まれていることを確認します。

b すべてのサーバのオペレーティングシステムのドライバのレベルが、アップグレード予定

のCisco UCSのリリースに対して正しいレベルになっていることを確認します。

2 設定をAll Configurationバックアップファイルにバックアップします。

3 ファームウェアのアップデートを実行する前に、ファブリックインターコネクトに関連するイメージをダウンロードするため、UCS Managerイメージ管理インターフェイスを使用します。

(12)

イメージはファブリックインターコネクトのブートフラッシュのパーティションに保存されます。

4 vSphereライセンスがHyperFlexの要件を満たしていることを確認します。

a 各HXノードに対してvMotion、HA、およびDRSのライセンスが付与されていることを確認します。

b DRSがサポートされていない場合、有効ではない場合、または完全自動化モードではない場合は、ユーザのVMをクラスタ内の他のノードに手動で移行する必要があります。

5 HXクラスタが正常であることを確認します。詳細については、「HXノードのアップグレードの検証, （9ページ）」の項を参照してください。

6 vMotionがHXクラスタのすべてのノードに対して有効になっていることを確認します。詳細

については、「HXクラスタのvMotionの設定の確認, （24ページ）」の項を参照してください。

7 クラスタの再調整を無効にします。HX Data Platformのコマンドラインで次のコマンドを入力します。

# stcli rebalance disable

CLIで属性をチェックして、クラスタの再調整が無効になっていることを確認します。

# stcli rebalance status rebalanceStatus:

percentComplete: 0

rebalanceState: cluster_rebalance_not_running rebalanceEnabled: False

8 vCenter HAを無効にします。

vSphere Webクライアントから、[HX Cluster] > [Settings] > [vSphere HA]をクリックし、まだオフに設定されていなければオフにします。

これは、クラスタがHX Data Platform 1.7.0または1.7.1からアップグレードされている場合にのみ適用されます。

（注）

9 VMwareクラスタが正常であることを確認します。

a メジャーアラームがクラスタに対して報告されていないことを確認します。

b DRSが有効になっていることを確認します。

c DRSが[fully automated]に設定されていることを確認します[manual]または[partial]など、

他のDRSオプションに関しては、VMwareのベストプラクティスに従います。

d vSphereサービスが実行中であり、ESX Agent Manager（EAM）に問題がないことを確認し

ます。

• vCenterのシングルサインオンの管理者アカウントでvSphere Webクライアントにログ

インします。

• [Administration] > [Deployment] > [System Configuration]に移動します。

Cisco HyperFlex System アップグレードの注意事項 アップグレードの前提条件

(13)

• [Services]をクリックして、vCenter Serverシステム内のすべてのサービスの一覧を表示します。

10 UCSクラスタが正常であることを確認します。

a ファブリックインターコネクトの高可用性ステータスに、両方が稼働中であると示されていることを確認します。

b データパスが稼働中であることを確認します。詳細については、『Cisco UCS Manager Firmware Management Guide』を参照してください。

c HXサーバにエラーがないことを確認します。

d すべてのサーバが検出されていることを確認します。

11 NTPがファブリックインターコネクトで設定されていることを確認します。

12 vNICテンプレートがファブリックインターコネクトAおよびBで対称的に設定されていることを確認します。

a vNIC AとBを対称的に設定しているかを確認します。

b vNIC AとBを対称的に設定していない場合は、vNIC AとBが同じVLANを伝送するよう

にvNICを再設定します。

HX ノードのアップグレードの検証

次の検証は、クラスタ内で次のノードのアップグレードに進む前に各HXノードで実行する必要があります。

HX クラスタのヘルス

1 HXクラスタが正常でオンラインであることを確認します。

a GUI

クラスタのサマリを表示するには、vSphere Webクライアントナビゲータの[Summary]タブにアクセスします。次に、[Home] > [vCenter Inventory Lists] > [Cisco HyperFlex Systems] >

[Cisco HX Data Platform] > [Cluster] > [Summary]の順に選択します。ストレージクラスタのステータスが、このページの左上、およびクラスタウィジェットに表示されます。

b CLI

ストレージクラスタ内の任意のコントローラVMにログインします。次のコマンドを実行します。# stcli cluster info

次の例の応答は、ストレージクラスタがオンラインで正常であることを示します。

locale: English (United States) state: online

upgradeState: ok healthState: healthy Cisco HyperFlex System アップグレードの注意事項

HX ノードのアップグレードの検証

(14)

state: online state: online

HXクラスタのヘルスステータスは、ブラックリストに記載されている、または障害の発生したディスクの数を考慮します。

2 すべてのHXクラスタノードが、vCenterで接続され、オンラインになっていることを確認します。

vSphere Webクライアントナビゲータから次の順に選択します。[Home] > [Inventory] > [Host and Cluster] > [Datacenter]。クラスタを選択します。クラスタ内のすべてのHXノードの状態が上部にある[State]タブに表示されます。

3 VMwareクラスタが正常であることを確認します。

a メジャーアラームがHXクラスタに対して報告されていないことを確認します。

b DRSが有効になっていることを確認します。

c DRSが完全自動化に設定されていることを確認します

d vSphereサービスが実行中でありESX Agent ManagerのヘルスがNormalであることを確認します。

VMware クラスタのヘルス

1 メジャーアラームがHXクラスタに対して報告されていないことを確認します。

a vSphere Webクライアントにログインします。[Inventory] > [Hosts and Clusters] > [Datacenter]

の順に選択します

2 DRSが有効であり完全自動化に設定されていることを確認します。

a vSphere Webクライアントにログインします。[Inventory] > [Hosts and Clusters] > [Datacenter]

の順に選択します。

b HXクラスタを選択します。[Summary]タブをクリックして、DRSが[On]であることを確認します。

c [DRS]タブをクリックして、[Migration Automation Level]が[Fully Automated]に設定されていることを確認します。

3 vSphereサービスが実行中であり、ESX Agent Manager（EAM）がNormalであることを確認します。

1 vSphere Webクライアントにログインします。[Administration] > [vCenter Solutions Manager]

> [vSphere ESX Agent Manager] > [Summary]に移動します。

Cisco HyperFlex System アップグレードの注意事項 HX ノードのアップグレードの検証

(15)

アップグレードの順序

複数のソフトウェアおよびファームウェアのコンポーネントをアップグレードする場合、次の順序でアップグレードを実行します。コンポーネントをアップグレードする具体的な手順は、このマニュアルの後半で説明します。下記の個別のアップグレードが不要であれば、この手順を省略できます。

1 vCenterのアップグレード

2 Cisco UCSインフラストラクチャファームウェアのアップグレード

3 HX Data Platformのアップグレード

4 Cisco UCSサーバファームウェアのアップグレード

5 ESXiハイパーバイザソフトウェアのアップグレード

HX ノードのファームウェアのアップグレードの準備

HXノードファームウェアはHyperFlexのワークロードを中断することなくアップグレードできます。これは、HXクラスタ内の各ノードのローリングアップグレードを実行することで実現できます。アップグレードプロセスの前に、HXサーバのファームウェアバージョンを更新します。

正しいファームウェアバージョンにするために、記載された手順に従ってください。

手順

1 Cisco UCS Managerにログインします

• Webブラウザを開いて、UCS ManagerのIPアドレスを入力します。たとえば10.193.211.120 と入力します。

•ユーザ名とパスワードにはadminレベルのログインクレデンシャルを入力します。

• [Continue]をクリックします。[UCS Manager Configuration]ページに、[Servers]、[LAN Configuration]、[Advanced]フィールドが表示されます。

2 [Servers] > [Policies] > [Sub-Organizations]の順に選択します。

3 下位組織[hx-cluster]を展開します。

4 [Host Firmware Packages]を展開します。

5 [HyperFlex Host Firmware Package]を選択します。

6 [Modify package Versions]をクリックします。

7 各サブタブで、パッケージに含める各タイプのファームウェアに対して次の手順を実行します。

a [Select]カラムで、適切な行のチェックボックスがオンになっていることを確認します。

Cisco HyperFlex System アップグレードの注意事項

アップグレードの順序

(16)

b [Vendor]、[Model]、および[PID]カラムで、そのパッケージでアップデートするノードと情報が一致していることを確認します。モデルとモデル番号（PID）は、このファームウェアパッケージに関連付けられているサーバに一致する必要があります。誤ったモデルまたはモデル番号を選択した場合、Cisco UCS Managerはファームウェア更新をインストールできません。

c [Version]カラムで、ブレードパッケージのファームウェアをアップグレードする対象とな

るファームウェアバージョンを選択します。

d 必要となるラックパッケージのバージョンに対しても同じ手順を実行します。

8 [OK]をクリックします。この時点でHXサービスプロファイルが関連付けられると、ユーザ確認が必要な変更であることを示すポップアップが表示されます。

9 [OK]をクリックします。

10 [Pending Activities]を確認します。

a [Pending Activities]には、ユーザの確認を必要とするHXサービスプロファイルが一覧表示

されます。サービスプロファイルはまだ確認しないでください。中断のないローリングアップグレードを実行するために、各サービスプロファイルを順番に確認する必要があります。

b 複数のHXクラスタが存在する場合は、すべてのノードでユーザの確認が必要です。Cisco UCS Managerが[pending activities]にすべてのHXノードを一覧表示します。

Cisco HyperFlex System アップグレードの注意事項 HX ノードのファームウェアのアップグレードの準備

(17)

第

3

^章

Cisco HyperFlex System ソフトウェアのコンポーネントのダウンロード

• ソフトウェアのダウンロード, 13 ページ

ソフトウェアのダウンロード

シスコの必須ソフトウェアを入手するには、記載されている手順に従います。

www.cisco.comからソフトウェアをダウンロードします。

1 HX Data Platformの更新バンドル（.tgzファイル）

[Downloads Home] > [Products] > [Hyperconverged Infrastructure] > [HyperFlex HX Data Platform]に移動します。

HXインストーラを展開するには、『Getting Started Guide』の「HX Data Platform Installer」の項を参照してください。

2 VMware ESXi

[Downloads Home] > [Products] > [Servers-Unified Computing] > [UCS - Hypervisor and Operating Systems] > [VMware ESXi for Cisco UCS]に移動します。

3 UCSファームウェア

[Downloads Home] > [Products] > [Servers - Unified Computing] > [UCS Infrastructure and UCS Manager Software]に移動します。

(18)

UCS ManagerにUCSバンドルをコピーします。

ステップ 1 Webブラウザを起動します。

ステップ 2 UCS ManagerのURLを入力します。たとえばhttps://10.193.211.120と入力します。

ステップ 3 [Launch UCS Manager]ボタンをクリックして、UCS Manager GUIのインターフェイスを開きます。

ステップ 4 ユーザ名とパスワードを入力します。

ステップ 5 [Navigation]ペインで、[Equipment]タブをクリックします。

ステップ 6 [Equipment]タブから[Equipment]ノードを展開します。

ステップ 7 [Work]ペインから、[Firmware Management] > [Installed Firmware] > [Download Firmware]の順にクリックします。

ステップ 8 [Download Firmware]ダイアログボックスで、[Location of the Image File]フィールドの[Local File System]オプションボタンをクリックし、必須フィールドに入力します。

ステップ 9 [Filename]フィールドに、イメージファイルのフルパスと名前を入力します。

ファームウェアイメージファイルが配置されているフォルダへの正確なパスがわからない場合は、[Browse]

をクリックしてファイルにナビゲートします。

ステップ 10 [OK]をクリックします。Cisco UCS Manager GUIでは、ファブリックインターコネクトのファームウェアバンドルのダウンロードを開始します。

ステップ 11 [Download Tasks]タブで、ダウンロードのステータスをモニタします。

UCS Managerがブートフラッシュの空き領域不足を報告した場合、[Packages]タブでもう使用し

ない古いバンドルを削除して空き領域を増やします。ブートフラッシュの空き領域を表示するには、[General]タブの下の[work]ペイン領域にある[Equipment] > [Fabric Interconnect] > [Local Storage Information]に移動します。

（注）

ステップ 12 必要なすべてのファームウェアバンドルがファブリックインターコネクトにダウンロードされるまで、

このタスクを繰り返します。

Cisco HyperFlex System ソフトウェアのコンポーネントのダウンロード ソフトウェアのダウンロード

(19)

第

4

^章

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード

• ファブリックインターコネクトでのUCS Managerのアップグレード, 15 ページ

• HXノードファームウェアのアップグレード, 18 ページ

• ESXiのアップグレード, 19 ページ

ファブリックインターコネクトでの UCS Manager のアップグレード

UCSインフラストラクチャファームウェアには、UCS Manager、スイッチファームウェア、ブレードシャーシのIOモジュールファームウェア、およびラックサーバのFEXファームウェアが含まれます。UCSインフラストラクチャファームウェアはHyperFlexのワークロードを中断することなくアップグレードできます。これは、UCSファブリックインターコネクトのローリングアップグレードを実行することで実現できます。HXノードは、UCSファブリックインターコネクトがリブートしてファームウェアをアップグレードする際にすべてのイーサネットトラフィックをフェールオーバーするように設定されます。

ステップ 1 UCS Manager GUIを開きます。

ステップ 2 [Equipment] > [Firmware Management] > [Firmware auto-install]の順に選択します。

ステップ 3 [Install Infrastructure Firmware]をクリックします。

ステップ 4 目的のUCSインフラストラクチャのバージョンを選択しますステップ 5 [Upgrade Now]をクリックします。

ステップ 6 次のいずれかのイベントを待機します。

1 Cisco UCS Managerアップグレードの検証が失敗します。

(20)

この場合、アップグレードプロセスを停止します。アップグレードの検証エラーの原因を特定します。

是正措置を取り、アップグレードプロセスを再開します。

2 Cisco UCS Manager GUIを切断します。

これは、UCS Managerのアップグレード時にUCS Managerを停止すると予想されるため、新しいバージョンで再起動します。UCS Managerがオンラインに戻るまで待機します。

ステップ 7 IOMがアップグレードされるまで待機（ブレードシャーシが存在する場合）

1 [Equipment] > [Installed Firmware]の順に選択し、各シャーシを展開してから、IOモジュールの[Update Status]を確認します。

2 アップグレード中に、IOモジュールの[Update Status]が[Upgrading]になります。

3 IOMのアップグレードが完了すると、IOモジュールの[Update Status]が[Ready]に設定されます。

ステップ 8 下位のFIがアクティブ化されるのを待機します。

1 [Equipment] > [Installed Firmware] > [Fabric Interconnects]の順に選択します。

2 カーネルおよびスイッチのイメージの[Activate Status]を確認します。アップグレード中に、[Activate Status]が[Activating]に設定されます。

ステップ 9 FIのリブート時に、すべてのHXトラフィックがプライマリFIに転送されます（ESXiのvSwitchのフェールオーバーポリシーに基づく）。これにより短いトラフィックの中断が発生します。ストレージのIO障害は発生しません。

ステップ 10 下位のFIがUCSクラスタをリブートしておりUCSクラスタに接続していることを確認します。

2 アクティブ化の後、FIの[Activate Status]が[Ready]に設定されます。

3 FIの[Overall Status]が[operable]であることを確認します。

4 FIのカーネルおよびスイッチのバージョンが、目的となる更新済みのバージョンと一致していることを確認します。

5 FIでエラーが発生していないことを確認します。

6 FIクラスタメンバーシップが[Subordinate]であることを確認します。

ステップ 11 IOMアクティベーションが完了するまで待ちます。

1 [Equipment] > [Fabric Interconnects] > [IO Module]の順に選択します。

2 IOモジュールの[Activate Status]が[Ready]に変わるまで待機します。

ステップ 12 HXトラフィックが両方のFIに再ピンされるまで待機します。

UCS ManagerのvNICのエラーが解決されるまで待機します。エラーの解決とは、ESXiがENICドライバ

をロードし、インターフェイスがアップしていることを示します。ESXiにフェールバックタイマーがあ

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード ファブリックインターコネクトでの UCS Manager のアップグレード

(21)

るため、ネットワークインターフェイスがアップになると、トラフィックはただちに再ピンされません。

ただしNet.teampolicyupdelayタイマーはデフォルトで非常に低い設定（100ms）です。

ステップ 13 プライマリのファブリックインターコネクトをリブートする前に、HXクラスタがオンラインで正常であることを確認します。

1 vSphere Webクライアントナビゲータから[Summary]タブにアクセスします。[Home] > [vCenter Inventory Lists] > [Cisco HyperFlex Systems] > [Cisco HX Data Platform] > [cluster] > [Summary]の順に選択します。

2 再調整が無効なので、[cluster healthy]のステータスを監視し、クラスタのヘルスが[healthy]であるときにノードをアップグレードすることができます。

ステップ 14 UCS Manager GUIのツールバーから[Pending Activities]をクリックします。完了する前にユーザ確認が必要なタスクを表示する[Fabric Interconnects]タブをクリックします。

1 即時展開する保留中の各アクティビティの[Reboot Now]のチェックボックスをオンにします。

2 [OK]をクリックします。Cisco UCS ManagerはすぐにプライマリFIをリブートします。これにより、

下位FIがプライマリになります（FIのフェールオーバー）。

ステップ 15 FIのリブート時に、すべてのHXトラフィックが新たなプライマリFIに転送されます。これにより短いトラフィックの中断が発生します。ただし、これによるストレージのIO障害は発生しません。

ステップ 16 UCS Managerが接続解除されて、他のFIで再接続されるまで待機します。これは、プライマリFIのリブートが原因でUCS Managerのフェールオーバーが発生するためです。

下位のFIがプライマリになっていることを確認します。

ステップ 17 下位のFIがプライマリになっていることを確認します。

FIクラスタメンバーシップが[Primary]であることを確認します。

ステップ 18 FIがアクティブ化されるのを待機します。

2 FIの[Activate Status]が[Ready]になるまで待機します。

3 FIの[Overall Status]が[operable]であることを確認します。

4 FIでエラーが発生していないことを確認します。

ステップ 19 FIがUCSクラスタをリブートし、下位のFIとして接続していることを確認します。

FIクラスタメンバーシップが[Subordinate]であることを確認します。

ステップ 20 IOMアクティベーションが完了するまで待ちます。

1 [Equipment] > [Fabric Interconnects] > [IO Module]の順に選択します。

2 IPモジュールの[Activate Status]が[Ready]になるまで待機します。

ステップ 21 HXトラフィックが両方のFIに再ピンされるまで待機します。

1 UCS Manager GUIで、すべてのサーバvNICのエラーが解決されるまで待機します。

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード

ファブリックインターコネクトでの UCS Manager のアップグレード

(22)

ステップ 22 FIのリブート後にHXクラスタがオンラインで正常であることを確認します。

1 vSphere Webクライアントナビゲータから[Summary]タブにアクセスします。[Home] > [vCenter Inventory Lists] > [Cisco HyperFlex Systems] > [Cisco HX Data Platform] > [cluster] > [Summary]の順に選択します。

ステップ 23 HXクラスタの再調整を有効にします。[stcli rebalance enable]を使用します。

HX ノードファームウェアのアップグレード

HXサーバファームウェアの目的のバージョンを関連付けたら、クラスタの各ノードに対して以下の操作を実行して、アップグレードを行います。

ステップ 1 HXノードをメンテナンスモードにします。参照先HXメンテナンスモードの設定, （25ページ）

ステップ 2 [Fault Suppression]を有効にします。これはオプションですが、推奨手順であることに注意してください。

1 UCS Manager GUIの[Equipment]タブをクリックします。

2 リブートするサーバを選択します。

3 [Start Fault Suppression]をクリックします。

4 フォールト抑制名にHX-upgradeと入力します。

5 タスクの期間に「00:00:60:00」と入力します。

ステップ 3 vSphere Webクライアントに移動して、アップグレードするHXサーバを選択し、[shutdown]をクリックします。

ステップ 4 UCS Managerに戻ります。[pending activities]に移動して、メンテナンスモードに入ったサーバを確認しま

す。

サーバはvSphere Webクライアントからシャットダウンされたので、サーバの電源の状態をダ

ウンにする必要があります。UCSファームウェアのアップグレードは、サーバあたり最大90分かかる場合があります。[Equipment] > [FSM]タブに移動して、ファームウェアのアップグレード進行状況を監視できます。

（注）

ステップ 5 [Equipment] > [Installed Firmware]の順に選択して、次のファームウェアがアップグレードされておりアクティブ化されていることを確認します。正確なバージョン番号については、『Hardware and Software Interoperability for UCSM Managed Servers in Release 2.2(7)』を参照してください。

• CIMC

• BIOS

• LSI SAS HBA

•ディスク

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード HX ノードファームウェアのアップグレード

(23)

•ボードコントローラ

• Flexフラッシュコントローラ

•アダプタ

ステップ 6 HXサーバファームウェアのアップグレード後にESXiがリブートしていることを確認します。

1 ESXi管理IPアドレスが到達可能であることを確認します。

2 ESXiがvCenterに再接続されていることを確認します。

ステップ 7 [Fault Suppression]を無効にします。

1 Cisco UCS Manager GUIから、[Equipment]タブに移動します。

2 リブートしたサーバを選択します。

3 [Stop Fault Suppression]をクリックします。

4 すべての障害抑制タスクを削除するか確認します。

ステップ 8 メンテナンスモードを終了します。参照先HXメンテナンスモードの終了, （26ページ）

ステップ 9 すべてのノードがアップグレードプロセスを完了するまで、クラスタ内の次のノードに対してこの手順を繰り返します。

ESXi のアップグレード

ESXiハイパーバイザのバージョンはHyperFlexのワークロードを中断することなくアップグレードできます。これは、HXクラスタ内の各ノードのローリングアップグレードを実行することで実現できます。

ESXi のアップグレード

(24)

（注） • ESXiのインストールでは、手動によるローリングアップグレードが必要です。

• 5.5 U3bから6.0U2までのすべてのバージョンのHX220C ESXiのアップグレードについて

は、Cisco TACにお問い合せください。

• 6.0 Uxから6.0U2までのすべてのバージョンのHX220C ESXiのアップグレードでは、ISO

イメージを使用しないでください。

• HX220cノードのアップグレードに関する既知の問題{9}があります。ESXiインストーラ

のISOを使用してHX220cノードをアップグレードしようとすると、失敗します。

◦ ESXiのインストーラのISOイメージを使用してノードをアップグレードしたり、更

新しないでください。代わりに、ESXiのコマンドラインインターフェイス-esxcli を使用します。次に例を示します。

esxcli software profile update -d

<path_to_profile_ZIP_file>/Vmware-ESXi-6.0.0-3620759-Custom-Cisco-6.0.2.1-Bundle.zip -p Vmware-ESXi-6.0.0-3620759-Custom-Cisco-6.0.2.1

◦詳細については下記のリンク先を参照してください。

https://pubs.vmware.com/vsphere-60/index.jsp#com.vmware.vsphere.upgrade.doc/

GUID-E51C5DB6-F28E-42E8-ACA4-0EBDD11DF55D.html

ステップ 1 前の項に記載されているすべてのアップグレードの前提条件を確認します。

ステップ 2 シスコWebサイトからESXiのオフラインバンドルをダウンロードします。詳細については前の項を参照してください。

ステップ 3 ストレージコントローラの管理IPにログインします。

ステップ 4 ホストのなかから1つ選択し、メンテナンスモードにします。詳細については、HXメンテナンスモードの設定, （25ページ）を参照してください。

ステップ 5 ホストがメンテナンスモードになったら、記載されている手順を実行します。

a) ESXiのアップグレードバンドル（例：esxi_bundle.zip）を/tmpにリモートセキュアコピーします。

b) ESXiにログインして次のコマンドを実行します。

esxcli software vib update -d /tmp/esxi_bundle.zip

c) 更新が完了したら、次のように入力してESXiホストをリブートします。

reboot

ステップ 6 ESXiホストが起動したら、ホストが適切なプロファイル/パスで起動したことを確認します。

vmware -vl

ステップ 7 メンテナンスモードを終了します。次の項を参照してください。HXメンテナンスモードの終了, （26 ページ）

ステップ 8 シーケンスのクラスタ内のすべてのホストに対してこのプロセスを繰り返します。

各ESXiのアップグレード間でクラスタが正常になっていることを確認します。次の項を参照してください。アップグレードの前提条件, （7ページ）

（注）

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード ESXi のアップグレード

(25)

ESXi のアップグレード

(26)

Cisco HyperFlex ソフトウェアコンポーネントのアップグレード ESXi のアップグレード

(27)

第

5

^章

HX ノードのメンテナンス操作

• メンテナンス操作の概要, 23 ページ

• HXクラスタのvMotionの設定の確認, 24 ページ

• メンテナンスモードのタイプ, 24 ページ

• HXメンテナンスモードの設定, 25 ページ

• HXメンテナンスモードの終了, 26 ページ

メンテナンス操作の概要

場合によっては、HXノードではメンテナンスの時間帯に行う必要があります。たとえば、ディスクを交換したり、リブートが必要なUCSサービスプロファイルを変更する場合です。HXのメンテナンスはHyperFlexのワークロードを中断することなく実行できます。

メンテナンス操作は、単一ノード、複数のノード、またはクラスタ内のすべてのノード上で実行できます。クラスタ内のすべてのノードに変更を適用すると、この変更がローリングメンテナンス操作によって順番に適用されます。

メンテナンス操作を実行するには、記載されているプロセスに従ってください。

1 「Cisco HyperFlex Systemアップグレードの注意事項」の項に記載されているアップグレード前の検証を確認します。

2 HXノードを選択し、メンテナンスモードにします。

3 メンテナンス操作を実行します。

4 メンテナンスモードを終了します。

5 シーケンスのクラスタ内のすべてのホストでこの手順を繰り返してください（該当する場合：

メンテナンス操作をクラスタ内の各ノードで実行する必要があるとき）。

(28)

HX クラスタの vMotion の設定の確認

HXクラスタでHXメンテナンス操作を実行する前に、HXクラスタのすべてのノードがvMotion 用に設定されていることを確認します。vSphere Webクライアントから次の項目を確認します。

1 vMotionポートグループが、クラスタのすべてのESXiホスト間でアクティブ/スタンバイ構成

のvmnic6とvmnic7で設定されていることを確認します。

2 ポートグループがvMotion用に設定されていること、および命名規則が、クラスタのすべての ESXiホストの間でまったく同じであることを確認します。

名前では、大文字と小文字が区別されます。

（注）

3 各vMotionポートグループに静的IPアドレスを割り当てていること、各vMotionポートグルー

プの静的IPアドレスが同じサブネットにあることを確認します。

4 クラスタ内の各ESXiホスト上で、vMotionポートグループのプロパティでvMotionオプションがオンになっていること、他のポートグループ（Managementなど）でこのオプションがオンになっていないことを確認します。

5 vMotionポートグループが9000 MTUに設定されており、VLAN IDが0に設定されていること

を設定で確認します。

6 vMotionの1つのESXiホストのvMotionポートグループから他のホストのvMotion IPにping できることを確認します。

vmkping -I vmk2 10.104.0.20と入力します。

7 vmotion vNICSに関連付けられたCDP情報を表示して、適切なVLANがファブリックインター

コネクトから割り当てられていることを確認してください。

メンテナンスモードのタイプ

一部の手順では、ノードをメンテナンスモードにする必要があります。これにより、UCS Manager

またはvCenterを使用してノードを停止しシャットダウンする前に、すべてのVMが他のノード

に移行されます。

ESXサーバメンテナンスモードには2つのタイプがあります。

• ESXメンテナンスモード-このモードは、HX Data Platformをインストールしていたり、ク

ラスタに大幅な変更を適用している場合に、vSphereから使用します。

• HXメンテナンスモード-このモードは、クラスタ内の個々のノードで選択したタスクを実行する前に使用します。次のようなものがあります。

◦ディスクの交換などのメンテナンスのために個々のホストをシャットダウンする場合。

◦ ESX Serverのバージョンなど、ホスト上で選択したソフトウェアをアップグレードする場合。

HX ノードのメンテナンス操作 HX クラスタの vMotion の設定の確認

(29)

HXのメンテナンスモードは次の方法で入ることができます。

◦ HX Data PlatformプラグインGUI

◦ストレージコントローラVM（SCVM）のコマンドライン。stcli node maintenanceMode

コマンドを使用します。

HXのメンテナンスモードはESXのメンテナンスモードに加えてHX Data Platform固有の機能を実行します。最初のストレージクラスタの作成後に行われるストレージクラスタノードのメンテナンスタスクでは、ESXメンテナンスモードではなくHXメンテナンスモードを必ず選択してください。

（注）

HX メンテナンスモードの設定

HXメンテナンスモードは、正常なクラスタのノードのみに適用されます。たとえば、非常に多くのノードがダウンしていたり、クラスタをシャットダウンしているなど、クラスタが正常でな

い場合はvSphereメンテナンスモードを使用します。

HXノードがメンテナンスモードになると、VMが別のホストに移行され、ストレージコントロー

ラVMがシャットダウンされます。

ステップ 1 HXメンテナンスモードに入るために使用する方法を決定します。

• GUIでは、vSphereクライアントでHX Data Platformプラグインを使用します。

• CLIでは、ストレージクラスタのESXホスト上でコントローラVMのコマンドラインを使用しま

す。

ステップ 2 ノードをCisco HXメンテナンスモードにします。

GUI

a) vSphere Webクライアントから、[Home] > [Hosts and Clusters] > [Datacenter] > [Cluster][host]の順に選択します。

b) ホストを右クリックして、[Enter HX Maintenance Mode]を選択します。

CLI

a) ESXホストで、root権限を持つユーザとしてコントローラVMにログインします。

b) ESXホストをメンテナンスモードに移行します。

stcli node maintenanceMode (--id ID | --ip NAME) --mode enter

（stcli node maintenanceMode --helpも参照してください）

ステップ 3 ESXホストのメンテナンスタスクを実行します。

HX ノードのメンテナンス操作

HX メンテナンスモードの設定

(30)

次の作業

（注） •ユーザは、vSphere Webクライアントの[Monitor] > [Tasks]タブから、[Enter Maintenance

Task]の進行状況を監視できます。

•操作に失敗した場合は、エラーメッセージが表示されます。根本的な問題を修正してからもう一度メンテナンスモードに入ります。

•問題を解決できない場合はCisco TACにお問い合わせください。

HX メンテナンスモードの終了

メンテナンス操作が完了したら、ESXホストはメンテナンスモードを終了する必要があります。

HXノードがメンテナンスモードを終了すると、ストレージコントローラVMが起動し、VMを HXノードに戻すことができます。

ノードの電源を入れてESXのリブートを実行した後、Cisco HXメンテナンスモードを終了します。

GUI

a) vSphereから、[Home] > [Inventory] > [Hosts and Clusters] > [HX Cluster] >[host]の順に選択します。

b) ホストを右クリックして、[Exit HX Maintenance Mode]を選択します。

CLI

a) ESXホストで、root権限を持つユーザとしてコントローラVMにログインします。

b) ESXホストのメンテナンスモードを終了します。

# stcli node maintenanceMode (--id ID | --ip NAME) --mode exit

（stcli node maintenanceMode --helpも参照してください）

HX ノードのメンテナンス操作 HX メンテナンスモードの終了

(31)

次の作業

（注） •ユーザは、vSphere Webクライアントの[Monitor] > [Tasks]タブから、[Exit Maintenance

Task]の進行状況を監視できます。

•操作に失敗した場合は、エラーメッセージが表示されます。根本的な問題を修正してからもう一度メンテナンスモードに入ります。

•問題を解決できない場合はCisco TACにお問い合わせください。

HX ノードのメンテナンス操作

HX メンテナンスモードの終了

(32)

HX ノードのメンテナンス操作 HX メンテナンスモードの終了

Cisco HyperFlex System アップグレードガイド、リリース 1.7