Cisco HyperFlex Systems]: ネットワーク トポロジ

はじめに

このテクニカル ノートでは、HyperFlex システムと次のネットワーク トポロジの一般的なサポート ガイドラインについて説明します。

- Cisco UCS VIC 1400 および 6400 シリーズ ファブリック インターコネクト

- Cisco 6454 シリーズ ファブリック インターコネクト

- マルチ VIC

- サード パーティのネットワーク アダプタ

- このリリースの新規情報および変更情報

このリリースの新規情報および変更情報

次の表は、この最新リリースに関するマニュアルでの主な変更点の概要を示したものです。この表は、このマニュアルに加えられた変更やこのリリースの新しい機能をすべて網羅するものではありません。

Cisco HX Data Platform の新機能と動作の変更点

機能

説明

追加日

参照先

6400 シリーズ ファブリック インターコネクト サポート

6400 シリーズ FI の更新が Cisco UCS VIC 1400 シリーズ、Cisco UCS VIC 1300 シリーズ、および Cisco UCS VIC 1200 シリーズ アダプタをサポートするようになりました。

HX リリース 3.5 (2a)

Cisco UCS VIC 1400 シリーズおよび 6400 シリーズ ファブリック インターコネクト および Cisco 6454 シリーズ ファブリック インターコネクト

6400 シリーズ ファブリック インターコネクト サポート

6400 シリーズ FI が Cisco UCS VIC 1400 シリーズ、Cisco UCS VIC 1300 シリーズ、および Cisco UCS VIC 1200 シリーズ アダプタをサポートするようになりました。

HX リリース3.5 (1a)

Cisco UCS VIC 1400 シリーズおよび 6400 シリーズ ファブリック インターコネクトおよびCisco 6454 シリーズ ファブリック インターコネクト

Cisco UCS VIC 1400 シリーズおよび 6400 シリーズ ファブリック インターコネクト

Cisco UCS VIC 1400 シリーズは、第 4 世代 Cisco ASIC テクノロジーに基づいており、C シリーズおよび S シリーズの 10/25 ギガビット イーサネット、そして B シリーズ サーバの 10/40 ギガビット イーサネット接続が必要な次世代のネットワークに適しています。追加機能により、usNIC、RDMA/RoCEv2、DPDK、Netqueue、VMQ/VMMQ など、性能に最適化するための低遅延カーネル バイパスがサポートされます。

次のリストでは、VIC 1400 シリーズおよび 6400 シリーズ FI の一般的なサポートのガイドラインのセットを要約します。

- Cisco HX Data Platform リリース 3.5(1a) 以降では、Cisco UCS VIC 1400 シリーズは次のようになります。

- コンピューティングおよびコンバージド ノードの両方をサポートしています。

- HyperV クラスタではサポートされていません。

- Cisco HX Data Platform リリース 3.5(2a) 以降では、Cisco UCS VIC 1400 シリーズは次のようになります。

- コンピューティングおよびコンバージド ノードの両方をサポートしています。

- すべてのコンバージド ノードは、同じ接続速度である必要があります。次に例を示します。

- 混合 M4/M5 クラスタは、1x10G モードのみの M4 ノードおよび VIC 1457 上で VIC1227 がサポートされます。

- 均一 M5 クラスタにはすべての VIC 1457 が必要であり、VIC 1457 と VIC 1387 を混在しないでください。

- 均一 M5 クラスタは、同じ速度と数を実行しているすべての VIC 1457s ポートである必要があります (たとえば、しないでくださいしない 10 G および 25 G を組み合わせることし、同じ数のアップリンクを使用して、すべてのノード用)。

次の表では、Cisco UCS VIC 1400 シリーズおよび UCS ファブリック インターコネクト 6300 および 6400 シリーズでサポートされているトポロジを説明しています。

Cisco HX Release 3.5(2a) 以降の UCS ファブリック インターコネクトの VIC 1400 シリーズ サポート

M5 Cisco UCS VIC 1400 シリーズ接続

B シリーズおよび C シリーズの両方の Cisco UCS VIC 1400 シリーズ アダプタ

6400 シリーズ

6300 シリーズ：

6200 シリーズ

1 x 10 G

HXリリース3.5 (2a) 以降。

サポート対象外

HX リリース 3.5(1a) 以降

2 x 10 G

HXリリース 3.5(2a) 以降。

サポート対象外

HX リリース 3.5(1a) 以降

1 x 25 G

HX リリース 3.5(2a) 以降。

未サポート

未サポート

2 x 25 G

HX リリース 3.5(2a) 以降。

未サポート

未サポート

Cisco HX Release 3.5(1a) の UCS ファブリック インターコネクトの VIC 1400 シリーズ サポート

M5 Cisco UCS VIC 1400 シリーズ接続

B シリーズおよび C シリーズの両方の Cisco UCS VIC 1400 シリーズ アダプタ

6400 シリーズ

6300 シリーズ：

6200 シリーズ

1 x 10 G

未サポート

未サポート

リリース 3.5(1a) でサポート開始

2 x 10 G

未サポート

未サポート

リリース 3.5(1a) でサポート開始

1 x 25 G

未サポート

未サポート

未サポート

2 x 25 G

未サポート

未サポート

未サポート

Cisco 6454 シリーズ ファブリック インターコネクト

Cisco UCS 6454 ファブリック インターコネクトは、Cisco Unified Computing System の中核を成す製品であり、システムのネットワーク接続と管理機能の両方を提供します。また、Cisco UCS 6454 はラインレート、低遅延、ロスレスの 10/25/40/100 ギガビット イーサネット、Fibre Channel over Ethernet（FCoE）およびファイバ チャネル接続機能を提供します。

（注）

Cisco 6454 シリーズ ファブリック インターコネクトは Cisco HX リリース 3.5(1a) リリースではサポートされていません。

HX モジュラ LAN-on-Motherboard (mLOM) と UCS ファブリック インターコネクト マトリックスを示しています。

UCS ファブリック インターコネクト マトリクス

MLOM VIC

インターフェイス

HX-FI-6454 または UCS-FI-6454

HX MLOM 25Q-04 (VIC 1457)

（注）

vSphere 6.5 アップデート 2 以降が必要です。

2 または 4 ポート、10 Gbps のイーサネット

HXリリース 3.5 (2a) 以降で10Gbpsがサポートされます。

HX MLOM 25Q-04 (VIC 1457)

（注）

vSphere 6.5 アップデート 2 以降が必要です。

2 または 4 ポート、25 Gbps のイーサネット

HXリリース3.5（2a）以降で 25 Gbps がサポートされます。

HX MLOM C40Q-03 (VIC 1387)

2 ポート、10 Gbps イーサネット (QSA アダプタ付)

HXリリース 3.5 (2a) 以降で10Gbpsがサポートされます。

HX MLOM C40Q-03 (VIC 1387)

2 ポート、40 Gbps イーサネット

未サポート

HX MLOM CSC-02 (VIC 1227)

2 ポート、10 Gbps イーサネット

HXリリース 3.5 (2a) 以降で10Gbpsがサポートされます。

直接接続モードのクラスタ セットアップの物理的な接続の図

次の図は、Cisco UCS VIC 1455 を備えた C シリーズ ラックマウント サーバの直接接続モードでの物理的な接続例を示しています。ポートの接続は、Cisco UCS VIC 1457 でも同じです。

警告

25GE パッシブ銅ケーブルを使用することは推奨されません。詳細については、CSCvp49398 を参照してください。

Cisco VIC 1455 との直接接続の配線構成 (4 ポート リンク)

Cisco VIC 1455 との直接接続の配線構成 (2 ポート リンク)

（注）

次の制約事項が適用されます。

- ポート 1 と 2 は、同じファブリック インターコネクト (例:ファブリック A) に接続する必要があります。

- ポート 3 と 4 は、同じファブリックインターコネクト (例: ファブリック B) に接続する必要があります。

これは、カード内の内部ポート チャネリング アーキテクチャに起因します。ポート 1 とポート 2 (3 および 4) の間の接続は内部ポートチャネルを形成するため、ポート 1 および 3 が使用されます。

注意

ポート 1 をファブリック インターコネクト A、ポート 2 をファブリック インターコネクト B に接続しないでください。ポート 1 および 3 のみを使用してください。ポート 1 とポート 2 のみを使用すると、検出や設定に失敗します。

HyperFlex クラスタでマルチ VIC サポート

マルチ VIC サポートについて

次の図で示すように複数の VIC アダプタを HyperFlex クラスタに追加可能で、次の利点があります。

各 VIC 1400 シリーズ アダプタでは、次の図に示すように、ポート 1 が FI A に接続され、ポート 3 が FI B に接続されます。

- 適用性の高いネットワーク インフラストラクチャ

- 最高レベルのネットワーク設計の柔軟性

- 物理 VIC 冗長性自動フェールオーバー (「自動フェールオーバーによるマルチ VIC サポート」で次のセクションを参照してください)。

ガイドラインと特別な要件

HyperFlex クラスタに複数の VICアダプタを追加するには、次の一連のガイドラインと特別な要件を使用します。

- 重要—Cisco HX Data Platform、リリース 3.5(1a) 以降の新規導入でのみサポートされます。つまり、リリース 3.5(1a) よりも前に導入された既存のクラスタには、複数の VIC をインストールできません。

- VMware ESXi クラスタのみをサポートします。Multi-VIC は Hyper-V クラスタではサポートされていません。

- HyperFlex M5 コンバージド ノードまたはコンピューティング専用ノードでサポートされます。

- FI を追加したシステムのみで使用します（HX Edge システムではサポートされません）。

- 必須の VIC 1387（MLOM）および VIC 1457（MLOM）が必要です。

- （オプション）数量 1 または数量 2 の VIC 1385 または VIC 1455 PCIe VIC を追加できます。

- VIC 1300 シリーズと VIC 1400 シリーズを同じノードで、または同じクラスタ内で組み合わせることはできません。

- インターフェイスの速度は同じである必要があります。すべて 10 GbE（VIC 1300 を使用する場合には相応の QSA を使用）、または 40 GbE にします。インストールを開始する前に、すべての VIC ポートが接続および検出されている必要があります。インストールにより、すべての VIC ポートが FI に適切に接続されていることが確認されます。

- すべてのノードには、同数のアップリンクを使用する必要があります。これは、ファブリック インターコネクトごとに 1 または 2 のいずれかのアップリンクを利用できる VIC 1400 に重要です。

- 検出プロセスは mLOM スロットでのみ発生するため、PCIe VIC リンクはダウンします。検出プロセスが完了すると、FI ペアへの PCIe リンクがダウン状態のままになることが予想されます。これは、サーバの電源がオフになっている間、mLOM スロットのみがスタンバイ状態になるためです。関連付けプロセスが開始され、サーバの電源がオンになると、PCIe VIC リンクもオンラインになります。

自動フェールオーバーによるマルチ VIC サポート

HyperFlex のマルチ VIC サポートは、単一リンク障害、ファブリック障害、またはハードウェア VIC 障害を許容するように設計されています。次のインストール図に示すように、すべての HX サービスは VIC #1 のポート 1 および VIC #2 のポート 2 に固定されます。2 つの VIC カード上のこの vNICS の分散により、ハードウェアの障害が発生していてる場合でも、シームレスなフェールオーバーが可能です。HX サービス (管理トラフィック、VM のトラフィック、ストレージ トラフィック、および vMotion トラフィック) に対して使用できるな集約帯域幅は、1 個以上の物理 VIC がインストールされているかどうかに関わらず同じです。ただし、追加の未使用ポートは、必要に応じてその他の使用例で使用される可能性があります。ユーザーの vNIC は VIC #1 のポート 2 と VIC #2 のポート 1 で作成できます。各 HX サーバで使用可能な追加の帯域幅で、独自のフェールオーバー戦略と仮想ネットワーキング トポロジを設計できます。

重要

これらの未使用ポートで定義された新規顧客のみ配置し、実稼働 HX トラフィックとの競合を避ける必要があります。HX サービスで使用されるポートではそれらを配置しません。

サード パーティ NIC サポート

はじめに

HyperFlex のサードパーティの NIC サポートは、一連の拡張アプリケーションと使用例の必要に応じて、そのサーバの設定で最高の柔軟性をお客様に提供するように設計されています。HyperFlex サーバへネットワー キング ハードウェアを追加する際に重要な考慮事項については、次のセクションを参照してください。

前提条件

- サードパーティ製 NIC カードの取り付け: クラスタをインストールする前に、サード パーティ製 NIC カードをインストールします。リンクが切断されているか、またはリンクがシャットダウンしています。展開が完了したら、リンクを有効にして、アプリケーションまたは VM の要件に応じて、追加の vSwitches およびポート グループを作成できます。

サポートの一般的なガイドライン

- VMware ESXi クラスタのみをサポートします。HYPER-V クラスタでは、サード パーティの NIC はサポートされていません。

- 残りの vmnic またはサードパーティ製のネットワーク アダプタを使用する追加の vSwitches が作成される場合があります。HyperFlex によって定義された vSwitches に変更が加えられないように注意する必要があります。サードパーティの vmnic は、HyperFlex インストーラによって作成された事前定義済みの vswitches スイッチには接続しないでください。ユーザーが作成した追加の vSwitches は、管理者単独で責任を有し、HyperFlex によって管理されません。

- サード パーティ NIC は、FI および HX Edge で実行されている HX を含む、すべての HX コンバージドとコンピューティング専用システムでサポートされています。

- サポートされているネットワーク アダプタの完全なリストについては、「 UCS HCL ツール」を参照してください。HX サーバは、C シリーズ サーバと同じ認証プロセスを実行し、同じアダプタをサポートします。

- 最も一般的なネットワーク アダプタは、HX コンバージドまたはコンピューティング専用ノードを設定するときに、Cisco から事前インストールを注文できます。ただし、サポートされているアダプタをスペアとして発注し、HyperFlex のインストールを開始する前に、サーバにインストールする可能性があります。

- HX Data Platform リリース 3.5(1a) 以降、サード パーティ アダプタのサポートが開始されます。

- HXDP バージョンに関係なく、クラスタを展開した後、新しいネットワーキング ハードウェアを追加することは推奨されません。物理的なハードウェアの変更により、既存の仮想ネットワー キング設定を中断する可能性があり、HyperFlex とそのホストで実行されているその他のアプリケーションを復元するため手動による介入を必要とする可能性があります。

- *サポートされている NIC の最大数は、サーバの物理 PCIe スペースに基づきます。さまざまなポート速度、アダプタのベンダー、およびモデルの混在は許可されて、HyperFlex インフラストラクチャを実行するこれらのインターフェイスは使用されません。

- サード パーティの NIC は、任意の外部スイッチに直接接続されている場合があります。ファブリック インターコネクト経由の接続は、サード パーティの Nic の必要はありません。

- 重要: Fi で実行中の HX システムでサード パーティ アダプタを使用する場合、特別な注意が必要となります。手動によるポリシーの変更は、インストール時に必要です。手順は次のとおりです。

1. 管理者として、Cisco UCS Manager を起動してログインします。

2. Cisco UCS Manager UI で、[サーバ] タブに移動します。

3. HX クラスタ組織を変更し、接続配置のすべての十分なリソースがあるなど、各サービス プロファイルの設定エラーメッセージを取得するときに、問題を修正するに移動します。

4. 一覧になっている各サービス プロファイル テンプレートで (hx-nodes、hx-nodes-m5、compute-nodes、compute-nodes-m5)、vNIC/vHBA ポリシーを [システム配置] に変更します

1. [vNIC の変更/ vHBA の配置] をクリックします。

2. 次の図に示すように、[配置] を [システム実行時の配置] に戻します。

3. このアクションにより、4 つのサービス プロファイル テンプレートのいずれかに関連付けられているすべてのサービス プロファイルをトリガし、[保留中の確認応答]状態にします。この問題を修正するには、影響を受ける各システムを再起動する必要があります。これは新規クラスタでのみ行い、既存のクラスタ アップグレードまたは拡張時には行わないでください。

5. HX サービス プロファイルの設定エラーが UCS Manager でクリアされない場合は、次の追加の手順を実行します。

1. [vNIC の変更/ vHBA の配置] をクリックします。

2. 配置を HyperFlex に戻して、[OK] をクリックします。

3. [vNIC の変更/ vHBA の配置] をクリックします。

4. 配置を元に戻してシステムの配置を実行し、[OK] をクリックします。

5. すべての HX サーバのサービス プロファイルから障害がクリアされていることを確認します。