VxRail： Dell Enterprise SONiCの導入
2023年9月
H19567

導入ガイド

要旨
この導入ガイドではDell Technologies Enterprise SONiC PowerSwitch
システムをBGP EVPN VXLANを用い、シングルラックまたは
マルチラックVxRailの導入に必要な手順について説明しています。

Dell Technologies Solutions

Copyright
本書に記載されている情報は、現状のまま提供されています。Dell Inc.は、本書の情報に関していかなる表明または保証も行わず、特に商品性または特定目的への適合性に関する黙示の保証を否認します。
本書に記載されているソフトウェアの使用, コピー, 配布には、該当するソフトウェアライセンスが必要です。
Copyright © 2023 Dell Inc. またはその子会社。米国発行 08/23 Deployment Guide H19567.
Dell Inc.は、本書に記載されている情報が発行日現在で正確であると考えています。情報は予告なしに変更されることがあります。また、本書は英語を日本語に翻訳しています。正確な表現は英語版を参照ください。

2

VxRail： Dell Enterprise SONiCの導入
導入ガイド

目次

目次
第１章

はじめに

4

Enterprise SONiC Distribution by Dell Technologies ................................................ 5
文章の目的 ................................................................................................................5
ソリューションハードウェア ...................................................................................6
ソリューションソフトウェア ...................................................................................8
VxRailトラフィックの概要 .......................................................................................8
添付 ...........................................................................................................................5
ご意見・ご感想 .........................................................................................................5
第２章

デプロイメントプロセス

10

ネットワーク仮想化................................................................................................11
データセンターサービス ........................................................................................12
VxRailクラスタの展開 ............................................................................................12
第３章

ファブリックの展開

14

ネットワーク設計の考慮点.....................................................................................15
ファブリックの計画................................................................................................15
ファブリックの展開................................................................................................18
デルのリーフスイッチ ............................................................................................19
シングルリーフペアの展開.....................................................................................21
レイヤ３ BGP EVPN VXLANファブリックのマルチラック展開 ..........................27
スパインスイッチの構成 ........................................................................................45
第４章

ファブリック展開の検証

51

リーフの検証...........................................................................................................52
ルーティングの検証................................................................................................55
スパインの検証 .......................................................................................................59
SONiCファブリックのチェックリスト ..................................................................60
第５章

参考文献

61

導入コンポーネント................................................................................................62
デル・テクノロジーズのドキュメント ..................................................................62

VxRail： Dell Enterprise SONiCの導入
導入ガイド

3

第１章: はじめに

第１章

はじめに

この章では、以下のトピックを紹介します:Enterprise SONiC Distribution by Dell Technologies ..........................................5
文章の目的 ................................................................................................................5
ご意見・ご感想 .........................................................................................................5
記述規則 ....................................................................................................................5
添付 ...........................................................................................................................5
ソリューションハードウェア ...................................................................................6
ソリューションソフトウェア ...................................................................................8
VxRailトラフィックの概要 ......................................................................................84

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第１章: はじめにEnterprise SONiC Distribution by Dell Technologies
デル・テクノロジーズは、高性能でスケーラブルなネットワークオペレーティング
システム(NOS)向けのオープンソースソフトウェアの提供と構築に取り組んでいます。
デル・テクノロジーズはこの面で革新を続けており、現在、拡張性の高いオープン
ソースのネットワークオペレーティングシステムを発表しています。
Enterprise SONiC Distribution by Dell Technologiesは、スイッチの設定と監視のための
SONiCオペレーティングシステムが鍛錬され, 検証され, サポートされたバージョンです。
Dell Enterprise SONiCには、オープンソースのCommunity SONiC distributionにネットワーク機能を追加し、テクニカルサポートの強化が含まれています。Enterprise SONiC
distributionsの詳細については, Enterprise SONiC Distribution by Dell Technologies のWeb
ページを参照してください。

文章の目的
この導入ガイドでは、Dell VxRailクラスタを接続したエンタープライズ Software forOpen Networking in Cloud (SONiC) ファブリックの計画と導入方法を示します。この導入ガイドでは、Enterprise SONiC Standard distribution を使用します。

ご意見・ご感想デル・テクノロジーズおよび本書の作成者は、本ソリューションおよび本書に関するお客様のフィードバックを歓迎します。デル・テクノロジーズ ソリューションチームまで
email. でご連絡ください。

記述規則
本書のCLIとUIの例では以下の規則を使用しています:
テキストスタイル

Representation

モノスペーステキスト

CLIの例

太字等幅テキスト

•

CLIの例

•

CLI出力で強調表示される情報

イタリック体等幅テキスト

CLI例の変数太字•

UIフィールド•

UIに入力される情報

添付
この文章には、１つ以上の添付ファイルが含まれています。以下のいずれかの方法で添付ファイルにアクセスしてください。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

5

第１章: はじめに

PDF 添付ファイル この文章の .pdf バージョンを閲覧する場合には、以下のように添付ファイルにアクセスしてください:1.

.pdf ファイルをダウンロードし Adobe Acrobat で文章を開きます。

2.

左側のペインで、ペーパーlクリップのアイコン(示されます。

)をクリックすると、 添付ファイルが表

ノート: 左ペインが表示されていない場合は、ページの左側にある矢印アイコン( )をクリックし、次にクリップアイコン( )をクリックしてください。

HTML
添付ファイル

このコンテンツをHTML形式でご覧になっている場合は、添付ファイルへのリンクについて最後のセクションを参照してください。

ソリューションハードウェア
この導入では、単純なシングルリーフとスパインリーフファブリックを使用します。
ネットワークの構築には以下のハードウェアを使用します。

スイッチ製品VxRail nodes
Leaf and spine
infrastructure
network6

この導入では、次の図に示すように、スパインスイッチはDell PowerSwitch Z9264F-ONで、
リーフスイッチはDell S5248F-ONです:

図１.

Z9264F-ON

図２.

S5248F-ON

この導入では３台のVxRail E665Fノードを使用します。
次の図は、シンプルなSONiCシングルリーフペアと３ノードクラスタ, シングルラックのセットアップを示しています。このセットアップは主にテスト目的で使用されます。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第１章: はじめに

図３.

Dell Enterprise SONiC レイヤー２アップリンクとファブリック

リーフスパインアーキテクチャは拡張性が高いです。下図に示すように、SONiC Border
Gateway Protocol (BGP) Ethernet VPN (EVPN) VXLANマルチラックセットアップの場合、
ファブリックはアンダーレイとオーバーレイの概念で構成されます。アンダーレイは
BGPルートを提供するレイヤー３IPネットワークで構成されます。オーバーレイは
VXLAN, VTEP, VNIのコンポーネントで構成されます。各リーフペアはMC-LAGポートチ
ャネルを使用します。MC-LAGを使用すると、ピアスイッチ上の複数のインターフェー
スを束ねた論理スイッチを作成できます。

図４.

Dell Enterprise SONiCレイヤー３アップリンクとBGP EVPN VXLANファブリック

VxRail： Dell Enterprise SONiCの導入
導入ガイド

7

第１章: はじめに

ソリューションソフトウェア
SONiC

VxRailSONiCは、スイッチのコンフィグレーションとモニタリングのためのネットワークオペ
レーティングシステムです。出発点はDNSとNTPサービスへの L2アップリンクを使用するシングルリーフペアの配置を使用したシングルラックのセットアップです。この導入のマルチラックセットアップでは、DNSおよびNTPサービスへの L3アップリンクを使用するBGP EVPN VXLANネットワーク仮想化オーバーレイを使用します。ルーティングプ
ロトコルのアンダーレイには、IPv4とIPv6のマルチプロトコルをサポートするBGPを選択しました。
•

VXLAN: ネットワーク仮想化オーバーレイの一種で、テナントのペイロードをIP
UDPパケットにカプセル化し、IPアンダーレイネットワークで転送します。

•

EVPN: EVPNはBGPコントロールプレーンをして機能し、フラッドアンドラーン
を回避して、オーバーレイ内のホストMACアドレスとMAC/IPバインディングの広告と学習を行います。ホストMACとIPの到達可能性情報の配布は、仮想マシン(VM)のモビリティとスケーラブルなVXLANオーバーレイネットワーク設計をサ
ポートします。

•

BGP unnumbered: unnumbered BGPを使用すると、ホストとスイッチは近隣のルーターを自動的に検出します。point-to-pointリンクで接続されているピア
ルーターは、そのルーター広告を解析することで発見されます。

VxRailはハイパーコンバージドインフラストラクチャ(HCI)ソリューションで、コンピュート, ストレージ, ネットワークを単一の可用性の高い統合システムに統合します。綿密な設計により、VxRailは既存のデータセンター環境に迅速に導入することができ、最終製品はすぐにアプリケーションやサービスを展開することができます。VxRailには以下のような特徴があります:

VxRail nodes•

VxRail Manager: これはVMware vCenter Server用のプラグインで、 vSphere Web
Clientを使用せずにVxRailクラスタを管理できます。VxRail Managerは VxRailのバージョンをインストールまたはアップグレードするときにVMware vCenter Serverに登録されます。

•

vSphere Client: これは、ネットワーク内に接続された複数のホストを管理し、ホスト リソースをプールするためのサービスであり、VxRailクラスターを管理します。 vSANは、VxRailにバンドルされているソフトウェアストレージコンポ
ーネントです。

ESXi node: ESXiは、 VMおよび仮想アプライアンスを作成および実行する仮想化プラッ
トフォームです。このガイドに記載されていないプランニングの考慮事項や前提条件については Dell VxRail Network Planning Guide.参照してください。

8

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第１章: はじめに
ノート: この導入ガイドでは、基本的な単一クラスタの例を示します。VxRailクラスタを追加す
るには、これらの計画および設定手順を繰り返します。VxRai固有の情報についてはVxRail
SolVe webサイトを参照してください(アカウントが必要)。

VxRailトラフィックの概要
この導入では、ワークロードまたはVxRailのトラフィックが南北および東西に移動します。ラック, 外部コアネットワーク, および２つのリーフペアスイッチ間には、いくつかの接続が構成されています。次の図は、この環境の全体的なデータフローを示してい
ます。

図５.

SONiCリーフスパイン上のVxRailデータトラフィックフロー

南北データフロー 南北データフローはレイヤ３(L3)経由でルーティングされます。リーフスイッチは、
VxRailクラスタから来るすべてのトラフィックのデフォルトエニーキャストゲートウェイ
をして設定されます。

Interrackトラフ
ィックフロー

VxRailクラスタの構築には、この構築と展開のためにホストレコードが追加された、ネッ
トワーク上で到達可能な１つのDNSサーバーへのアクセスが必要です。このアクセスには、リーフペアスイッチの１つの外部ネットワークへのレイヤー２(L2)またはL3アップリ
ンクを使用できます。この導入では DNSおよびNTP接続にL3アップリンクを使用します。
vSAN, vMotion, ユーザーデータトラフィックなど、すべての東西データフローはL3でL2
カプセル化されます。これらのネットワークはそれぞれ特定のVNIに割り当てられます。
各VNIは特定のVTEPに関連付けられ、ポイントツーポイント接続を作成します。
vSAN, vMotion, VxRail外部接続およびVxRail内部管理ネットワークはインフラストラク
チャVLANとみなされます。これらのVLANはクラスタの構築時にVxRailノードがお互いを検出するために切り替える必要があります。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

9

第２章: デプロイメントプロセス

第２章

デプロイメントプロセス

この章では以下のトピックを紹介します:

ネットワーク仮想化 ...............................................................................................11
データセンターサービス ........................................................................................12
VxRailクラスタの展開............................................................................................12

10

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第２章: デプロイメントプロセス

ネットワーク仮想化
概要

VxRailクラスタを展開する前に、 VxRailクラスタの展開.の説明に従って、VxRail クラスタに必要なVxRailネットワークでEnterprise SONiCファブリックを構成します。
マルチラック導入の場合、図５に示すように、これらのVxRailインフラストラクチャ
VLANは、単一のVxRailクラスタが展開されているファブリックラックにまたがって拡張する必要があります。

VXLAN Tunnel
End Point (VTEP)

マルチラック環境では、BGP EVPN VXLANを活用してネットワークを拡張します。これには、Enterprise SONiC EVPN VXLAN機能を使用して仮想トンネルを展開します。
virtual extensible LAN (VXLAN)は、マルチテナントの仮想化データセンターにおいて、
テナントセグメントの仮想マシンや物理マシンなどのL2ホスト接続を、基礎となるL3ト
ランスポートネットワーク上に拡張します。次の図に示すように、オーバーレイ(Virtual
Extensible LAN) VXLANネットワークは、VXLANパケットのカプセル化とカプセル解除にVTEPを使用します。各VTEPは、Network Virtual Interface (NVE)ループバックインタ
ーフェースに関連付けられています。
このループバックインターフェースはトンネルソースIPアドレスです。UDPヘッダはこのアドレスを使用してVXLANカプセル化パケットを送受信するホストの送信元アドレスと宛先アドレスを指定します。
リモートデバイス宛のパケットは、ファーストホップとしてローカルVTEPに送信されます。パケットは下図に示すように、VXLAN付きVNIと宛先ホストのIPマッピングを含む
VLANヘッダーでカプセル化されます。パケットは宛先VTEPに送信されます。宛先
VTEPは元のパケットを抽出し、宛先にルーティングします。

図６.

VXLANカプセル化フレーム(参考用)

VxRail： Dell Enterprise SONiCの導入
導入ガイド

11

第２章: デプロイメントプロセス

Logical VTEPVTEPには物理的なものと論理的なものの２種類があります。物理VTEPは２つの物理エ
ンドポイントまたはインターフェース間に作成されるのに対し、論理VTEPのエンドポ
イントは論理構成に基づいています。
図４に示すように、リーフスイッチペア間に論理VTEPが作成されます。リーフスイッチ
ペアは、全てのVXLANトンネルエンドポイントに対して単一の論理デバイスとして動作するように設定されます。
論理VTEPはリモートリーフスイッチペアとBGP EVPN VXLANセッションを形成し、各リモートリーフは論理VTEPと単一のVXLANトンネルを形成します。

データセンターサービス
VxRailクラスタは、クラスタの初期立ち上げ時に以下のサービスを必要とします:•

Domain Naming Services (DNS): このサービスは、VxRailクラスタのデプロ
イと継続的な運用に必要です。

•

Network Time Protocol (NTP): このサービスは、クラスタ全体のクロック設定
を同期させるために使用されます。このサービスは、VxRailのバージョンによってオプションになります。VxRailバージョン8.0では、NTPサービスはオプショ
ンでうｓ。

•

VMware vCenter: VxRailソリューションは、クラスタ管理と運用のためにVMware
vCenterに依存しています。このvCenterは、VxRailで提供される組み込みインスタンスまたは外部vCenterを使用できます。この導入ではvCenterインスタンスを使用します。

ノート: この導入では、外部DNSとNTPサーバーの例をL2およびL3アップリンクでしようします。

VxRailクラスタの展開
概要

VxRailクラスタを構築する前に、いくつかのコンポーネントをインフラストラクチャに実装する必要があります。以下のVxRailネットワークは、クラスタを実装する前にリー
フスイッチのインフラストラクチャに展開されます。
ノート: クラスタの展開手順はこのドキュメントの範囲外です。インストール手順については、Dell VxRail Network Planning Guide および VxRail Appliance SolVe procedures (アカウントが必要)を参照してください。

VxRail discovery
VLAN

VxRail管理トラフィックは、サービス管理者, アプリケーションおよびエンドユーザーの外部ネットワークと、自動検出とデバイス管理のみに使用され、アップストリームネ
ットワークから隔離された内部ネットワークという、２つの独立した論理ネットワークにセグメント化されます。
デフォルトでVLAN 3939を使用する内部管理ネットワークは、初期導入時およびノード
拡張時にVxRailマネージャーによるデバイス検出のためだけに使用されます。

12

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第２章: デプロイメントプロセス

クラスタ内のすべてのノードを正常に検出するには、スイッチでVLAN 3939を設定し、VxRailノードに接続されているスイッチポートでtrunk モードを有効にします。

図７.

VxRail discovery VLAN

VxRail検出プロセスは、マルチキャストベースの検出プロトコルであるmDNSを使用します。

VxRailクラスタ
ネットワーク

VxRailマネージャーを使用したVxRailクラスタの初期デプロイ時に、クラスタを立ち上げ
るために必要なVxRailネットワークが作成されます。これらのネットワークは、VxRail外部管理ネットワーク, vSANネットワーク, vMotionネットワークおよびVMかワークロー
ドネットワークです。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

13

第３章: ファブリックの展開

第３章

ファブリックの展開

この章では以下のトピックを紹介します:

ネットワーク設計の考慮点 ....................................................................................15
ファブリックの計画 ...............................................................................................15
ファブリックの展開 ...............................................................................................18
デルのリーフスイッチ ............................................................................................19
シングルリーフペアの展開 ....................................................................................21
レイヤ３ BGP EVPN VXLANファブリックのマルチラック展開 .........................27
スパインスイッチの構成 ........................................................................................45

14

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

ネットワーク設計の考慮点
概要

この導入ガイドでは、VxRailクラスタに必要なSONiCネットワークインフラストラクチャの全構成要件について説明します。この章では、SONiCｎ導入計画について説明します。
BGP EVPN VXLANファブリックを構築するには、以下の各ファブリックの計画要素が必要です。

ファブリックの計画
ホスト名, 管理IPアドレス, ループバックデバイス, 仮想ネットワーク, DNSやNTPなどのネットワークサービスなど、環境を展開する前にいくつかの項目を計画する必要があります。シングルラックとマルチラックの導入では、同じ設定を利用します。シングル
ラックの実装に適用される注意事項が追加されています。

スイッチホスト名 インフラストラクチャ構成プロセスを開始するには、スイッチのホスト名構造情報を決定します。この配置では必要に応じてLeaf1A, Leaf1B, Leaf2A, Leaf2B, Spine1, およびSpine2を使用します。
スイッチのホスト名は、具体的で説明的なものにする必要があります。デル・テクノロ
ジーズでは、次の表に示すようにファブリックにおける各スイッチの役割から始めることを推奨しています:
表１.

ファブリックホスト名の例
設定

S5248FS5248FS5248FS5248F

Z9264

Z9264

Leaf1A

Leaf1B

Leaf2ALeaf2B

Spine1

Spine2

Leaf2ALeaf2B

Leaf1A

ホスト名

Leaf1B

Spine1

Spine2

表中のホスト名を各スイッチに適用する。

Out of band 管
理IPアドレス

ファブリック内の各スイッチはout of band (OOB)管理IPアドレスを必要とします。
このインターフェースは、ファームウェアのアップグレードや全体的な管理アクセスに使用されます。スイッチはコンソールまたはSSHアクセスを提供できます。ネットワーク要件に応じてIPアドレスを割り当てます。
表２.

設定
OOB

スイッチOut-of-Band IP管理アドレス

S5248FS5248FS5248FS5248F

Z9264

Z9264

Leaf1A

Leaf1B

Leaf2ALeaf2B

Spine1

Spine2

外部ネッ
トワーク

100.67.xx.y1

100.67.xx.y2

100.67.xx.y3

100.67.xx.y4

100.67.xx.y5

100.67.xx.y6

100.67.xx.y7/.y8

アドレス

BGP
Autonomous
System Number(ASN)

ファブリックはBGP EVPN VXLANに基づいています。次の表は、各スイッチリーフペア,
スパインおよびボーダールーターデバイスに設定するAutonomous System Number(ASN)を示しています。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

15

第３章: ファブリックの展開
表３.

ファブリックASNの構成

設定
ASN

ルーターID(Loopback 0)

Rtr_ID (Lo0)S5248FS5248FS5248F

Z9264

Z9264

Leaf1A

Leaf1B

Leaf2ALeaf2B

Spine1

Spine2

外部ネッ
トワーク

65101

65101

65102

65102

65100

65100

65011

loopback 0設定は、ルーティングプロトコルBGPが要求するルータIDパラメータとして使用されます。このパラメータは、ルーティングプロトコルに参加する異なるルータ間の接続を確立するためにBGPによって使用される多くのパラメータの１つです。
ルーターID (Loopback 0)の設定

表４.
設定

S5248FS5248FS5248FS5248FS5248F

Z9264

Z9264

Leaf1A

Leaf1B

Leaf2ALeaf2B

Spine1

Spine210.0.2.1/32

10.0.2.2/32

10.0.2.3/32

10.0.2.4/32

1.1.1.1/32

1.1.1.2/32

外部ネットワーク10.0.2.5, 10.0.2.6/32

ノート: シングルリーフペアシングルラックの場合、MC-LAGはVLAN 1000に割り当てられたIPを使用。

ネットワーク仮想エッジインターフェース
Loopback 1

設定
NVE (Lo1)loopback 1の設定は、VXLAN tunnel end-point IP interfaces (VTEP)として使用します。
デバイスの各ペアには同一のNVEが設定されています。トンネルはすべてのリーフペア
間で確立されます。次の表にファブリックの展開フェーズで適用するNVEを示します。
ネットワーク仮想インターフェース(Loopback 1)の設定

表５.

S5248FS5248FS5248FS5248F

Leaf1A

Leaf1B

Leaf2ALeaf2B

10.222.222.1/32

10.222.222.1/32

10.222.222.2/32

10.222.222.2/32

仮想ネットワー
ク

Z9264
Spine1/2
N/A

外部ネッ
トワーク
N/A

VxRailクラスタをオンラインにするには、リーフペア上に複数の仮想ネットワークが必要です。この導入では５つの異なる仮想ネットワークが作成されます:•

外部管理 (1811)•

vMotion (1812)•

vSAN (1813)•

ワークロードゲスト仮想ネットワーク(1814)•

内部管理/ディスカバリー (3939)

VxRailクラスタの初期導入では、デフォルトネットワーク(VLAN 1)を設定します。デフォルトおよびテナントのVRF VNIと転送用に、インフラストラクチャ上のL3 VNIルーテ
ィング用にVLAN 2001が作成され、異なるラックに拡張されます。
表６.

16

必要なネットワーク

設定

仮想ネットワーク

S5248F Leaf1A

1811,1812,1813,1814,3939,2001,1

S5248F Leaf1B

1811,1812,1813,1814,3939,2001,1

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
設定

仮想ネットワーク

S5248F Leaf2A

1811,1812,1813,1814,3939,2001,1

S5248F Leaf2B

1811,1812,1813,1814,3939,2001,1

Z9264 Spine1

N/A

Z9264 Spine2

N/A

これらの仮想ネットワークはリーフスイッチにのみ設定され、スパインスイッチはこ
れらのネットワークをルーティングします。

VLAN エニキャ
ストアドレス

表７.

VLANエニキャストIPアドレス

S5248FS5248FS5248FS5248F

Z9264

Z9264

Leaf1A

Leaf1B

Leaf2ALeaf2B

Spine1

Spine2

1811

172.18.11.254/24

172.18.11.254/24

172.18.11.254/24

172.18.11.254/24

N/A

N/A

1812

N/A

N/A

N/A

N/A

N/A

N/A

1813

N/A

N/A

N/A

N/A

N/A

N/A

1814

172.18.14.254/24

172.18.14.254/24

172.18.14.254/24

172.18.14.254/24

N/A

N/A

設定

VTEPアドレス

表８.
設定
VTEP1

VTEP IPアドレス
S5248FS5248FS5248FS5248F

Leaf1A

Leaf1B

Leaf2ALeaf2B

10.222.222.1

10.222.222.1
10.222.222.2

10.222.222.2

VTEP2

DNS, NTPへのL2, L2およびL3アップリンクは、各アップリンクのセットアップでDNS, NTPサービスに
L3アップリンク使用されるリファレンスです。L2ポートチャネルアップリンクの例は、DNSおよびNTPサービスへのシングルリーフペアに使用されます。L3ポイントツーポイントアッ
プリンクの例は、DNS/NTPサービスへの２リーフペア展開に使用されます。
表９.

L2, L3アップリンクを持つ外部サービス

Setting

DNS

NTP

VLAN

Leaf1A

Leaf1B

L2 uplinks

172.18.11.50

172.18.11.50

1811

PortChannel 100

PortChannel 100

L3 uplinks

172.19.11.50

172.19.11.50

1911

192.168.1.1/31

192.168.1.3/31

192.168.2.1/31

192.168.2.3/31

ノート: L2アップリンクとシングルリーフペアを使用する場合、VLAN 1000はMC-LAGピアリン
クの目的で設定されます。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

17

第３章: ファブリックの展開

ファブリックの展開
概要

計画が完了したらファブリックの展開を開始します。ファブリックの展開:•

リーフの展開•スパインスイッチの展開

出発点はシングルリーフのペア図３, そして図８のような２ラックセットアップです。
シングルラックは、レイヤー２アップリンクとシングルリーフペアファブリックで構成されています。シングルラックにはルーティングプロトコルは設定されていません。すべてのVxRailノードは、Leaf1A- Leaf1Bリーフペアに接続されています。もう１つの構
成は、２ラック構成です。２ラック構成では、レイヤー３アップリンクとマルチペアファブリックが２本のスパインで接続されます。
VxRailクラスタは２つのラックにまたがっています。設定されているルーティングプロト
コルは、VXLANトンネル用のEVPN VXLANプロトコルを使用したBGPです。
VLAN, ホスト名, 管理IPアドレスは、シングルリーフペアセットアップとBGP EVPNVXLANセットアップで同じです、Leaf1AとLeaf1Bはシングルリーフペアセットアップで使用されます。L2アップリンクの例からL3アップリンクの例に行くには、マイナーな変更が必要です。どちらの場合も、VxRailクラスタのDNSとNTPサービスのために外部ネットワークにアクセスします。

Topology

ノート: このセクションではリーフ/スパインスイッチの設定は表形式です。

この導入の主な参照トポロジーは以下の通りです:•リーフスイッチ４台 – S5248F•

スパインスイッチ２台 – Z9264F•

１つの外部ネットワーク – IPサービス DNS, NTP•

１ラック以上の最小３ノードVxRailクラスタ

図８.

18

L3 BGP EVPN VXLAN展開のリファレンストポロジー

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

ファブリックはBGP EVPN VXLANを使用して構築され、必要なディスカバリーVLAN(3939)とVxRailインフラストラクチャVLAN (ext-Management 1811, vSAN 1812,
vMotion 1813) およびワークロードVM (1814)をストレッチします。

デルのリーフスイッチ
Switch管理OOB

各リーフとスパインに一意のスイッチOOB管理IPアドレスを割り当てます。
リーフ/スパイン
configure terminalinterface Management 0
end

ip address 100.67.xx.yy/24

write memory
ノート: 新しいSONiCスイッチの設定は、Zero Touch Provision (ZTP)を無効にする必要があります。sonic-cli configure terminal コマンド"no ztp enable"を使用します。
ノート: スイッチの管理インターフェースeth0にアクセスするために、別のスイッチ管理ネットワークを持つことはベストプラクティスです。

デ フ ォ ルトの管 理 パ スワー
ド変更

始めてログインするとパスワードを変更するように求められます。手順に従ってパスワードを変更しLinux shellにログインしてください。
You are required to change your password immediately (rootenforced)
Changing password for admin.
(current) UNIX password: YourPaSsWoRdEnter new UNIX password: newpassword
Retype new UNIX password: newpassword
Password: password updated successfully
admin@sonic:~$sonic-cli
ノート: デル・テクノロジーズでは、強固なパスワードを使用することを推奨しています。

インターフェー
ス名とホスト名

インターフェース名を“standard”に設定し、対応するスイッチホスト名を更新します。
Enterprise SONiCでは、native, standard, standard extended interface- namingモードを使用しています。 デフォルトではスイッチはnativeモードです。デル・テクノロジーズ
では、standardまたはstandard extended interface- namingモードの使用を推奨します。
インターフェースに関連付けられているフロントパネルのポートを簡単に識別するには
standard interface- namingモードを有効にします。例えばstandardモードのポート１は
CLIで"ethernet 1/1"として識別され、この場合ホスト名は“LeafX,”でXはリーフ番号です。
3.

sonic-cli コマンドを使用して、Legacy SONiC CLIからManagement
Framework CLI (MF-CLI)に接続します。

4.

configure terminalコマンドを使用してコンフィグレーションモードに入ります。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

19

第３章: ファブリックの展開
Leaf1A

Leaf1Bsonic-cli
configure terminal

sonic-cli
configure terminal

5.

コンフィグレーションモードでinterface-naming standardに入ります。
この導入ガイドではstandard interface namingモードを使用します。

ノート: interface namingモードを有効にするにはMF-CLIセッションをLinux shellに終了しMFCLIに再入力する必要があります。SONiCセッション中に次のメッセージが表示されます:“Broadcast message: Interface naming mode has changed. Users running 'sonic-cli' are required
to restart your session.”Leaf1A

Leaf1Binterface-naming standard
end
write memory
exit

interface-naming standard
end
write memory
exit

6.

MF-CLIに再入力します。

7.

configure terminalモードに入ります。

8.

hostnameコマンドと使用してホスト名を設定します。

ノート: MF-CLIプロンプトの write memory を使用して、設定変更を定期的に保存するのがベストプラクティスです。
Leaf1A

Leaf1B

Sonic-cli
configure terminal
hostname Leaf1A

Sonic-cli
configure terminal
hostname Leaf1B

ノート: 新しいホスト名を有効にするにはLinux shellへのMF-CLIセッションを終了し、MF-CLIに再入力する必要があります。SONiCのセッション中に次のメッセージが表示されます:“Broadcast message: Hostname has been changed from sonic to Leafxx. Users running 'sonic-cli'
are suggested to restart your session.”

write memoryコマンドで実行中の設定をフラッシュに保存し、configure terminalを終

9.

了します。
10.

20

すべてのスイッチでこの手順を繰り返します。

Leaf1A

Leaf1Bend
write memory
exitsonic-cli

end
write memory
exitsonic-cli

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf2ALeaf2Bsonic-cli
configure terminalinterface-naming standard
hostname Leaf2A
end
write memory
exitsonic-cli

sonic-cli
configure terminalinterface-naming standard
hostname Leaf2B
end
write memory
exitsonic-cli

シングルリーフペアの展開
シングルラックは、レイヤー２アップリンクとシングルリーフペアファブリックで構成されます。シングルラックにはルーティングプロトコルは設定されません。すべての
VxRailノードは、Leaf1A-Leaf1Bリーフペアに接続されています。詳細については図３を参照してください。

エニキャスト,
VRF

仮想ネットワー
クインターフェース

エニキャストとVRFテナントの設定と有効化:
1.

エニキャストアドレスを有効にする。

2.

エニキャストのmacアドレスを00:00:00:11:11:11に設定。

3.

ipv6 anycast-addressを有効にする。

4.

vrf Tenant1を作成する。

5.

管理vrfを作成する。

6.

vrf mgmtでssh-serverを有効にする。
Leaf1A

Leaf1B

configure terminal
ip anycast-address
enableip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address
enableip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
endwrite memory

configure terminal
ip anycast-address
enableip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address
enableip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
endwrite memory

このシングルリーフペアセットアップでは、VxRailノードに接続されているサーバーフェイシングスイッチポートに対して、デフォルトVLAN 1 VxRailネットワーク1811-1814,
3939が作成されます。全てのサーバー向けポートには、タグなしVLAN 1とタグ付き
VLANの1811, 1812, 1813, 1814, 3939が含まれます。ネイティブのタグなしVLAN 1は、最初のVxRail展開ウイザードにアクセスするために作成されます。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

21

第３章: ファブリックの展開
Leaf1A

Leaf1B

configure terminal!
interface Vlan1
description default_untagged
ip vrf forwarding VrfTenant1
exit
end
write memory

configure terminal!
interface Vlan1
description default_untagged
ip vrf forwarding VrfTenant1
exit
end
write memory

VxRail VLANネットワーク1811,1812,1813,1814,3939を作成します。

22

Leaf1A

Leaf1B!
interface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
No shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
No shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
No shutdown!
interface Vlan1814
description vm_netAneigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
No shutdown!
interface Vlan3939
description int_discovery!
interface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
No shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
No shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
No shutdown!
interface Vlan1814
description vm_netAneigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
No shutdown!
interface Vlan3939
description int_discovery

ip vrf forwarding VrfTenant1
mtu 9216

ip vrf forwarding VrfTenant1
mtu 9216

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

No shutdown
!
exit
end
write memory

No shutdown
!
exit
end
write memory

マルチシャーシ
各リーフペアはMC-LAGピアリンクを使用して相互接続されます。このシングルリーフ
Link Aggregation ペアセットアップは各ピアを識別するために一意のIPアドレスを使用します。コマンド(LAG)
mclag-separate-ipは、 VLAN 1000を使用して一意のIPアドレスを許可します。L2

アップリンクでは、 MC-LAGピアの個別IPアドレスとして使用するVLAN 1000を作成します:1.

インターフェースVLAN 1000を作成します。

2.

Descriptionを作成します。これはお勧めです。

3.

MCLAG-separate-IPを設定します。

4.

IPアドレスを割り当てます。
Leaf1A

Leaf1B

configure terminalinterface Vlan1000
description MCLAG-PeerIPmclag-separate-ip
ip address 10.0.0.0/31
no shutdown
endwrite memory

configure terminalinterface Vlan1000
description MCLAG-PeerIPmclag-separate-ip
ip address 10.0.0.1/31
no shutdown
endwrite memory

MC-LAGピアリンクを設定するには:1.

interface PortChannel <xxx> コマンドを使用してポートチャネルを作成します。デル・テクノロジーズでは、アルファベット名ではなく数字を使用することを推奨します。VLAN: 1, 1000, 1811-1814, 2001, 3939.
Leaf1A

Leaf1Binterface PortChannel 256 modeondescription MCLAG-Leaf1ABPeerLink
switchport trunk allowed Vlan
1,1000,1811-1814,2001,3939
mtu 9216
no shutdown
endwrite memory

interface PortChannel 256 modeondescription MCLAG-Leaf1ABPeerLink
switchport trunk allowed Vlan
1,1000,1811-1814,2001,3939
mtu 9216
no shutdown
endwrite memory2.

no shutdownを使用してMC-LAGで使用するメンバーポートを立ち上げます。description

でインターフェースの説明を記載します。
3.

新しいポートチャネルにメンバーポートを割り当てます。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

23

第３章: ファブリックの展開

24

Leaf1A

Leaf1B!
interface Eth1/49
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/50
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/51
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/52
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
endwrite memory!
interface Eth1/49
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/50
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/51
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/52
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
endwrite memory

4.

MC-LAGドメインを作成するには、ユーザーはドメインIDを定義する必要があります。ドメインIDにはローカルソースIPv4アドレス, ピアIPv4アドレス, 両方のピアを同期させるために作成したポートチャネルを含める必要があります。

5.

２つのピアノード間でMC-LAGドメインを立ち上げるには、両端にMC- LAGドメインを設定します。一方のソースIPがもう一方のピアアドレスになります。
Leaf1A

Leaf1B!
mclag domain 1
source-ip 10.0.0.0
peer-ip 10.0.0.1
peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:01!
mclag domain 1
source-ip 10.0.0.1
peer-ip 10.0.0.0
peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:01

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

スイッチエンド
ホストインター
フェースの設定

Leaf1A

Leaf1Bkeepalive-interval 1
session-timeout 30
end
write memory

keepalive-interval 1
session-timeout 30
end
write memory

この導入設定では、 ３台のVxRailノードがリーフペアスイッチに接続されます。リーフ
ペアスイッチポートは、VxRailノードへの接続を可能にします。VxRailノードに接続されている各リーフスイッチポートは、VxRailネットワーク用のトランクタグ付きポートとして設定され、各VxRailノードからはアクティブ/スタンバイ構成の25 GbEリンクが２つあります。リーフペアスイッチには１つのジャンプホストが接続されています。ジャンプホストはVxRailの展開ウイザードにアクセスするために使用されます。この例ではジャンプホストはタグなしリーフスイッチポートを使用し、VxRailの初期設定中、デフォルトVLANとしてswitchport access VLAN1を使用します。展開後、ジャンプホスト
はVLAN1811を使用し、VLAN1811はVxRailノードの正常動作時に管理用に使用します。
ノート: 現在、Dell Enterprise SONiCはLACP Individualをサポートしていません。この導入ガイドで使用する例はVxRailノードからリーフスイッチへのLACP構成は使用していません。今後のDell Enterprise SONiC Distribution で の 対 応 は Dell.com で 確 認 し て く だ さ い 。

1.

各VxRailノードに接続するリーフスイッチポートを設定します。

2.

各ポートのdescriptionを作成します。これはお勧めです。

3.

VxRailの外部管理にアクセスるるために初期導入用VLAN 1を追加します。

4.

MTUを9216に設定します。

5.

VxRailネットワークをトランクVLANとして追加します。

6.

VLAN 1にタグなしとしてジャンプホストswitchportを作成します。以下のノートを参照:
Leaf1A

Leaf1B

configure terminalinterface Eth1/1
description VxRail_01
no shutdown
mtu 9216
switchport access vlan1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/2
description VxRail_02
no shutdown
mtu 9216
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/3
description VxRail_03

configure terminalinterface Eth1/1
description VxRail_01
no shutdown
mtu 9216
switchport access vlan1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/2
description VxRail_02
no shutdown
mtu 9216
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/3
description VxRail_03

VxRail： Dell Enterprise SONiCの導入
導入ガイド

25

第３章: ファブリックの展開
Leaf1A

Leaf1Bno shutdown
mtu 9216
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/15
description Jumphost01
no shutdown
switchport access vlan 1!
endwrite memory

no shutdown
mtu 9216
switchport access vlan1
switchport trunk allowed Vlan
1811-1814,3939!
interface Eth1/15
description Jumphost01
no shutdown
switchport access vlan 1!
endwrite memory

ノート: ジャンプホストはVLAN 1用に初期設定されています。VxRail初期導入の30%はVLAN
1811と1811ネットワークに対応するジャンプホストIPアドレス(例：172.18.11.201)を使用する
ジャンプホストが必要です。

外部ネッ
トワーク
へのアッ
プリンク

このシングルリーフペアの展開で外部コアネットワークに接続されるリーフスイッチポ
ートは、レイヤー２アップリンクを使用します。詳細については図３を参照してください。レイヤー２アップリンクにより、VxRailノードはDNSとNTPサービスにアクセスでき、これらのノードは外部ルーターへのポートチャネル100を使用します。
ノート: L3アップリンクは、後の２ラック導入ガイドのセクションで使用します。

26

1.

外部ルーターへのポートチャネルを設定します。

2.

アップリンクポートにchannel-group 100を適用。

3.

終了して設定を保存します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf1A

Leaf1B

configure terminalInterface PortChannel 100
mode ondescription L2-uplink-po100
switchport trunk allowed vlan
1811
no shutdown
mclag 1interface Eth1/53
description uplink_01
no shutdown
channel-group 100!
interface Eth1/54
description uplink_02
no shutdown
channel-group 100!
end
write memory

configure terminalInterface PortChannel 100 modeondescription L2-uplink-po100
switchport trunk allowed vlan
1811
no shutdown
mclag 1interface Eth1/53
description uplink_01
no shutdown
channel-group 100!
interface Eth1/54
description uplink_02
no shutdown
channel-group 100!
end
write memory

シングルリーフペアのセットアップが完了し、VxRailクラスタをシングルラック用にデプロイできます。次のセクションでは２つのリーフペア(２ラック)のデプロイと２つのスパインの追加について説明します。

レイヤ３ BGP EVPN VXLANファブリックのマルチラック展開
L3 BGP EVPN VXLANの導入には次の手順を使用します。これは２つのリーフペアと２つのスパインを持つ２ラックの設定です。この導入例ではL3アップリンクを使用します。２ラックの設定ではVxRailノードは２つのラックに配置されます。
変更内容:•

MC-LAGピアリンクのアップデート•

ポートチャネル256の更新•

ポートチャネル100の削除•

インターフェースVLAN 10001の削除•

外部ネットワークへのL3アップリンクの提供例

詳細については図４を参照してください。

インター
フェース
名, ホス
ト名

インターフェースのネーミングをStandardに設定し、スイッチのホスト名を更新します。
この場合のホスト名は“LeafX,”でXはリーフ番号です。
1.

sonic-cli コマンドを使用してLegacy SONiC CLIからManagement Framework CLI(MF-CLI)に接続します。

2.

configure terminal コマンドを使用してコンフィグレーションモードに入ります。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

27

第３章: ファブリックの展開
Leaf1A

Leaf1Bsonic-cli
configure terminal

sonic-cli
configure terminal

3.

コンフィグレーションモードでinterface-naming standardに入ります。
この導入ガイドでは、Standard Interface namingモードを使用します。

4.

ホスト名をLeafXに変更します。

5.

configure terminalを終了します。

6.

設定を保存します。

7.

CLIを終了します。

8.

CLIに戻ります。

ノート: interface namingモードを有効にするには、MF-CLIセッションをLinux shellに終了しMFCLIに再入力する必要があります。SONiCセッション中に次のメッセージが表示されます。
“Broadcast message: Interface naming mode has changed. Users running 'sonic-cli' are required
to restart your session.”“Broadcast message: Hostname has been changed from sonic to Leaf1x. Users running 'sonic-cli'
are suggested to restart your session.”

ルーターrouter
ID Loopback

28

Leaf1A

Leaf1Binterface-naming standard
hostname Leaf1A
end
write memory
exit

interface-naming standard
hostname Leaf1B
end
write memory
exit

Leaf2ALeaf2Bsonic-cli
configure terminalinterface-naming standard
hostname Leaf2A
end
write memory
exitsonic-cli

sonic-cli
configure terminalinterface-naming standard
hostname Leaf2B
end
write memory
exitsonic-cli

Leaf router ID assigned to Loopback0.
1.

Create interface Loopback 0を作成し一意のIPアドレスを提供します。
これは、EVPNオーバーレイルートを通知するBGPの使用されるルーターIDです。

2.

インターフェースのdescriptionを記載します。これはお勧めです。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf1A

Leaf1B

configure terminalinterface Loopback 0
description Router-ID
ip address 10.0.2.1/32
exit
end
write memory

configure terminalinterface Loopback 0
description Router-ID
ip address 10.0.2.2/32
exit
end
write memory

Leaf2A-Leaf2Bペア
次に示すコンフィグレーション設定を使用します:

仮想ネットワー
クインターフェースの一般設定

Leaf2ALeaf2B

configure terminalinterface Loopback 0
description Router-ID
ip address 10.0.2.3/32
exit
end
write memory

configure terminalinterface Loopback 0
description Router-ID
ip address 10.0.2.4/32
exit
end
write memory

VXLANはL2フレームをL3パケットにカプセル化(トンネリング)することで、既存のL3ネットワーク上にL2オーバーレイメカニズムを提供します。VXLAN-shared転送ドメインは、
テナントL2セグメントの仮想マシンや物理マシンなどのホストが共有IPネットワーク上で通信することを可能にします。
次のVxRail VLANを作成します。VLAN 1811は外部MGMT VLANと3939 (内部ディスカバリー
MGMT VLAN)用です。VLAN 1812はvMotion用, VLAN 1813はvSAN用, VLAN 1814はゲスト
ワークロード用VLANです。
この導入ではVLAN 1がデフォルトVLANです。VLAN 2001はVRF VNIマッピングとルーティングに必要です。全てのVxRailノード対向スイッチポートはVLAN 1811,1812,1813,1814,
3939に対してトランクされます。
1.

nve loopbackを作成します。

2.

エニキャストを有効にしanycast mac addressを割り当てます。

3.

ipv6 anycast-addressを有効にします。

4.

ip vrf vrf<x> コマンドでVRFを作成します。

5.

管理vrfを作成します。

6.

管理vrfでssh-serverを有効にします。

7.

ダウンストリームリンクのlink state trackingを有効にします。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

29

第３章: ファブリックの展開

30

Leaf1A

Leaf1B

configure terminalinterface Loopback 1
description nve_loopback
ip address 10.222.222.1/32
no shutdown!
ip anycast-address enable
ip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address enable
ip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
link state track leaf
timeout 180
downstream all-mclag
end
write memory

configure terminalinterface Loopback 1
description nve_loopback
ip address 10.222.222.1/32
no shutdown!
ip anycast-address enable
ip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address enable
ip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
link state track leaf
timeout 180
downstream all-mclag
end
write memory

8.

デフォルトVLANと対応するVRFを作成します。

9.

VRF forwardingとVNIマッピング用に単一のVLANを作成します。これはVRF転送で使用するために重要です。
Leaf1A

Leaf1B

configure terminalinterface Vlan1
ip vrf forwarding VrfTenant1
no shutdown!
interface vlan2001
description ForVrfVniMapping
ip vrf forwarding VrfTenant1
no shutdown!
endwrite memory

configure terminalinterface Vlan1
ip vrf forwarding VrfTenant1
no shutdown!
interface vlan2001
description ForVrfVniMapping
ip vrf forwarding VrfTenant1
no shutdown!
endwrite memory

10.

VxRail VLANを作成し対応するVRFに割り当てます。

11.

vxrail-ext-mgmt, vMotion, vSANおよびvxrail- internal-mgmt (discovery VLAN)の
各VLANに説明を記載します:12.

VxRail VLAN 1811,1814の場合、対応するVRFにエニキャストゲートウェイを割り当てます。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

VXLAN VTEP
インターサーキット

Leaf1A

Leaf1B

configure terminalinterface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
no shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1814
description vmnetA
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
no shutdown!
!
interface Vlan3939
description int_discovery
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown
endwrite memory

configure terminalinterface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
no shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1814
description vmnetA
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
no shutdown!
!
interface Vlan3939
description int_discovery
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown
endwrite memory

1.

リーフペアごとにユニークなvxlan vtepを作成します。ソースip (nve)とプ

ライマリip (router-id)をリストします。
2.

VNIにそれぞれのVLANにマッピングしVNIをVRFにマッ

ピングします。以下の表に仮想ネットワークの設定を示します:

VxRail： Dell Enterprise SONiCの導入
導入ガイド

31

第３章: ファブリックの展開
Leaf1A

Leaf1B

configure terminalinterface vxlan vtep1
source-ip 10.222.222.1
primary-ip 10.0.2.1
map vni 101811 vlan 1811
map vni 101812 vlan 1812
map vni 101813 vlan 1813
map vni 101814 vlan 1814
map vni 102001 vlan 2001
map vni 103001 vlan 1
map vni 103939 vlan 3939
map vni 102001 vrf VrfTenant1!
endwrite memory

configure terminalinterface vxlan vtep1
source-ip 10.222.222.1
primary-ip 10.0.2.2
map vni 101811 vlan 1811
map vni 101812 vlan 1812
map vni 101813 vlan 1813
map vni 101814 vlan 1814
map vni 102001 vlan 2001
map vni 103001 vlan 1
map vni 103939 vlan 3939
map vni 102001 vrf VrfTenant1!
endwrite memory

Leaf2A-Leaf2Bペア
次に示すコンフィグレーション設定を繰り返します:32

Leaf2ALeaf2B

configure terminalinterface Loopback 1
description nve_loopback
ip address 10.222.222.2/32
no shutdown!
ip anycast-address enable
ip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address enable
ip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
link state track leaf
timeout 180
downstream all-mclag!
interface Vlan1
description default
ip vrf forwarding VrfTenant1
no shutdown!
interface vlan2001
description ForVrfVniMapping
ip vrf forwarding VrfTenant1
no shutdown

configure terminalinterface Loopback 1
description nve_loopback
ip address 10.222.222.2/32
no shutdown!
ip anycast-address enable
ip anycast-mac-address
00:00:00:11:11:11
ipv6 anycast-address enable
ip vrf VrfTenant1
ip vrf mgmt
ssh-server vrf mgmt
link state track leaf
timeout 180
downstream all-mclag!
interface Vlan1
description default
ip vrf forwarding VrfTenant1
no shutdown!
interface vlan2001
description ForVrfVniMapping
ip vrf forwarding VrfTenant1
no shutdown

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf2ALeaf2B!
interface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
no shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1814
description vm_netAneigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
no shutdown!
!
interface Vlan3939
description int_discovery
ip vrf forwarding VrfTenant1
no shutdown!
!
interface vxlan vtep2
source-ip 10.222.222.2
primary-ip 10.0.2.3
map vni 101811 vlan 1811
map vni 101812 vlan 1812
map vni 101813 vlan 1813
map vni 101814 vlan 1814
map vni 102001 vlan 2001
map vni 103001 vlan 1
map vni 103939 vlan 3939
map vni 102001 vrf VrfTenant1!
interface Vlan1811
description ext_mgmt
neigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.11.254/24
mtu 9216
no shutdown!
interface Vlan1812
description vMotion
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1813
description vSAN
ip vrf forwarding VrfTenant1
mtu 9216
no shutdown!
interface Vlan1814
description vm_netAneigh-suppress
ip vrf forwarding VrfTenant1
ip anycast-address
172.18.14.254/24
mtu 9216
no shutdown!
!
interface Vlan3939
description int_discovery
ip vrf forwarding VrfTenant1
no shutdown!
!
interface vxlan vtep2
source-ip 10.222.222.2
primary-ip 10.0.2.4
map vni 101811 vlan 1811
map vni 101812 vlan 1812
map vni 101813 vlan 1813
map vni 101814 vlan 1814
map vni 102001 vlan 2001
map vni 103001 vlan 1
map vni 103939 vlan 3939
map vni 102001 vrf VrfTenant1
VxRail： Dell Enterprise SONiCの導入
導入ガイド

33

第３章: ファブリックの展開
Leaf2ALeaf2B

!

!

exit
end
write memory

exit
end
write memory

マルチシャーシ
マルチシャーシLAG (MC-LAG)はピアスイッチ上の複数のインターフェースを束ねた論理
Link Aggregation スイッチを作成できます。各MC-LAGピアでMC-LAGドメインを作成し、ドメインコンフ(LAG)ィグレーションモードに入ります。有効なドメイン番号は1から4095です。１つのスイッ
チでサポートされるMC-LAGドメインは１つだけです。interfaces Ethernet 1/49 – 52はMCLAGを作成するために使用されるピアリンクメンバーです。
1.

34

interface PortChannel <xxx> コマンドを使用してポートチャネルを作成します。アルファベット名の代わりに数字を使用してください。
Leaf1A

Leaf1B

configure terminalinterface PortChannel 256 mode on
description MCLAG-Leaf1ABPeerLink
switchport trunk allowed Vlan
1,1811-1814,2001,3939
no shutdown
mtu 9216

configure terminalinterface PortChannel 256 mode on
description MCLAG-Leaf1ABPeerLink
switchport trunk allowed Vlan
1,1811-1814,2001,3939
no shutdown
mtu 92162.

no shutdownを使用してMC-LAGで使用するメンバーポートを立ち上げます。オプション
でインターフェースにdescriptionを記載します。

3.

新しいポートチャネルメンバーポートを追加します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf1A

Leaf1B!
interface Eth1/49
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/50
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/51
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/52
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown
endwrite memory!
interface Eth1/49
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/50
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/51
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown!
interface Eth1/52
description mclag
mtu 9216
speed 100000
channel-group 256
no shutdown
endwrite memory

4.

MC-LAGドメインを作成するには、ユーザは1から4095の間でドメインIDを定義する必要があります。
このドメインIDは、ローカルのソースIPv4アドレス, ピアのIPv4アドレスおよび両ピアの同期を保つために作成されたポートチャネルを持つべきです。

5.

２つのピアノード間でMC-LAGドメインを立ち上げるには、両端にMC- LAGドメインを設定します。一方のソースIPがもう一方のピアアドレスになります。
この例のMC-LAG keep-aliveは接続をサポートするためにスパイン接続を使用します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

35

第３章: ファブリックの展開
Leaf1A

Leaf1B

configure terminal
mclag domain 1
source-ip 10.0.2.1
peer-ip 10.0.2.2
peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:01
keepalive-interval 1
session-timeout 30
end
write memory

configure terminal
mclag domain 1
source-ip 10.0.2.2
peer-ip 10.0.2.1
peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:01
keepalive-interval 1
session-timeout 30
end
write memory

Leaf2A-Leaf2Bペア
次に示すコンフィグレーション接続を繰り返します:Leaf2ALeaf2B!

!

description MCLAG-Leaf2ABPeerLink

description MCLAG-Leaf2ABPeerLink

interface PortChannel 256 modeonswitchport trunk allowed Vlan
1,1811-1814,2001,3939
mtu 9216

no shutdown!

interface PortChannel 256 modeonswitchport trunk allowed Vlan
1,1811-1814,2001,3939
mtu 9216

no shutdown!

interface Eth1/49

interface Eth1/49

mtu 9216

mtu 9216

description mclag

description mclag

speed 100000

speed 100000

channel-group 256
no shutdown!

channel-group 256
no shutdown!

interface Eth1/50

interface Eth1/50

mtu 9216

mtu 9216

description mclag

description mclag

speed 100000

speed 100000

channel-group 256
no shutdown!

description mclag
mtu 9216

description mclag
mtu 9216

VxRail： Dell Enterprise SONiCの導入
導入ガイド

no shutdown!

interface Eth1/51

36

channel-group 256

interface Eth1/51

第３章: ファブリックの展開
Leaf2ALeaf2B

speed 100000

speed 100000

no shutdown

no shutdown

channel-group 256

channel-group 256!
interface Eth1/52!
interface Eth1/52

mtu 9216

mtu 9216

description mclag

description mclag

speed 100000

speed 100000

channel-group 256
no shutdown

no shutdown

!
!

!
!

source-ip 10.0.2.3

source-ip 10.0.2.4

mclag domain 2

peer-ip 10.0.2.4

mclag domain 2

peer-ip 10.0.2.3

peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:02

peer-link PortChannel256
mclag-system-mac
00:00:00:00:00:02

session-timeout 30
end
write memory

session-timeout 30
end
write memory

keepalive-interval 1スイッチのイ
ンターリンクインターフェ
ースの設定

channel-group 256

keepalive-interval 1

図８に示すように、リーフスイッチとスパインスイッチ間のリンクを“インターリンク”と呼びます。これらのリンクを設定するには:
1.

インターリンクにdescriptionを記載します。

2.

MTUを9216に設定します。

3.

速度を100 Gbpsに設定します。

4.

no shutdown コマンドを使用して物理インターフェースを立ち上げます。

5.

リンクローカルアドレスをインターフェースでのみ有効にするにはipv6 enable コマンドを使用します。これにより、ユーザーはアドレスを設定せずにレイヤー３トラフィ
ックを転送できます。このコマンドは自動生成されたIPv6リンクローカルアドレスに基づいてルーティングインターフェースを作成します。

6.

スパインへのアップストリームリンクのlink state trackingを有効にします。この設定によりスイッチのフェイルオーバー時間を最小限に抑えることができます。

Leaf1A to Spines

Leaf1B to Spines

configure terminal

configure terminalinterface Eth1/55
description Spine1

interface Eth1/55
description Spine1!

!

VxRail： Dell Enterprise SONiCの導入
導入ガイド

37

第３章: ファブリックの展開
Leaf1A to Spines

Leaf1B to Spines

mtu 9216

mtu 9216

no shutdown

no shutdown

speed 100000

speed 100000

ipv6 enablelink state track leaf upstream!

ipv6 enablelink state track leaf upstream!

interface Eth1/56

interface Eth1/56

mtu 9216

mtu 9216

description Spine2

description Spine2

speed 100000

speed 100000

no shutdown

no shutdown

ipv6 enablelink state track leaf upstream

ipv6 enablelink state track leaf upstream!

!

write memory

write memory

end

end

Leaf2A-Leaf2Bペア: コンフィグレーションの繰り返し設定は下記の通りです。

スイッチエンド
ポイントインターフェースの設定

38

Leaf2A to Spines

Leaf2B to Spines

configure terminalinterface Eth1/55
description Spine1
mtu 9216
speed 100000
no shutdown
ipv6 enablelink state track leaf upstream!
interface Eth1/56
description Spine2
mtu 9216
speed 100000
no shutdown
ipv6 enablelink state track leaf upstream!
end
write memory

configure terminalinterface Eth1/55
description Spine1
mtu 9216
speed 100000
no shutdown
ipv6 enablelink state track leaf upstream!
interface Eth1/56
description Spine2
mtu 9216
speed 100000
no shutdown
ipv6 enablelink state track leaf upstream!
end
write memory

この導入設定では、３台のVxRailノードがリーフペアスイッチに接続されています。リーフスイッチポートはVxRailノードへの接続を可能にします。VxRailノードに接続されている各リーフスイッチポートはVxRailネットワーク用のアクティブ/スタンバイ構成の25 GbEリンクが２つあります。リーフペアスイッチには１つのジャンプホストが接続されています。ジャンプホストは以下の目的で使用されます。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

VxRail Deployment Wizardにアクセスしてください。この例ではジャンプホストはタ
グなしリーフスイッチポートを使用します。VxRailノードの初期セットアップ中、ジャンプホストはデフォルトVLANとしてswitchport access VLAN1を使用します。このジャンプホストはVLAN1811を使用します。
1.

各VxRailノードに接続するリーフスイッチポートeth1/1, eth1/2を設定します。VxRail
ネットワークはトランクされています。

2.

各ポートのdescriptionを記載します。これはお勧めです。

3.

no shutdown コマンドを使用してホスト接続ポートを立ち上げます。

4.

MTUを9216に設定します。
初期設定ではVxRail外部管理へのアクセスにaccess VLAN 1を使用します。ジャンプホス
トについては以下のノートを参照してください。

5.

interface switchport trunkを設定しVxRailネットワークを許可します。Switchport trunkと全てのVLANはスイッチに１行で入力できます。例を下線で示しています。以下のノートを参照してください。

6.

VLAN 1にタグなしとしてジャンプホストスイッチポートを作成します。

7.

ホストへのダウンストリームリンクのlink state trackingを有効にします。この設定によりスイッチのフェイルオーバー時間を最小限に抑えることができます。
Leaf1A

Leaf1B

configure terminal

configure terminalinterface Eth1/1
description VxRail_01
no shutdown
mtu 9216
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939
link state track leaf downstream!
interface Eth1/2
description VxRail_02
mtu 9216
no shutdown
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939
link state track leaf downstream!
!
interface Eth1/15
description Jumphost01
no shutdown
switchport access vlan 1!
endinterface Eth1/1
description VxRail_01
no shutdown
mtu 9216
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939
link state track leaf downstream!
interface Eth1/2
description VxRail_02
mtu 9216
no shutdown
switchport access vlan 1
switchport trunk allowed Vlan
1811-1814,3939
link state track leaf downstream!
!
interface Eth1/15
description Jumphost01
no shutdown
switchport access vlan 1!
end
VxRail： Dell Enterprise SONiCの導入 39
導入ガイド

第３章: ファブリックの展開
Leaf1A

Leaf1B

write memory

write memory

ノート: ジャンプホストは初期状態ではVLAN 1に設定されています。初期VxRail導入時の30%はVLAN 1811を使用しジャンプホストIPアドレスは1811ネットワークに対応(例：172.18.11.201)
します。Leaf1AとLeaf1Bの両方が表示されていますが、必要なスイッチポートは１つだけです。
ジャンプホストスイッチポートの速度はジャンプホストインターフェースに応じて調整します。
この導入では１つのVxRailノードだけがラック２の２番目のリーフペアに接続されています。
ノート: 現在、Dell Enterprise SONiCはLACP Individualをサポートしていません。この導入ガイドで使用する例はVxRailノードからリーフスイッチへのLACP構成は使用していません。今後のDell Enterprise SONiC Distributionでの対応はDell.comで確認してください。

Leaf2A-Leaf2Bペア: コンフィグレーション設定は以下の表のとおりです:
Leaf2ALeaf2B

configure terminal

configure terminalinterface Eth1/1

interface Eth1/1

mtu 9216

mtu 9216!

description vxRail_03!

description vxRail_03

no shutdown

switchport access Vlan 1

switchport access Vlan 1

switchport trunk allowed Vlan
1811-1814,3939

switchport trunk allowed Vlan
1811-1814,3939!

!

link state track leaf downstream
end

write memory

外部ネッ
トワーク
へのアッ
プリンク

no shutdown

link state track leaf downstream
end

write memory

この導入ではLeaf1AとLeaf1Bのスイッチポートのみが外部ネットワークに接続します。
冗長性のためにマルチプライヤリンクが使用されます。レイヤー３アップリンクにより
VxRailノードはDNSとNTPサービスにアクセスできます。
ノート: アップリンクの中には外部スイッチベンダーと光学系によって、接続のためにfec RSの設定が必要な場合があります。

40

1.

アップリンクのdescriptionを記載します。

2.

ポートを有効にします。

3.

Tenant1にIP VRF forwardingを割り当てます。

4.

インターフェースにIPアドレスを割り当てます。
Leaf1A

Leaf1B

configure terminalinterface Eth1/53
description uplink_01

configure terminalinterface Eth1/53
description uplink_01

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf1A

Leaf1Bno shutdown
ip vrf forwarding VrfTenant1
ip address 192.168.1.1/31

no shutdown
ip vrf forwarding VrfTenant1
ip address 192.168.1.3/31!
interface Eth1/54
description uplink_02
no shutdown
ip vrf forwarding VrfTenant1
ip address 192.168.2.1/31!
end
write memory

BGP
Unnumbered設定!
interface Eth1/54
description uplink_02
no shutdown
ip vrf forwarding VrfTenant1
ip address 192.168.2.3/31!
end
write memory

リーフスイッチのunnumbered BGPを設定します。Unnumberedインターフェースはユーザーが設定したIPアドレスを持ちません。BGP unnumberedインターフェースは
extended next-hop encoding (ENHE)機能を使用します。Unnumbered BGPはリンクロー
カルアドレスを使用してネイバーとのBGPセッションをセットアップします。BGP
unnumberedインターフェースはextended next-hopを使用してIPv6ネクストホップを持
つIPv4ルートをアドバタイズします。

ルーターBGPテナントnondefault vrf: vrf VrfTenant1の設定:
1.

BGPでは、各スイッチに固有のLoopback 0 IPアドレスを使用します。

2.

Vrfのrouter bgp <AS_number>コマンドでBGP設定を開始します。

3.

router-id <ip_address>コマンドでルーターIDを指定しLoopback 0を指定
します。

4.

サポートするアドレスファミリを設定します。ipv4 unicastとredistributeconnected routes.sを含みます。

5.

パスの最大数を64に設定します。

6.

peer-group Legacy DNS, NTPなどのIPサービスへの外部ネットワーク接続を定義します。

7.

L3アップリンクを使用して、外部ネットワークへのpeer-group Legacyのために
近隣のインターフェースを作成します。

Leaf1A

Leaf1B

configure terminalrouter bgp 65101 vrf VrfTenant1
router-id 10.0.2.1
log-neighbor-changes
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!

configure terminalrouter bgp 65101 vrf VrfTenant1
router-id 10.0.2.2
log-neighbor-changes
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!
VxRail： Dell Enterprise SONiCの導入
導入ガイド

41

第３章: ファブリックの展開

address-family l2vpn evpn
advertise ipv4 unicast
advertise-pip ip 10.0.2.1!

peer-group Legacy
remote-as external
timers connect 30
advertisement-interval 0!
address-family ipv4 unicast
activate
send-community both!
neighbor 192.168.1.0
peer-group Legacy!
neighbor 192.168.2.0
peer-group Legacy

address-family l2vpn evpn
advertise ipv4 unicast
advertise-pip ip 10.0.2.2!
peer-group Legacy
remote-as external
timers connect 30
advertisement-interval 0!
address-family ipv4 unicast
activate
send-community both!
neighbor 192.168.1.2
peer-group Legacy!
neighbor 192.168.2.2
peer-group Legacy

デフォルトVRFのBGPルーター:
1.

BGPでは、各スイッチに固有のLoopback 0 IPアドレスを使用します。

2.

デフォルトVRFのrouter bgp <AS_number>コマンドでBGP設定を開始します。

3.

router-id <ip_address>コマンドでルーターIDを指定しLoopback 0を指定
します。

4.

起動時に送信するmulti exit discriminator (MED)の最大値を設定します。個の設定によりスイッチのフェイルオーバー時間を最小限に抑えることができます。

5.

bestpath as-path multipath relax コマンドを使用するとas- pathの考慮が緩和されECMPが許可されます。

6.

対応するaddress families (AF)を設定します: IPv4とl2vpn

7.

AF IPv4ユニキャストに接続ルートの再配布、最大パス64, ibgp 1の最大パス数を設定します。

8.

全てのVNISとプライマリIPパスを公告するようにAF l2vpnを設定します。
Leaf1A

42

router bgp 65101
router-id 10.0.2.1
log-neighbor-changes
max-med on-startup 420
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected
VxRail： Dell Enterprise SONiCの導入
導入ガイド

Leaf1Brouter bgp 65101
router-id 10.0.2.2
log-neighbor-changes
max-med on-startup 420
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected第３章: ファブリックの展開

maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni
advertise-pip ip 10.0.2.1
peer-ip 10.0.2.2

maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni
advertise-pip ip 10.0.2.2
peer-ip 10.0.2.1

9.

ピアグループスパインを定義します。これにより全てのスパインネイバーに対して同じ更新情報が生成されます。

10.

ASNが指定されている場合にのみピアを作成するには、remote-as external
コマンドを使用します。ASNが同じ場合、接続は拒否されます。
timers <x> <y>コマンドを使用してBGP KeepaliveとHold-downタイマーを設定します。

11.
12.
13.

timers connect <x>を設定します。
安定したルーティングテーブルを維持するためにアドバタイズ間隔をadvertisementinterval <x>コマンドで設定します。

14.

Bi-directional Forwarding Detection (BFD)を有効にします。

15.

capability extended-nexthop コマンドを使用してBGPピアとextendednexthopペイパビリティをネゴシエートできるようにします。

16.

addressfamily l2vpn evpn コマンドを使用して、BGPネイバーへのVXLANホストペースルーティング用にレイヤー２VPN EVPNアドレスファミ
リを設定します。

17.

interfaces Eth1/55, Eth1/56をpeer-group spineに追加します。

Leaf1A

Leaf1B!
peer-group spine
remote-as external
timers 3 9timers connect 30
advertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activateallowas-in 2
send-community both!
address-family l2vpn evpn
activateallowas-in 2!

!
peer-group spine
remote-as external
timers 3 9timers connect 30
advertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activateallowas-in 2
send-community both!
address-family l2vpn evpn
activateallowas-in 2!

!

neighbor interface Eth1/55!

neighbor interface Eth1/55
VxRail： Dell Enterprise SONiCの導入
導入ガイド

43

第３章: ファブリックの展開
Leaf1A

Leaf1Bpeer-group spine!
neighbor interface Eth1/56
peer-group spine

peer-group spine!
neighbor interface Eth1/56
peer-group spine!

end
write memory!

endwrite memory

Leaf2A-Leaf2Bペア: 以下の表は繰り返し設定を示しています:44

Leaf2ALeaf2B

configure terminalrouter bgp 65102 vrf VrfTenant1
router-id 10.0.2.3
log-neighbor-changes
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise ipv4 unicast
advertise-pip ip 10.0.2.3!
router bgp 65102
router-id 10.0.2.3
log-neighbor-changes
max-med on-startup 420
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni
advertise-pip ip 10.0.2.3 peerip 10.0.2.4!
peer-group spine
remote-as external
timers 3 9timers connect 30

configure terminalrouter bgp 65102 vrf VrfTenant1
router-id 10.0.2.4
log-neighbor-changes
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise ipv4 unicast
advertise-pip ip 10.0.2.4!
router bgp 65102
router-id 10.0.2.4
log-neighbor-changes
max-med on-startup 420
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 64
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni
advertise-pip ip 10.0.2.4 peerip 10.0.2.3!
peer-group spine
remote-as external
timers 3 9timers connect 30

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開
Leaf2ALeaf2Badvertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activateallowas-in 2
send-community both!
address-family l2vpn evpn
activateallowas-in 2!
neighbor interface Eth1/55
peer-group spine!
neighbor interface Eth1/56
peer-group spine!
end
write memory

advertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activateallowas-in 2
send-community both!
address-family l2vpn evpn
activateallowas-in 2!
neighbor interface Eth1/55
peer-group spine!
neighbor interface Eth1/56
peer-group spine!
end
write memory

スパインスイッチの構成
この導入では、全てのスパインスイッチは１つの自立システムにあります。このBGP
EVPNトポロジーはリーフとスパインスイッチ間のeBGPピアセッションがアンダーレイ
IPルートとEVPNルートの両方をアドバタイズするリーフスパインデータセンターネット
ワークを示しています。アンダーレイIPとEVPNルートをアドバタイズするには、インターフェースIPv6リンクローカルアドレスを使用して、リーフノードとスパインノード間
でeBGP unnumberedピアセッションを確立します。
Dell leaf switches に記載されている手順に従って、ユーザー認証情報とパスワードを更新します。初回ログイン時にはパスワードを変更するように求められます。

スイッチの基本準備

スパインのホスト名を変更する。
1.

sonic-cli コマンドを使用してLegacy SONiC CLIからManagement
Framework CLI (MF-CLI)に接続します。

2.

configure terminal コマンドを使用してコンフィグレーションモードに入ります。

3.

コンフィグレーションモードでinterface-naming standardに入ります。この導入ガイドではStandard Interface Namingモードを使用します。
セッションを終了してMF-CLIに再入力するようにプロンプトが表示されます。

4.

MF-CLIセッションを終了しLinux shellに移動し、interface naming
standardモードにします。
VxRail： Dell Enterprise SONiCの導入
導入ガイド

45

第３章: ファブリックの展開
Spine1

Spine2

Sonic-cli
configure terminalinterface-naming standard
end
write memory
exit

Sonic-cli
configure terminalinterface-naming standard
end
write memory
exit

5.

the Standard Interface namingモードのsonic-cliコマンドを使用してMFCLIに再入力します。configure terminalコマンドを使用してコンフィグレーシ
ョンモードに入ります。

6.

スパインのホスト名を設定します。

7.

ip management vrfを作成します。

8.

管理vrfのssh-serverを有効にします。

9.

write memory コマンドを使用して設定をフラッシュに保存します。

Spine1

Spine2sonic-cli
configure terminal
hostname Spine1
ip vrf mgmt
ssh-server vrf mgmt
endwrite memory
exitsonic-cli

sonic-cli
configure terminal
hostname Spine2
ip vrf mgmt
ssh-server vrf mgmt
endwrite memory
exitsonic-cli

ノート: interface namingモードを有効にするには、MF-CLIセッションをLinux shellに終了しMFCLIに再入力する必要があります。SONiCセッション中に次のメッセージが表示されます。
“Broadcast message: Interface naming mode has changed. Users running 'sonic-cli' are required
to restart your session.”“Broadcast message: Hostname has been changed from sonic to Spine1 or Spine2. Users running'sonic-cli' are suggested to restart your session.”

スパインスイッチのインターフェース設定46

各スパインスイッチは各リーフスイッチに接続します。この設定ではスパインスイッチからアンダーレイ部分を提供します。BGPネイバーに接続されているインターフェースでIPv6を有効にするとIPv6リンクローカルアドレスが自動的に作成されます。BGPはリン
クローカルアドレスを使用してネイバーとのBGPセッションをセットアップします。
UnnumberedインターフェースはBGPネイバーのアドレスを識別するためにIPv6 router
advertisements (RA)を使用します。
1.

お勧めとして、各インターフェースの説明を記載します。

2.

MTUを9216に設定します。これはこの導入におけるスイッチのデフォルトです3.

速度を100 Gbpsに設定します。

4.

no shutdown コマンドを使用して、物理インターフェースを立ち上げます。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

5.

スパインスイッチルーターID

ipv6 enableを使用すると、インターフェース上のリンクローカルアドレスのみが有効になり、ユーザーはアドレスを設定せずにレイヤー３トラフィックを転送できるようになります。ipv6 enable コマンドは自動生成されたIPv6リンク
ローカルアドレスに基づいてルーティングインターフェースを作成します。
Spine1

Spine2

configure terminalinterface Eth1/1
description Leaf1A
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/2
description Leaf1B
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/3
description Leaf2A
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/4
description Leaf2B
mtu 9216
speed 100000
no shutdown
ipv6 enable!
end
write memory

configure terminalinterface Eth1/1
description Leaf1A
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/2
description Leaf1B
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/3
description Leaf2A
mtu 9216
speed 100000
no shutdown
ipv6 enable!
interface Eth1/4
description Leaf2B
mtu 9216
speed 100000
no shutdown
ipv6 enable!
end
write memory

次の表の設定を使用して、ループバックインターフェースのスパインスイッチのルータ
ーidを設定します:

Spine1

Spine2

configureterminal
interface Loopback 0
description Router-ID
ip address 1.1.1.1/32
exit
end
write memory

configureterminal
interface Loopback 0
description Router-ID
ip address 1.1.1.2/32
exit
end
write memory
VxRail： Dell Enterprise SONiCの導入
導入ガイド

47

第３章: ファブリックの展開

スパイン
unnumbered
BGP設定

unnumbered BGPを設定します。
1.

router bgp <AS_number>コマンドを使用してBGPの設定を開始します。

2.

router-id <ip_address>コマンドでルーターIDを指定しLoopback 0を指定します。

3.

bestpath as-path multipath relax コマンドを使用すると、as- pathの考慮が緩和されECMPが許可されます。
timers <x> <y>を使用してBGP KeepaliveとHold-downタイマーを設定します。

4.
5.

address-family ipv4 unicast を使用してレイヤー３のipv4ユニキャ
ストを設定し有効にします。

6.

接続されたルートを再配布するように設定します。

7.

maximum-pathsを256に設定します。

8.

maximum-paths ibgpを1に設定します。

9.

address-family l2vpn evpn コマンドを使用してBGPネイバーへのVXLANホストベースルーティング用にレイヤー２VPN EVPNアドレスファミ
リを設定し有効にします。

10.

全てのVNIをアドバタイズするように設定します。

Spine1

Spine2

configure terminalrouter bgp 65100
router-id 1.1.1.1
log-neighbor-changes
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 256
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni

configure terminalrouter bgp 65100
router-id 1.1.1.2
log-neighbor-changes
bestpath as-path multipathrelax
timers 60 180!
address-family ipv4 unicast
redistribute connected
maximum-paths 256
maximum-paths ibgp 1!
address-family l2vpn evpn
advertise-all-vni

11.

neighbor LEAF peer-group コマンドを使用しPeer Group LEAFを定義し、全てのリーフネイバーに同じ更新情報を生成することでスケーリングを改善し
ます。

12.

ASNが指定されている場合にのみピアを作成するにはremote-as external
コマンドを使用します。ASNが同じ場合に接続は拒否されます。
timers <x> <y>コマンドを使用してBGP KeepaliveとHold-downタイマーを設定します。

13.

14. 安定したルーティングテーブルを維持するためにアドバタイズ間隔を
advertisement-interval <x> コマンドで設定します。
48

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第３章: ファブリックの展開

15.

bfd コマンドを使用して双方向転送検出を有効にします。

16.

capability extended-nexthop コマンドを使用してBGPがピアとextendednexthop capabilityをネゴシエートできるようにします。

17.

address-family ipv4 unicast を実行してレイヤー３のipv4-unicastを設定し有効にします。

18.

address-family l2vpn evpn コマンドを使用してBGPネイバーへのVXLANホストベースルーティング用にレイヤー２VPN EVPNアドレスファミリを設定し有効にします。

19.

interfaces Eth1/1, Eth1/2, Eth1/3, Eth1/4をPeer-Group Leafに追加します。

Spine1

Spine2!
peer-group leaf
remote-as external
timers 3 9timers connect 30
advertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activate
send-community both!
address-family l2vpn evpn
activate!
neighbor interface Eth1/1
peer-group leaf!
neighbor interface Eth1/2
peer-group leaf!
neighbor interface Eth1/3
peer-group leaf!
neighbor interface Eth1/4
peer-group leaf!
peer-group leaf
remote-as external
timers 3 9timers connect 30
advertisement-interval 0
bfd
capability extended-nexthop!
address-family ipv4 unicast
activate
send-community both!
address-family l2vpn evpn
activate!
neighbor interface Eth1/1
peer-group leaf!
neighbor interface Eth1/2
peer-group leaf!
neighbor interface Eth1/3
peer-group leaf!
neighbor interface Eth1/4
peer-group leaf!
end
write memory!
endwrite memory

２つのラック, ２つのリーフペア, ２つのスパインによるリーフスパインファブリック
の構成が完了しました。VxRailノードは２つのラックに配置でき、リーフスパインファ
ブリック全体で通信できるようになりました。検証用に各ノードにVMを作成します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

49

第３章: ファブリックの展開
ノート: VxRailクラスタを追加するには、この章で説明する計画プロセスと手順を繰り返します。
追加のクラスタについては VxRail Solve website (アカウントが必要)にある適切なVxRailクラス
タの手順と要件を参照してください。

50

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第４章: ファブリック展開の検証

第４章

ファブリック展開の検証

この章では以下のトピックを紹介します:

リーフの検証...........................................................................................................52
ルーティングの検証 ...............................................................................................55
スパインの検証 .......................................................................................................59
SONiCファブリックのチェックリスト .................................................................60

VxRail： Dell Enterprise SONiCの導入
導入ガイド

51

第４章: ファブリック展開の検証

リーフの検証本章で説明するshowコマンドは、２ラックのリーフおよびスパイン構成の検証を行います。出力はサブセットに過ぎず、すべてのスイッチのコマンド出力, インターフェス,
ルート, 詳細を示すものではありません。これは使用可能な構成に関連するshowコマン
ドのサブセットでありLeaf1Aの出力のみであるため最新のVMが含まれていない可能性があります。詳細についてはDell Technologies Support webサイト(ログインが必要)のEnterprise SONiC Distribution by Dell Technologies SONiC User GuideおよびSONiCManagement Framework CLI Reference Guideを参照してください。

マルチラックVXLAN検証

レイヤー２VXLANを検証するには、以下のコマンドを使用して１つのリーフペアホスト
VMからもう１つのリーフペアホストVM, app-vm001, app-vm003に下記コマンドを実行します:
C:\> ping 172.18.11.214
VNIの検証はLeaf1AからSpine1そしてLeaf2Aを経由する、VLAN 1811のNode1
VM(Leaf1A)からNode3(Leaf2A)のVLAN 1811のVMにpingを打ちます。

図９.
VXLANトンネルを経由して Leaf1A, Node 1 VM (1811)からLeaf2A, Node 3 VM
(1811へ)Pingを送信

vCenterはノード2,3をゲストネットワークに移動しました。
各VxRailノードにVMを作成し、 VLAN 1814にIPアドレスを割り当てます。ノード2のvmからノード３の vm にPingを送信します。

52

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第４章: ファブリック展開の検証

図１０.

ゲストネットワークVLAN1814のVMにPingを打つ

図１１.

VM app-vm001からDNSサーバーへのPing

DNSのL2またはL3のping検証

インターフェス
の状態

show interface status コマンドを使用して、リーフスイッチのインターフェースが起動していることを確認します。各リーフスイッチで繰り返します。show interface
status | grep up コマンドを使用して、必要なインターフェスすべて起動しており、リンクが適切な速度で確立されていることを確認します。このコマンドはspeed, MTU,
alternate nameなどの他のフィールドも表示します。出力はLeaf1Aからのものです。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

53

第４章: ファブリック展開の検証

2ラック -BGP EVPN VXLANセットアップとshowコマンド
Leaf1A# show interface status | grep up
Eth1/1vxRail_01
up
Eth1/2vxRail_02
up
Eth1/15
jumphostup
Eth1/49mclag
up
Eth1/50mclag
up
Eth1/51mclag
up
Eth1/52mclag
up
Eth1/53
Uplink1up
Eth1/54
Uplink2up
Eth1/55
Spine1up
Eth1/56
Spine2up
PortChannel256 MCLAG-Leaf1AB-PeerLink up

VLANステータス

oper-upoper-upoper-upoper-upoper-upoper-upoper-upoper-upoper-upoper-upoper-upoper-up

off
off
off
off
off
off
off
off
off
off
off
-

25000
25000
25000
10000010000010000010000010000010000010000010000040000054-

show vlan コマンドは、デバイスに設定されている全てのVLANに関する簡単な情報を表示します。出力にはVLAN ID, IPアドレス(VLANに設定している場合), VLAN member
portのリスト, ポートがタグ付きかタグなしかが表示されます。

Dynamic
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No
No

show mclag brief コマンドでリーフの状態を確認します。各リーフスイッチについて繰り返します。show mclag brief コマンドはシステムに設定されているMC-LAGド
メインに関する簡単な情報を表示し、システムに設定されている全てのMC-LAGインタ
ーフェースのMC-LAGドメイン情報とローカル/リモートポートのステータス情報を表示します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

Ethernet0
Ethernet1
Ethernet14
Ethernet48
Ethernet52
Ethernet56
Ethernet60
Ethernet64
Ethernet68
Ethernet72
Ethernet76

show vlan コマンドでVLANの状態を確認します。各リーフスイッチで繰り返します。

Leaf1A# show Vlan
Q: A - Access (Untagged), T - Tagged
NUM
StatusQ Ports
Autostate
1
ActiveA Eth1/1
EnableA Eth1/2
T PortChannel256
A Vxlan_10.222.222.2
1811
ActiveT Eth1/1
EnableT Eth1/2
T PortChannel256
A Vxlan_10.222.222.2
A Eth1/15
1812
ActiveT Eth1/1
EnableT Eth1/2
T PortChannel256
A Vxlan_10.222.222.2
1813
ActiveT Eth1/1
EnableT Eth1/2
T PortChannel256
A Vxlan_10.222.222.2
1814
ActiveT Eth1/1
EnableT Eth1/2
T PortChannel256
A Vxlan_10.222.222.2
2001
ActiveT PortChannel2563939
ActiveT Eth1/1
EnableT Eth1/2
T PortChannel256
A Vxlan_10.222.222.2

MC-LAGステー
タス

9216
9216
9216
9216
9216
9216
9216
9216
9216
9216
9216
9216

第４章: ファブリック展開の検証

BGP EVPN VXLAN 設定
Leaf1A# show mclag brief
Domain ID
Role
Session Status
Peer Link Status
Source AddressPeer AddressPeer Link
Keepalive Interval…Truncated: 1: active: up: up: 10.0.2.1: 10.0.2.2: PortChannel256: 1 secs

ルーティングの検証
以下のセクションで説明するコマンドを使用してBGP unnumberedの設定を検証します。

IP route

各リーフで学習したIP経路をshow ip route コマンドで確認します。各リーフスイッ
チで繰り返します。show ip route コマンドはルーティングテーブルの全経路エント
リーまたは特定の経路を表示します。VRFパラメータを入力しない場合はデフォルト
VRFからの経路が表示されます。デフォルトVRFにはファブリックアンダーレイの経路だけが含まれます。

Leaf1A# show ip route
Codes:

K - kernel route, C - connected, S - static, B - BGP, O - OSPF
> - selected route, * - FIB route, q - queued route, r - rejected route, # - not installed in

hardware
Destination
B>*
B>*
C>*
B>*
*
B>*
*
B>*
*
C>*
B>*
*

1.1.1.1/32
1.1.1.2/32
10.0.2.1/32
10.0.2.2/32
10.0.2.3/32
10.0.2.4/32
10.222.222.1/32
10.222.222.2/32

Gateway
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
Direct
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
Direct
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073

Dist/MetricEth1/55
Eth1/56
Loopback0
Eth1/55
Eth1/56
Eth1/55
Eth1/56
Eth1/55
Eth1/56
Loopback1
Eth1/55
Eth1/56

Uptime

20/0
20/0
0/0
20/0

15:17:22
1d07h31m
1d08h14m
15:17:22

20/0

15:17:22

20/0

15:17:220/0
20/0

1d08h14m
15:17:22

VxRail： Dell Enterprise SONiCの導入
導入ガイド

55

第４章: ファブリック展開の検証

EVPN検証

以下のセクションでは、仮想ネットワーク設定を検証するためのコマンドを示します。

VXLANステータ

show vxlan interfaceコマンドでリーフスイッチのローカルVXLANインターフェスとトンネルのステータスを確認します。各リーフスイッチで繰り返します。

Leaf1A# show vxlan interface

ス

VTEP Name: vtep1
VTEP Source IP: 10.222.222.1
VTEP Primary IP: 10.0.2.1
QoS Mode: pipe(dscp:0)
EVPN NVO Name
: nvo1EVPN VTEP: vtep1
Primary IP Interface : Loopback0
Source Interface: Loopback1
External IP Interface : Not Configured

VXLANトンネ
ルステータスshow vxlan tunnel コマンドでVXLANトンネルインターフェスの状態を確認します。
各リーフスイッチでは、各リーフ(またはリーフペア)間にVXLANトンネルがあります。各
リーフ(またはリーフペア)間のVXLANトンネルは２つのVTEPごとに１つあります。次のコマンドを使用して各リモートリーフ(またはリーフペア)へのVXLANトンネルの状態を検証します:

Leaf1A# show vxlan tunnel
Name
SIP
====
===
EVPN_10.0.2.3
10.222.222.1
EVPN_10.0.2.4
10.222.222.1
EVPN_10.222.222.2 10.222.222.1

DIP===
10.0.2.3
10.0.2.4
10.222.222.2

source======
EVPN
EVPN
EVPN

Group
=====
internal
internal
internal

D-VNI
=====
no
no
no

operstatus==========
oper_up
oper_up
oper_up

VXLANリモー
show vxlan remote vniコマンドを使用して、vxlan remote vniリストを確認します。
トvniステータ
各スイッチで繰り返します。
ス
Leaf1A# show vxlan remote vni
Vlan
Tunnel==========
Vlan1
10.222.222.2
Vlan1811
10.222.222.2
Vlan1812
10.222.222.2
Vlan1813
10.222.222.2
Vlan1814
10.222.222.2
Vlan3939
10.222.222.2
Total count :6

VXLAN tovlanvnimap
statusGroup=====internal
internal
internal
internal
internal
internal

show vxlan vlanvnimap コマンドを使用して、VXLANとVNIのマッピングを確認します。

Leaf1A# show vxlan vlanvnimap
VLAN
VNI
====
===
Vlan1
103001
Vlan1811
101811
Vlan1812
101812
Vlan1813
101813Vlan1814
101814
Vlan2001
102001
Vlan3939
103939Total count:
7

56

VxRail： Dell Enterprise SONiCの導入
導入ガイド

VNI
===
103001101811101812101813101814103939

第４章: ファブリック展開の検証

VXLAN
vrfvnimap statusshow vxlan vrfvnimapコマンドを使用して、リーフスイッチ上のデフォルト以外の仮想ルーティング機能とVXLANネットワーク識別のマッピングを確認します。各リーフスイッチで繰り返します。

Leaf1A# show vxlan vrfvnimap
VRF
VNI===========
VrfTenant1 102001
Total count :1

IP vrf statusshow ip vrfコマンドでIP VRFの状態を確認します。各スイッチで繰り返します。

Leaf1A# show ip vrf
VRF-NAME
INTERFACES
VrfTenant1

default

mgmt

IP route VRF
statusEth1/53
Eth1/54
Vlan1
Vlan1811
Vlan1812
Vlan1813
Vlan1814
Vlan2001
Vlan3939
Eth1/55
Eth1/56
Loopback0
Loopback1
Management0

VRFのIP経路をshow ip route vrf VrfTenant1で確認します。各リーフスイッチで繰り返します。

Leaf1A# show ip route vrf VrfTenant1
Codes:

K - kernel route, C - connected, S - static, B - BGP, O
OSPF> - selected route, * - FIB route, q - queued route, r - rejected route, # - not installed in

hardware
Destination

GatewayB>*
10.0.2.5/32
B>*
10.0.2.6/32
C>*
172.18.11.0/24
B>*
172.18.11.103/32
C>*
172.18.14.0/24
B>*
172.19.11.0/24*
C>*
192.168.1.0/31…Truncated

IP route BGP

via 192.168.1.0
via 192.168.2.0
Directvia 10.0.2.3
Directvia 192.168.1.0
via 192.168.2.0
DirectDist/MetricEth1/53
Eth1/54
Vlan1811
Vlan2001
Vlan1814
Eth1/53
Eth1/54
Eth1/53

Uptime

20/0
20/0
0/0
20/0
0/0
0/0

1d08h13m
1d08h13m
1d08h13m
03:54:25
1d08h13m
1d08h13m

0/0

1d08h13m

show ip route bgp コマンドを使用してBGP IPルートを確認します。各スイッチで繰り返します。

Leaf1A# show ip route bgp
Codes: K - kernel route, C - connected, S - static, B - BGP, O - OSPF
> - selected route, * - FIB route, q - queued route, r - rejected route, # - not installed in hardware
Destination
Gateway
Dist/Metric
Uptime
B>*
B>*
B>*
*

1.1.1.1/32
1.1.1.2/32
10.0.2.2/32

via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073

Eth1/55
Eth1/56
Eth1/55
Eth1/56

20/0
20/0
20/0

15:22:01
1d07h35m
15:22:01

VxRail： Dell Enterprise SONiCの導入
導入ガイド

57

第４章: ファブリック展開の検証
B>*
*
B>*
*
B>*
*

10.0.2.3/32
10.0.2.4/32
10.222.222.2/32

EVPN status

via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073
via fe80::2204:fff:fe05:c09a
via fe80::529a:4cff:fed5:5073

Eth1/55
Eth1/56
Eth1/55
Eth1/56
Eth1/55
Eth1/56

20/0

15:22:01

20/0

15:22:01

20/0

15:22:01

show evpnコマンドを使用してEVPNの状態を確認します。各スイッチで繰り返します。

Leaf1A# show evpn
L2 VNIs: 6
L3 VNIs: 1
Advertise gateway mac-ip: No
Advertise svi mac-ip: No
Duplicate address detection: Disable
Detection max-moves 5, time 180
IPv4 Neigh Kernel threshold: 48000
IPv6 Neigh Kernel threshold: 48000
Total IPv4 neighbors: 18
Total IPv6 neighbors: 0

EVPN VNI detailstatusshow evpn vni detail コマンドでEVPN VNIの状態を確認します。各スイッチで繰り返します。
ノート: この出力例は一部です。実際の出力は数ページにわたる場合があります。

Leaf1A# show evpn vni detail…truncated
VNI: 101811
Type: L2
Tenant VRF: VrfTenant1
Client State: Up
VxLAN interface: vtep1-1811
VxLAN ifIndex: 84
Local VTEP IP: 10.222.222.1
VNI: 102001
Type: L3
Tenant VRF: VrfTenant1
Local Vtep Ip: 10.0.2.1
Local External Vtep Ip: 0.0.0.0
Vxlan-Intf: vtep1-2001
SVI-If: Vlan2001
State: Up
Client State: Up
VNI Filter: none
System MAC: 3c:2c:30:10:36:02
Router MAC: 3c:2c:30:10:36:02…truncated58

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第４章: ファブリック展開の検証

スパインの検証
インターフェス
ステータス

show interface status コマンドでスパインインターフェスの状態を確認します。|
grep を使用し特定のキーワードを検索できます。各スパインスイッチで繰り返します。

Spine1# show interface status | grep up
Eth1/1
Leaf1Aup
Eth1/2
Leaf1Bup
Ethernet4
Eth1/3
Leaf2Aup
Eth1/4
Leaf2Bup

IPルート

oper-upoper-up

off
off

1000001000009216
9216

Ethernet0

oper-upoper-up

off
off

1000001000009216
9216

Ethernet8
Ethernet12

show ip route コマンドでスパインスイッチのIPルートを確認します。各スパインスイ
ッチで繰り返します。

Spine1# show ip route
Codes:

K - kernel route, C - connected, S - static, B - BGP, O - OSPF
> - selected route, * - FIB route, q - queued route, r - rejected route
Destination
Gateway
Dist/MetricC>*
1.1.1.1/32
B>*
10.0.2.1/32
B>*
10.0.2.2/32
1d07h33m
B>*
10.0.2.3/32
1d08h14m
B>*
10.0.2.4/32
Eth1/41d08h14m
B>*
10.222.222.1/32
15:17:49*
B>*
10.222.222.2/32
1d08h14m*

Bgp neighbors

Direct
via fe80::3e2c:30ff:fe10:3602
via fe80::3e2c:30ff:fe10:4102

Loopback0
Eth1/1
Eth1/2

0/0
20/0
20/0

via fe80::56bf:64ff:feba:33c2

Eth1/320/0

via fe80::3e2c:30ff:fe10:3602

Eth1/1

20/0

via fe80::3e2c:30ff:fe10:4102
via fe80::3e2c:30ff:fe10:3302

Eth1/2
Eth1/4

via fe80::56bf:64ff:feba:33c2

Eth1/3

Uptime1d08h14m 15:17:49

via fe80::3e2c:30ff:fe10:3302

20/0

show bgp all neighbors コマンドでBGPネイバーを確認します。ネイバーが接続していること、BGPステートが確立されていることを確認します。
ノート: この出力例は一部です。実際の出力は数ページにわたる場合があります。

Spine1# show bgp all neighbors
BGP neighbor is Eth1/1, remote AS 65101, local AS 65100, external link
BGP version 4, remote router ID 10.0.2.1 , local router ID 1.1.1.1
BGP state = Established, up for 15:25:59
Last read 00:00:01, Last write 00:00:02
Hold time is 9 seconds, keepalive interval is 3 seconds
Minimum time between advertisement runs is 0 seconds
Neighbor capabilities:
4 Byte AS: advertised and received
AddPath: advertised and received
Route refresh: advertised and received
Multiprotocol Extension: advertised and received
Graceful restart: advertised and received…truncated

VxRail： Dell Enterprise SONiCの導入
導入ガイド

59

第４章: ファブリック展開の検証

SONiCファブリックのチェックリスト
これは見直す際の簡単なリストです。出力を確認するにはリーフまたはスパインcliのshow コマンドを使用します。

VxRailスイッ
チインターフェスVXLANインターフェス

VxRail manager

ルーティングインターフェース

60

接続の問題を確認します:•

VxRailノードのポートスピードが本装置のポートスピードと一致していることを確認します。

•

VxRailノードのスイッチインターフェスswitchport VLAN設定が正しいことを確認します。

•

VxRailノードのスイッチフェイシングポートにリストされているVLAN 3939とmac
アドレスを確認します。

仮想ネットワークインターフェースの問題を確認します:•

リーフのVXLANとVNIマッピングを確認します。

•

VLAN 2001がVNIマッピングとVRFフォワーディングにあることを確認します。

•

リーフのVTEP IPアドレス設定を確認します。

VxRail Managerの問題を確認します:•

ジャンプホストのIPアドレスとLeaf1Aの接続を確認します。

•

ジャンプホストVLANが外部管理VLAN(この例では1811)に変更されていることを確認します。

•

VxRail manager用のVMが起動していることを確認します。

BGPルーティングの問題を確認します:•

BGPネイバーの設定を確認します。

•

BGPアドレスファミリの設定を確認します。

VxRail： Dell Enterprise SONiCの導入
導入ガイド

第５章: 参考文献

第５章

参考文献

この章では以下のトピックを紹介します:

導入コンポーネント ...............................................................................................62
デル・テクノロジーズのドキュメント ..................................................................62

VxRail： Dell Enterprise SONiCの導入
導入ガイド

61

Chapter 5: References

導入コンポーネント
Table 10.

導入コンポーネント detail

Device/Item

Role

Operating system

Comment

Dell PowerSwitch
Z9264F-ON

Spine

SONiC

Quantity: 2

Dell PowerSwitch
S5248F-ON

Leaf

SONiC

Quantity: 4

Dell R640 Windows
VM

Jumphost

Windows

Quantity: 1

SONiC

4.1.1

Dell EnterpriseStandard

VxRail Deployment

8.0.010

VxRail Release SW

デル・テクノロジーズのドキュメント
次のデル・テクノロジーズのドキュメントに追加情報が記載されています。これらドキュメントへのアクセスはログイン認証情報によって異なります。ドキュメントにアクセスできないときは、デル・テクノロジーズの担当者にお問い合わせください。
•

Dell Networking Info Hub•

Dell Enterprise SONiC Networking Solutions•

Dell PowerSwitch S5248F-ON Documentation•

Dell Enterprise SONiC Documentation•

Dell VxRail Network Planning Guide•

VxRail: VxRail and External vCenter Interoperability Matrix (ログインが必要)•

Dell VxRail 7.x Support Matrix•

Dell VxRail 8.x Support Matrix•

Dell Technologies SolVe Online (アカウントが必要)•

Dell VxRail support and documentation (アカウントが必要)•

Fabric Design Center (アカウントが必要)

Dell Fabric Design Center (FDC)はデルのコンピュート, ストレージ, ハイパーコンバ
ージドインフラストラクチャソリューションを支えるネットワークファブリックの計
画, 設計, 導入を自動化するクラウドベースのアプリケーションです。

62

VxRail： Dell Enterprise SONiCの導入
導入ガイド