2 Bronze

2node構成におけるCustom VDSについて

ソリューションへジャンプ

みなさま、超絶お久しぶりです。(ご無沙汰していて申し訳ありません)
超絶お久しぶりなのにトリッキーな質問を投稿することになって申し訳ないのですが、有識者の皆さまご教授お願いします。

タイトルの通り、対象は2ノード構成です。
現在、手元にオンボードNIC(NDC)に25Gbx2ポート、追加NIC(PCI)に10Gbx2ポート搭載したE560Fが2台あります。
このままの構成では通常の初期設定ウィザードでは2ノード構成は出来ないと思いますが、
Custom VDSであれば2ノードでの構成は可能でしょうか?
(2ノード標準構成は4 x 10 GbE, 2 x 1 GbE + 2 x 10 GbE, 4 x 25 GbE のいずれかから選択のため)

当方が実現可能かな、と考えている根拠なのですが、
vSAN 2-Node Cluster on VxRail Planning Guide 」のP.5にはv7.0.010, v7.0.100では標準NICプロファイルとは「別の構成」として「Customer-Supplied VDS (still requires four ports)」との記載があります。
なので、極端な例で言えば追加NICで構成したポートグループに外部通信(vCenterやVxRail Mgr、ゲストOS)を割り当て、
オンボードNICで構成したポートグループにノード間通信(vMotionやvSAN、プライベート管理)を割り当てて、
尚且つオンボードNIC間は直結することもできるのでは?と解釈してみているのですが、如何でしょうか。
Configuration Portal
 で構成してみた限りValidationはクリアできたのですが実現可能でしょうか。

以上、宜しくお願いします。

0 件の賞賛
1 解決策

受理された解決策
4 Tellurium

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ

2 Node vSAN - VxRail のガイドVxRail Network Planning Guide、あとは Solve の手順を確認する限り、
Customer-supplied vDS を組んで NDC - PCIe で冗長した場合でも、初期セットアップ時には vmnic0 が管理系通信をカバーする形となるので、
双方の VxRail Node の NDC(の先頭2port) 同士で直結してしまうとセットアップが出来ない形になってしまいます。

----
The first port configured for VxRail networking, commonly known as ‘vmnic0’ or ‘vmnic1’, must be
reserved for VxRail management and node discovery. Do not migrate VxRail management or
node discovery off of this first reserved port.
----

7.0.010 以降で管理系ネットワークを別の vDS や PortGroup に移行される事がサポートされていますが、Direct-Connect 2Node vSAN の場合は物理結線上難しいと思われます。

また、NDC - PCIe 跨ぎでチーミングの場合も、kaneda さん指摘の速度差を揃えられないと vSphere としても非サポート構成になってしまうので注意が必要ですね。

元の投稿で解決策を見る

0 件の賞賛
5 返答(返信)
4 Beryllium

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ

2 Node 構成は経験がないので、知見もなく恐縮なのですが、VxRail自体はNDCのスペックについてはLinkup Speedしか見てないはずなので、2×25GbE を何らかの方法で10GbE でリンクアップさせればいったん2×10GbE で構築可能かと思われますがいかがでしょうか。

 

4 Beryllium

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ
補足ですが、弊社ラボ環境の25GbE NDC(Mellanox ConnectX-4 LX 25GbE SFP Rack NDC)は、25GbE 対応のスイッチが用意できなかったので10GGbE で利用してます。
4 Tellurium

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ

2 Node vSAN - VxRail のガイドVxRail Network Planning Guide、あとは Solve の手順を確認する限り、
Customer-supplied vDS を組んで NDC - PCIe で冗長した場合でも、初期セットアップ時には vmnic0 が管理系通信をカバーする形となるので、
双方の VxRail Node の NDC(の先頭2port) 同士で直結してしまうとセットアップが出来ない形になってしまいます。

----
The first port configured for VxRail networking, commonly known as ‘vmnic0’ or ‘vmnic1’, must be
reserved for VxRail management and node discovery. Do not migrate VxRail management or
node discovery off of this first reserved port.
----

7.0.010 以降で管理系ネットワークを別の vDS や PortGroup に移行される事がサポートされていますが、Direct-Connect 2Node vSAN の場合は物理結線上難しいと思われます。

また、NDC - PCIe 跨ぎでチーミングの場合も、kaneda さん指摘の速度差を揃えられないと vSphere としても非サポート構成になってしまうので注意が必要ですね。

元の投稿で解決策を見る

0 件の賞賛
2 Bronze

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ

naoyuki_kanedaさん&kwmtさん

早速のレスありがとうございます!

kwmtさんのコメントを見ていて「あ、確かにそ初期アドレスに到達するのに最初にvmnic0が割り当てられてるやん」と自己ツッコミしました(笑)
流石にNDCを直結に使うのは無しですかねぇ。。。

10Gbへリンクスピードを落とす方で検討してみようと思います。

0 件の賞賛
2 Bronze

Re: 2node構成におけるCustom VDSについて

ソリューションへジャンプ

最初の投稿の時の Planning Guide のリンク先に誤りがありました。

正しくはこちらになります。→「vSAN 2-Node Cluster on VxRail Planning Guide 」

0 件の賞賛