五、虛擬網絡

5.1 PVE虛擬網絡拓撲

某某公司超融合項目的虛擬網絡的核心架構是在PVE虛擬化平台上創建虛擬交換機（OVS類型）、創建虛擬主機，並與物理交換機、物理路由器一起，組建管理網以及業務網。虛擬主機通過接入到虛擬交換機中實現相互通信，虛擬交換機接入到物理交換機中，物理交換機接入到物理路由器中，組成虛擬網絡與物理網絡互聯互通的混合網絡，如圖23所示。

圖23. 虛擬網絡與物理網絡混合架構

5.2 PVE虛擬網絡簡介

Proxmox VE基於Debian Linux操作系統，Debian Linux操作系統支持原生的虛擬網絡有Linux Bridge、Linux Bond及Linux VLAN三種類型。Proxmox VE同時集成了Open vSwitch（OVS）開放虛擬交換機組件，所以Proxmox VE的原生虛擬網絡除了Linux Bridge、Linux Bond及Linux VLAN這三種類型之外，還包括Open vSwitch類型，如圖24所示。

圖24. Proxmox VE原生虛擬網絡模型

根據Proxmox VE官網的wiki文檔《Open vSwitch》介紹，Open vSwitch和Linux Bridge、Linux Bond或Linux VLAN不能混合使用。例如，不要嘗試將Linux VLAN添加到OVS Bond，或將Linux Bond添加到OVS Bridge，反之亦然。Open vSwitch是專門為在虛擬化環境中運行而定制的，無需使用主機自帶的Linux Bridge、Linux Bond或Linux VLAN等功能，如圖25所示。

圖25. Open vSwitch不能與Linux原生虛擬網絡混用

在本項目中，Proxmox VE的虛擬網絡使用Open vSwitch，不使用Linux原生虛擬網絡，后續不再做聲明。

5.3 節點1的PVE虛擬網絡配置

如圖20中的虛擬網絡與物理網絡的混合架構看起來非常復雜，以致於不得不刪減了一些跟集群相關的虛擬網，為了方便進行配置，有必要對圖22的網絡架構進行解構，進行還原，節點1的PVE虛擬網絡如圖26所示。

圖26. 節點1的PVE虛擬網絡架構

5.3.1 管理網絡配置

根據表2和表3，管理網絡的VLAN ID是VLAN 255，包括節點1的PVE系統的管理以及節點1服務器的BMC接口都統一划分到VLAN 255，其中VLAN 255的虛擬IP地址在S5110V2-28P-SI上。注意，在Proxmox VE語境下，Bridge（網橋）等同於Switch（交換機），后續不再做聲明。在做配置演示之前，我先把節點1的虛擬網絡配置截圖出來，大家有個大概了解，不至於蒙圈，如圖27所示。

圖27. 節點1的虛擬網絡配置

好了，下面我們開始演示節點1的管理網絡的配置，有了圖27，相信大家很容易能理解下面這些步驟。

第一步：創建名稱為“vmbr1”的OVS Bridge（虛擬交換機），並將“eno2”物理接口捆綁到虛擬交換機，如圖28所示。

圖28. 創建名稱為vmbr1的虛擬交換機

注意：eno1和eno2的類型是“網絡設備”，這表明是物理接口。當物理接口eno1和eno2被捆綁到虛擬交換機之后，eno1和eno2的類型就會變成“OVS Port”，也就是成為虛擬交換機上的接口，這個接口是可以使用物理網線直接連接的，仍然屬於物理接口，只不過在虛擬交換機上，變了個稱呼，叫“OVS Port”。

第二步：配置“eno2”的VLAN屬性，VLAN屬性與物理交換機相對應的接口保持一致，如圖29所示。

OVS Port是物理接口“eno2”在虛擬交換機上的接口屬性，本質上是一個物理接口，可以使用網線將“eno2”與物理交換機S5110V2-28P-SI的G1/0/12接口連接起來，所以“eno2”的VLAN屬性與G1/0/12的VLAN屬性要一致，才能進行通信。

圖29. “eno2”的VLAN屬性

第三步：創建名稱為“br1mgnt”的OVS IntPort（虛擬接口），並將“br1mgnt”虛擬接口捆綁到虛擬交換機vmbr1上，如圖30所示。

OVS IntPort與OVS Port的區別就是，OVS IntPort是一個虛擬接口，是OVS虛擬出來的一個接口，無法連接網線的，而OVS Port是可以的。OVS IntPort如果要與物理網絡通信，需要與物理接口（OVS Port）比如說“eno2”捆綁到同一個虛擬交換機上，且該虛擬交換機不能直接配置IP地址。

圖30. 創建名稱為br1mgnt的虛擬接口

注意1，“br1mgnt”虛擬接口中填寫了默認網關“10.129.255.1”，整個節點1的PVE虛擬網絡只能有一個默認網關，類似於物理主機只能有一個默認網關，也就是說只能有一條八個零的路由，如圖26所示，節點1的PVE虛擬網絡只有“10.129.255.1”一個默認網關。

注意2，如果節點服務器的物理網卡數量多，也可以直接使用物理接口捆綁虛擬交換機，然后直接給虛擬交換機配置管理IP地址，而不需要使用IntPort接口。

本項目中，PVE虛擬網絡只有二層交換，不涉及到IP路由，無需創建虛擬路由器，IP路由算法由物理網絡設備負責。

5.3.2 業務網絡配置

根據表2和表3，業務網絡的VLAN ID是VLAN 250和VLAN 251，包括節點1的虛擬主機VM1~VM7划分到VLAN 251，節點2的虛擬機VM8~VM14划分到VLAN 250，節點3的虛擬機VM15~VM21划分到VLAN 250，其中VLAN 250和VLAN 251的虛擬IP地址在物理交換機S5110V2-28P-SI上。