本記事は古いIBM CloudのVCS環境(vSphere 6.5ベース)を順次最新化してますにおける作業の一環である。
1. サーバーを注文する
既存環境と同一Primary Sunbetを指定する。
- 既存ノードと同一DC/Podを選択
- 既存ノードと同一メジャーバージョンを選択（後でパッチを適用する）
- ストレージを選択。システム領域はRAID1にする
- 既存ノードと同一VLAN/subnetを選択
2. Secondary Private VLANのトランク
既存のVCS環境は、
- Primary Private VLAN: 2115
- Secondary Private VLAN: 2116
- Primary Public VLAN: 974
であり、Secondary Private VLANのトランク作業を実施する必要がある。
- VLAN 2116にて既存ESXiノードがトランクされていることを確認し、
Attach trunkを押下
- 今回追加するESXiノードを選択し、
Attachを押下。
- 追加したESXiもトランクされた。
3. ESXiへのパッチ適用
[root@host1:~] vmware -v
VMware ESXi 6.5.0 build-8294253
[root@host1:~] esxcli system maintenanceMode set --enable true
[root@host1:~] esxcli system maintenanceMode get
Enabled
[root@host1:~] esxcli software vib update -d /vmfs/volumes/datastore1/isoimages/ESXi650-202207001.zip
Installation Result
Message: The update completed successfully, but the system needs to be rebooted for the changes to be effective.
Reboot Required: true
VIBs Installed: VMW_bootbank_bnxtnet_20.6.101.7-23vmw.650.3.96.13932383, VMW_bootbank_brcmfcoe_11.4.1078.26-14vmw.650.3.170.18678235, VMW_bootbank_igbn_0.1.1.0-4vmw.650.3.96.13932383, VMW_bootbank_ixgben_1.7.1.15-1vmw.650.3.96.13932383, VMW_bootbank_lpfc_11.4.33.26-14vmw.650.3.138.16576891, VMW_bootbank_lsi-msgpt2_20.00.06.00-2vmw.650.3.96.13932383, VMW_bootbank_lsi-msgpt35_09.00.00.00-5vmw.650.3.96.13932383, VMW_bootbank_lsi-msgpt3_17.00.02.00-1vmw.650.3.96.13932383, VMW_bootbank_misc-drivers_6.5.0-3.96.13932383, VMW_bootbank_ne1000_0.8.3-8vmw.650.2.75.10884925, VMW_bootbank_nenic_1.0.29.0-1vmw.650.3.96.13932383, VMW_bootbank_net-e1000_8.0.3.1-5vmw.650.3.153.17459147, VMW_bootbank_net-vmxnet3_1.1.3.0-3vmw.650.3.138.16576891, VMW_bootbank_ntg3_4.1.3.2-1vmw.650.2.75.10884925, VMW_bootbank_nvme_1.2.2.28-5vmw.650.3.170.18678235, VMW_bootbank_qlnativefc_2.1.73.0-5vmw.650.3.96.13932383, VMW_bootbank_smartpqi_1.0.1.553-28vmw.650.3.96.13932383, VMW_bootbank_vmkusb_0.1-1vmw.650.3.170.18678235, VMW_bootbank_vmw-ahci_1.1.6-1vmw.650.3.96.13932383, VMware_bootbank_cpu-microcode_6.5.0-3.134.16576879, VMware_bootbank_esx-base_6.5.0-3.187.19997716, VMware_bootbank_esx-tboot_6.5.0-3.187.19997716, VMware_bootbank_esx-ui_1.34.2-16361878, VMware_bootbank_esx-xserver_6.5.0-3.184.19588618, VMware_bootbank_lsu-hp-hpsa-plugin_2.0.0-16vmw.650.3.96.13932383, VMware_bootbank_lsu-lsi-lsi-mr3-plugin_1.0.0-11vmw.650.2.75.10884925, VMware_bootbank_lsu-lsi-lsi-msgpt3-plugin_1.0.0-8vmw.650.2.79.11925212, VMware_bootbank_native-misc-drivers_6.5.0-3.120.15256549, VMware_bootbank_vmware-esx-esxcli-nvme-plugin_1.2.0.36-3.96.13932383, VMware_bootbank_vsan_6.5.0-3.187.19819492, VMware_bootbank_vsanhealth_6.5.0-3.187.19819493, VMware_locker_tools-light_6.5.0-3.180.19581852
VIBs Removed: VMW_bootbank_bnxtnet_20.6.101.7-11vmw.650.2.50.8294253, VMW_bootbank_brcmfcoe_11.4.1078.0-8vmw.650.2.50.8294253, VMW_bootbank_igbn_0.1.0.0-15vmw.650.1.36.7388607, VMW_bootbank_ixgben_1.4.1-12vmw.650.2.50.8294253, VMW_bootbank_lpfc_11.4.33.1-6vmw.650.2.50.8294253, VMW_bootbank_lsi-msgpt2_20.00.01.00-4vmw.650.2.50.8294253, VMW_bootbank_lsi-msgpt35_03.00.01.00-9vmw.650.2.50.8294253, VMW_bootbank_lsi-msgpt3_16.00.01.00-1vmw.650.2.50.8294253, VMW_bootbank_misc-drivers_6.5.0-2.50.8294253, VMW_bootbank_ne1000_0.8.3-7vmw.650.2.50.8294253, VMW_bootbank_nenic_1.0.0.2-1vmw.650.0.0.4564106, VMW_bootbank_net-e1000_8.0.3.1-5vmw.650.0.0.4564106, VMW_bootbank_net-vmxnet3_1.1.3.0-3vmw.650.0.0.4564106, VMW_bootbank_ntg3_4.1.3.0-1vmw.650.1.36.7388607, VMW_bootbank_nvme_1.2.1.34-1vmw.650.2.50.8294253, VMW_bootbank_qlnativefc_2.1.50.0-1vmw.650.1.26.5969303, VMW_bootbank_smartpqi_1.0.1.553-10vmw.650.2.50.8294253, VMW_bootbank_vmkusb_0.1-1vmw.650.2.50.8294253, VMW_bootbank_vmw-ahci_1.1.1-1vmw.650.2.50.8294253, VMware_bootbank_cpu-microcode_6.5.0-1.41.7967591, VMware_bootbank_esx-base_6.5.0-2.50.8294253, VMware_bootbank_esx-tboot_6.5.0-2.50.8294253, VMware_bootbank_esx-ui_1.27.1-7909286, VMware_bootbank_esx-xserver_6.5.0-2.50.8294253, VMware_bootbank_lsu-hp-hpsa-plugin_2.0.0-6vmw.650.2.50.8294253, VMware_bootbank_lsu-lsi-lsi-mr3-plugin_1.0.0-10vmw.650.1.26.5969303, VMware_bootbank_lsu-lsi-lsi-msgpt3-plugin_1.0.0-7vmw.650.1.26.5969303, VMware_bootbank_native-misc-drivers_6.5.0-0.0.4564106, VMware_bootbank_vmware-esx-esxcli-nvme-plugin_1.2.0.32-2.50.8294253, VMware_bootbank_vsan_6.5.0-2.50.8064065, VMware_bootbank_vsanhealth_6.5.0-2.50.8143339, VMware_locker_tools-light_6.5.0-1.47.8285314
VIBs Skipped: VMW_bootbank_ata-libata-92_3.00.9.2-16vmw.650.0.0.4564106, VMW_bootbank_ata-pata-amd_0.3.10-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-atiixp_0.4.6-4vmw.650.0.0.4564106, VMW_bootbank_ata-pata-cmd64x_0.2.5-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-hpt3x2n_0.3.4-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-pdc2027x_1.0-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-serverworks_0.4.3-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-sil680_0.4.8-3vmw.650.0.0.4564106, VMW_bootbank_ata-pata-via_0.3.3-2vmw.650.0.0.4564106, VMW_bootbank_block-cciss_3.6.14-10vmw.650.0.0.4564106, VMW_bootbank_char-random_1.0-3vmw.650.0.0.4564106, VMW_bootbank_ehci-ehci-hcd_1.0-4vmw.650.0.14.5146846, VMW_bootbank_elxnet_11.1.91.0-1vmw.650.0.0.4564106, VMW_bootbank_hid-hid_1.0-3vmw.650.0.0.4564106, VMW_bootbank_i40en_1.8.1.9-2vmw.650.3.96.13932383, VMW_bootbank_ima-qla4xxx_2.02.18-1vmw.650.0.0.4564106, VMW_bootbank_ipmi-ipmi-devintf_39.1-5vmw.650.2.50.8294253, VMW_bootbank_ipmi-ipmi-msghandler_39.1-5vmw.650.2.50.8294253, VMW_bootbank_ipmi-ipmi-si-drv_39.1-4vmw.650.0.0.4564106, VMW_bootbank_lsi-mr3_7.708.07.00-3vmw.650.3.96.13932383, VMW_bootbank_misc-cnic-register_1.78.75.v60.7-1vmw.650.0.0.4564106, VMW_bootbank_mtip32xx-native_3.9.5-1vmw.650.0.0.4564106, VMW_bootbank_net-bnx2_2.2.4f.v60.10-2vmw.650.0.0.4564106, VMW_bootbank_net-bnx2x_1.78.80.v60.12-1vmw.650.0.0.4564106, VMW_bootbank_net-cdc-ether_1.0-3vmw.650.0.0.4564106, VMW_bootbank_net-cnic_1.78.76.v60.13-2vmw.650.0.0.4564106, VMW_bootbank_net-e1000e_3.2.2.1-2vmw.650.0.0.4564106, VMW_bootbank_net-enic_2.1.2.38-2vmw.650.0.0.4564106, VMW_bootbank_net-fcoe_1.0.29.9.3-7vmw.650.0.0.4564106, VMW_bootbank_net-forcedeth_0.61-2vmw.650.0.0.4564106, VMW_bootbank_net-igb_5.0.5.1.1-5vmw.650.0.0.4564106, VMW_bootbank_net-ixgbe_3.7.13.7.14iov-20vmw.650.0.0.4564106, VMW_bootbank_net-libfcoe-92_1.0.24.9.4-8vmw.650.0.0.4564106, VMW_bootbank_net-mlx4-core_1.9.7.0-1vmw.650.0.0.4564106, VMW_bootbank_net-mlx4-en_1.9.7.0-1vmw.650.0.0.4564106, VMW_bootbank_net-nx-nic_5.0.621-5vmw.650.0.0.4564106, VMW_bootbank_net-tg3_3.131d.v60.4-2vmw.650.0.0.4564106, VMW_bootbank_net-usbnet_1.0-3vmw.650.0.0.4564106, VMW_bootbank_nhpsa_2.0.22-3vmw.650.2.50.8294253, VMW_bootbank_nmlx4-core_3.16.0.0-1vmw.650.0.0.4564106, VMW_bootbank_nmlx4-en_3.16.0.0-1vmw.650.0.0.4564106, VMW_bootbank_nmlx4-rdma_3.16.0.0-1vmw.650.0.0.4564106, VMW_bootbank_nmlx5-core_4.16.0.0-1vmw.650.0.0.4564106, VMW_bootbank_nvmxnet3_2.0.0.23-1vmw.650.1.36.7388607, VMW_bootbank_ohci-usb-ohci_1.0-3vmw.650.0.0.4564106, VMW_bootbank_pvscsi_0.1-1vmw.650.1.26.5969303, VMW_bootbank_qedentv_2.0.6.4-8vmw.650.2.50.8294253, VMW_bootbank_qfle3_1.0.2.7-1vmw.650.0.0.4564106, VMW_bootbank_qflge_1.1.0.3-1vmw.650.0.0.4564106, VMW_bootbank_sata-ahci_3.0-26vmw.650.1.26.5969303, VMW_bootbank_sata-ata-piix_2.12-10vmw.650.0.0.4564106, VMW_bootbank_sata-sata-nv_3.5-4vmw.650.0.0.4564106, VMW_bootbank_sata-sata-promise_2.12-3vmw.650.0.0.4564106, VMW_bootbank_sata-sata-sil24_1.1-1vmw.650.0.0.4564106, VMW_bootbank_sata-sata-sil_2.3-4vmw.650.0.0.4564106, VMW_bootbank_sata-sata-svw_2.3-3vmw.650.0.0.4564106, VMW_bootbank_scsi-aacraid_1.1.5.1-9vmw.650.0.0.4564106, VMW_bootbank_scsi-adp94xx_1.0.8.12-6vmw.650.0.0.4564106, VMW_bootbank_scsi-aic79xx_3.1-5vmw.650.0.0.4564106, VMW_bootbank_scsi-bnx2fc_1.78.78.v60.8-1vmw.650.0.0.4564106, VMW_bootbank_scsi-bnx2i_2.78.76.v60.8-1vmw.650.0.0.4564106, VMW_bootbank_scsi-fnic_1.5.0.45-3vmw.650.0.0.4564106, VMW_bootbank_scsi-hpsa_6.0.0.84-1vmw.650.0.0.4564106, VMW_bootbank_scsi-ips_7.12.05-4vmw.650.0.0.4564106, VMW_bootbank_scsi-iscsi-linux-92_1.0.0.2-3vmw.650.0.0.4564106, VMW_bootbank_scsi-libfc-92_1.0.40.9.3-5vmw.650.0.0.4564106, VMW_bootbank_scsi-megaraid-mbox_2.20.5.1-6vmw.650.0.0.4564106, VMW_bootbank_scsi-megaraid-sas_6.603.55.00-2vmw.650.0.0.4564106, VMW_bootbank_scsi-megaraid2_2.00.4-9vmw.650.0.0.4564106, VMW_bootbank_scsi-mpt2sas_19.00.00.00-1vmw.650.0.0.4564106, VMW_bootbank_scsi-mptsas_4.23.01.00-10vmw.650.0.0.4564106, VMW_bootbank_scsi-mptspi_4.23.01.00-10vmw.650.0.0.4564106, VMW_bootbank_scsi-qla4xxx_5.01.03.2-7vmw.650.0.0.4564106, VMW_bootbank_shim-iscsi-linux-9-2-1-0_6.5.0-0.0.4564106, VMW_bootbank_shim-iscsi-linux-9-2-2-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libata-9-2-1-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libata-9-2-2-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libfc-9-2-1-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libfc-9-2-2-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libfcoe-9-2-1-0_6.5.0-0.0.4564106, VMW_bootbank_shim-libfcoe-9-2-2-0_6.5.0-0.0.4564106, VMW_bootbank_shim-vmklinux-9-2-1-0_6.5.0-0.0.4564106, VMW_bootbank_shim-vmklinux-9-2-2-0_6.5.0-0.0.4564106, VMW_bootbank_shim-vmklinux-9-2-3-0_6.5.0-0.0.4564106, VMW_bootbank_uhci-usb-uhci_1.0-3vmw.650.0.0.4564106, VMW_bootbank_usb-storage-usb-storage_1.0-3vmw.650.0.0.4564106, VMW_bootbank_usbcore-usb_1.0-3vmw.650.2.50.8294253, VMW_bootbank_vmkata_0.1-1vmw.650.1.36.7388607, VMW_bootbank_vmkplexer-vmkplexer_6.5.0-0.0.4564106, VMW_bootbank_xhci-xhci_1.0-3vmw.650.0.0.4564106, VMware_bootbank_emulex-esx-elxnetcli_11.1.28.0-0.0.4564106, VMware_bootbank_esx-dvfilter-generic-fastpath_6.5.0-1.36.7388607, VMware_bootbank_lsu-lsi-drivers-plugin_1.0.0-1vmw.650.2.79.11925212, VMware_bootbank_lsu-lsi-megaraid-sas-plugin_1.0.0-8vmw.650.1.26.5969303, VMware_bootbank_lsu-lsi-mpt2sas-plugin_2.0.0-6vmw.650.1.26.5969303, VMware_bootbank_rste_2.0.2.0088-4vmw.650.0.0.4564106
[root@host1:~] reboot
再起動後の状態
[root@host1:~] vmware -v
VMware ESXi 6.5.0 build-19997716
4. ESXiでのパラメーター変更
以下docsを参考。IBM CloudのVCSでは以下のパラメーターが変更されている。
https://kb.vmware.com/s/article/1038578?lang=en_us
https://cloud.ibm.com/docs/vmwaresolutions?topic=vmwaresolutions-vc_bom
esxcli system settings advanced set -o "/NFS/MaxVolumes" -i 256
esxcli system settings advanced set -o "/NFS41/MaxVolumes" -i 256
esxcli system settings advanced set -o "/NFS/HeartbeatMaxFailures" -i 10
esxcli system settings advanced set -o "/NFS/HeartbeatFrequency" -i 12
esxcli system settings advanced set -o "/NFS/HeartbeatTimeout" -i 5
esxcli system settings advanced set -o "/NFS/MaxQueueDepth" -i 64
esxcli system settings advanced set -o "/Disk/QFullSampleSize" -i 32
esxcli system settings advanced set -o "/Disk/QFullThreshold" -i 8
esxcli system settings advanced set -o "/Net/TcpipHeapSize" -i 32
esxcli system settings advanced set -o "/Net/TcpipHeapMax" -i 1536
esxcli system settings advanced set -o "/Net/BlockGuestBPDU" -i 1
5. DNSレコードの追加
VCSのAD/DNSサーバーで、追加するホストのAレコード/PTRレコードを追加する。
- Primary IPアドレスをAレコードとして追加
- 逆引きができるようにPTRレコードも併せて作成する
AD/DNSサーバーのCLIで名前解決を確認
C:\Users\Administrator>nslookup host1.vcs65.ibm.local
Server: localhost
Address: 127.0.0.1
Name: host1.vcs65.ibm.local
Address: 10.193.72.252
C:\Users\Administrator>nslookup 10.193.72.252
Server: localhost
Address: 127.0.0.1
Name: host1.vcs65.ibm.local
Address: 10.193.72.252
6. クラスターへのノード追加
- Add Host
- 追加するサーバーのFQDNを指定。
- ESXiのroot/passwordを指定
- YES
- NEXT
- ライセンスを選択
- Disabled
- デフォルトを選択
- 最終確認
7. 分散スイッチにvmnicを追加
SDDC-Dswitch-Privateにvmnic0/vmnic2を割り当てる。
- Maintenance Modeにする
-
SDDC-Dswitch-Privateを右クリックして、Add and Manage Hostsを選択
- Add hosts
-
New hostsから新規ノードを追加。
- 1台目のESXiと併せて、vmnic2をuplink1に、vmnic0をuplink2に割り当てる。
- NEXT
- NEXT
- 最終確認。NEXT
同様に、SDDC-Dswitch-Publicにvmnic1/vmnic3を割り当てる。
-
SDDC-Dswitch-Publicを右クリックして、Add and Manage Hostsを選択
- Add hosts
-
New hostsから新規ノードを追加。
- vmnic1をuplink1に、vmnic3をuplink2に割り当てる。
- NEXT
- NEXT
- 最終確認。NEXT
8. DNSの変更
デフォルトでは、IBM Cloud提供の10.0.80.11/10.0.80.12を利用しているので、AD/DNSサーバーを利用するように変更する。
- ホスト -> Configure -> Networking -> TCP/IP ConfigurationにてEdit
- ドメイン情報、DNS情報を入力
9. VMKernelの作成
既存の1台しか存在しないESXiホストのIPアドレス構成は以下のようであった。
[root@host0:~] esxcfg-vmknic -l |grep -e Interface -e IPv4
Interface Port Group/DVPort/Opaque Network IP Family IP Address Netmask Broadcast MAC Address MTU TSO MSS Enabled Type NetStack
vmk0 1 IPv4 10.193.72.206 255.255.255.192 10.193.72.255 00:50:56:6a:25:55 9000 65535 true STATIC defaultTcpipStack
vmk2 48 IPv4 10.193.74.2 255.255.255.192 10.193.74.63 00:50:56:6e:ff:ad 9000 65535 true STATIC defaultTcpipStack
vmk3 32 IPv4 10.193.74.66 255.255.255.192 10.193.74.127 00:50:56:6b:2f:da 9000 65535 true STATIC defaultTcpipStack
vmk6 115 IPv4 10.193.75.66 255.255.255.224 10.193.75.95 00:50:56:69:47:e7 9000 65535 true STATIC defaultTcpipStack
vmk7 128 IPv4 10.193.75.67 255.255.255.224 10.193.75.95 00:50:56:64:d7:67 9000 65535 true STATIC defaultTcpipStack
vmk4 66 IPv4 10.193.73.130 255.255.255.128 10.193.73.255 00:50:56:61:26:2f 9000 65535 true STATIC vxlan
vmk5 67 IPv4 10.193.73.131 255.255.255.128 10.193.73.255 00:50:56:6b:1e:a4 9000 65535 true STATIC vxlan
vmk1 16 IPv4 10.193.74.130 255.255.255.192 10.193.74.191 00:50:56:62:e9:38 9000 65535 true STATIC vmotion
[root@host0:~] esxcli network ip route ipv4 list
Network Netmask Gateway Interface Source
------------- --------------- ------------- --------- ------
default 0.0.0.0 10.193.72.193 vmk0 MANUAL
10.193.72.192 255.255.255.192 0.0.0.0 vmk0 MANUAL
10.193.74.0 255.255.255.192 0.0.0.0 vmk2 MANUAL
10.193.74.64 255.255.255.192 0.0.0.0 vmk3 MANUAL
10.193.75.64 255.255.255.224 0.0.0.0 vmk6 MANUAL
10.201.206.0 255.255.255.0 10.193.74.65 vmk3 MANUAL
10.201.206.37 255.255.255.255 10.193.75.65 vmk6 MANUAL
10.201.206.47 255.255.255.255 10.193.75.65 vmk6 MANUAL
この環境はvSphere6.5ベースのVCSであり、すでにautomationはサポートされていないため、IBM Cloudによってこれらのsubnet上のIPが割り当てられる心配はない。よって、vMotion/vSAN/NFSは既存環境と同一portable subnet内から連番でIPアドレスを割り当てた。その結果、以下のようなIPアドレス体系になった（多分こういう表を作業前に作っておいた方が良いのでまとめた）。
vSANは利用していないのでvmk2は削除しても良いのだが、今回は手順を確認する意味も兼ねて追加しておいた。
| vmkernel | Enabled Service | PortGroup | IP Address(1台目) | IP Address(追加分) | subnnt mask | default gateway |
|---|---|---|---|---|---|---|
| vmk0 | Management | SDDC-DPortGroup-Mgmt | 10.193.72.206 | 10.193.72.252 （ESXiをプロビジョニングする時にprimary subnetから自動割り当て） |
255.255.255.192 | 10.193.72.193 |
| vmk1 | vMotion | SDDC-DPortGroup-vMotion | 10.193.74.130 | 10.193.74.131 | 255.255.255.192 | 10.193.74.129 |
| vmk2 | vSAN | SDDC-DPortGroup-VSAN | 10.193.74.2 | 10.193.74.3 | 255.255.255.192 | 10.193.74.1 |
| vmk3 | -- | SDDC-DPortGroup-NFS | 10.193.74.66 | 10.193.74.67 | 255.255.255.192 | 10.193.74.64 |
| vmk4 | vxlan | vxw-vmknicPg-dvs-xx | 10.193.73.130 (NSX構成時にIP Poolから自動的に割り当てられる) |
10.193.73.132 (NSX構成時にIP Poolから自動的に割り当てられる) |
255.255.255.128 | 10.193.73.129 |
| vmk5 | vxlan | vxw-vmknicPg-dvs-xx | 10.193.73.131 (NSX構成時にIP Poolから自動的に割り当てられる) |
10.193.73.133 (NSX構成時にIP Poolから自動的に割り当てられる) |
255.255.255.128 | 10.193.73.129 |
| vmk6 | -- | SDDC-DPortGroup-iSCSI-A（過去に手動で作成したもの。今回は移行対象外） | 10.193.75.66 | N/A | 255.255.255.224 | 10.193.75.65 |
| vmk7 | -- | SDDC-DPortGroup-iSCSI-B（過去に手動で作成したもの。今回は移行対象外） | 10.193.75.67 | N/A | 255.255.255.224 | 10.193.75.65 |
9-1. vMotion用vmkernel(vmk1)の作成
9-2. vSAN用vmkernel(vmk2)の作成
9-3. NFS用vmkernel(vmk3)の作成
9-4. VXLAN用vmkernel(vmk4, vmk5)の作成
NSX構成時に自動作成されるので、ここでは何もしない。
10. File Storage(NFS)のマウント
10-1. NFS用vmkernelを利用するように経路情報を追加
現状のままでは、外部ネットワークへの通信はdefault gatewayを経由するため、Primary VLAN/vmk0が利用される。File Storage(NFS)へのアクセス時には、先述で作成したSecondary VLAN/vmk3を利用するように、static routeを追加する。
[root@host1:~] esxcli network ip route ipv4 add --gateway 10.193.74.65 --network 10.201.206.0/24
[root@host1:~] esxcli network ip route ipv4 list
Network Netmask Gateway Interface Source
------------- --------------- ------------- --------- ------
default 0.0.0.0 10.193.72.193 vmk0 MANUAL
10.193.72.192 255.255.255.192 0.0.0.0 vmk0 MANUAL
10.193.74.0 255.255.255.192 0.0.0.0 vmk2 MANUAL
10.193.74.64 255.255.255.192 0.0.0.0 vmk3 MANUAL
10.201.206.0 255.255.255.0 10.193.74.65 vmk3 MANUAL
既存のFile Storageにpingできることを確認。
[root@host1:~] ping fsf-tok0501b-fz.service.softlayer.com
PING fsf-tok0501b-fz.service.softlayer.com (10.201.206.42): 56 data bytes
64 bytes from 10.201.206.42: icmp_seq=0 ttl=61 time=0.270 ms
64 bytes from 10.201.206.42: icmp_seq=1 ttl=61 time=0.426 ms
64 bytes from 10.201.206.42: icmp_seq=2 ttl=61 time=0.405 ms
--- fsf-tok0501b-fz.service.softlayer.com ping statistics ---
3 packets transmitted, 3 packets received, 0% packet loss
round-trip min/avg/max = 0.270/0.367/0.426 ms
10-2. Allowed Hostsの確認。
VCSで使われているFile StorageおよびそのFile Storageは、vCenterの以下から確認できる。
確かにこのストレージがVCSから使われている。
また、このストレージのAuthorized Hostsでvmk3で構成したネットワークからのアクセスが許可されている。
10-3. 共有ストレージのマウント
management-shareやworkload_share_xxxxなどの共有ディスクをマウントする。
- 現行のESXiだけがHosts一覧に載っている。Actionsから、
Mount Datastore to Addtional...を選択。
- 今回追加するホストを選択。
- 追加された
- 同様に他のFile Storage(NFS)も構成する。ホストを追加した結果。追加した結果。
10-4. NFS Client用にESXi Firewallを修正
NFS Clientの許可IPアドレスが単独のアドレス（今回のFile Storageの名前解決時に利用されたIP）で構成されているので、将来的にFile StorageのIPアドレスが変更した際にも対応できるようにsubnet指定に変更。こちらの記事も参照。
- Before:
- 変更:
- After:
11. NSX for vSphereの構成
- VTEPのためのIP Poolを確認。今回は1ノードしか使われていないので枯渇している懸念はない。
- Host Preparationを確認。追加したESXiホストではNSX for vSphereの構成が完了していないため、Cluster全体としてはNot readyとなっている。
- View Configurationを確認。VTEPとして先述のIP Poolを利用していて、2つのVTEPをSRCIDでロードバランシングするポリシーであることが以下から確認できる。
- Not Readyを押下し、そこで現れる
RESOLVE ALLを押下。これによりNSX for vSphereがESXiに導入開始される。
- （導入作業中）定期的にリフレッシュ
- 導入完了
12. テスト
以上にて作業は完了したので、
- メンテナンスモードを抜ける。（手順省略）
- 新ホストにvMotionができることを確認。（手順省略）