この投稿は、vExperts Advent Calendar 2024の16日目です。
1. はじめに
VMware vSphere 8.0 U3では、さまざまな新機能が追加されました。その中でもTech Previewとして追加された「メモリ階層化 (Memory Tiering)」は、NVMeストレージをメモリの延長として利用することで、効率的なリソース管理とコスト削減を実現します。
今回は、Nested環境でこの機能を試してみたので、設定内容などを共有します。
ただ、前提として、お伝えしておきますが、今回は物理の環境は用意できてませんので、Nested環境で検証してしまいました。
本来、Nested環境はサポートされていません。
メモリ階層化用NVMeデバイスは指定のサポートされたデバイスを使用する必要があります。
そのため、実際の挙動とは異なる可能性があることをあらかじめご了承ください。
機能の概要やサポートされるデバイスの詳細については、以前投稿したこちらの記事ご確認ください。
2.使用した環境
使用した環境は以下のNestedです。
OS：ESXi 8.0 U3b
CPU：4コア
メモリ：32GB
メモリ階層化用のNVMeドライブ：350GB
※今回は、ホスト4台構成のvSphere/vSAN環境の内、1台を使用します
環境の事前準備
Nested ESXiの仮想マシン自体にNVMeドライブ(350GB)を追加しておきます。
3.実際にやってみた
対象のESXiのメモリを最初にチェックしておきます。
32GBです。
事前に追加したNVMeデバイスを認識しているか確認します。
vSphere Clientから対象のESXiホストの[構成]-[ストレージデバイス]の画面を開きます。
350GBのデバイスが追加されていることがわかります。
この際、識別子とローケーション（パス）を控えておきます。
※対象のデバイスにてパーティションが作成されている場合は、削除しておく必要があります。
既存のメモリ情報を確認しておきます。
ESXiホストを選択し、[構成]-[ハードウェア]-[概要]をクリックします。
対象のホストをメンテナンスモードにします。
SSHでログインします。
ESXCLIで、NVMeデバイスに「ティアパーティション (Tier Partition)」を作成します。
esxcli system tierdevice create -d <NVMeデバイスのパス>
メモリ階層化を有効にします。
esxcli system settings kernel set -s MemoryTiering -v TRUE
再起動します。
reboot
ESXiホストのストレージデバイスの画面を再度確認すると、対象のデバイスのデータストア列が「メモリ階層化に使用」になります。
vSphere Clientで、ESXiホストを選択し、[構成]-[ハードウェア]-[概要]をクリックします。
メモリの合計が、8GB加算され40GBに増えています。かつ、メモリ階層化の情報が記載されています。
※なぜ8GBなのかについては後ほど解説します。
ESXiのDCUIを直接確認しても40GBでした。
メモリ階層化を有効にすることができました。
4.疑問点
有効にできましたが、私は単純に既存の「32GB」メモリに「350GB」のNVMeデバイスを追加したので合算され「382GB」メモリになるのでは？と思ってしまっていました。
しかし、実際は、NVMeデバイスの領域から8GBが加算される結果でした。
こちらについてですが、メモリ階層化では、DRAM（Tier 0）とNVMe（Tier 1）を組み合わせて使用しますが、NVMeの容量が無制限に加算されるわけではありません。
デフォルト設定では、NVMeの利用可能な容量はDRAMの「25%」に制限されています。
この設定値は「Mem.TierNvmePct」で管理されており、今回の場合、32GB（DRAM）の25%である「8GB」がNVMeから利用されるようになったということです。
試しに、以下のコマンドで「Mem.TierNvmePct」の値を「50%」に変更してみます。
esxcfg-advcfg -s 50 /Mem/TierNvmePct
再度、リブートして、メモリ量を確認してみます。NVMeのメモリ量が「8GB」→「16GB」に増量していることがわかります。
メモリ階層化では、NVMe全体をそのままメモリとして使うわけではなく、一定の割合に基づいて計算される仕組みになっています。この制限は、NVMeがDRAMほど高速ではないため、システム全体の性能を維持するための設計と考えられます。
なお、「Mem.TierNvmePct」は、最大400%まで設定可能ですが、上記の通り実際に使用するケースはなさそうです。
（参考）400%に設定した合計「160GB」（32GBに400%加算）
一応、Windows Server OSの仮想マシンにメモリ100GBを割り当ててみましたが、しっかり反映されていました。
5.まとめ
今回、vSphere 8.0 U3の新機能（Tech Preview）であるメモリ階層化 (Memory Tiering) の設定方法、実際の動作結果について確認しました。この機能により、DRAMとNVMeの組み合わせによる柔軟なメモリ管理が可能になり、特にメモリリソースが限られる環境で有効であることがわかりました。
今回の検証のポイントを以下に記載します。
・Mem.TierNvmePctの設定
デフォルトではDRAMの25%に相当するNVMe容量が使用されます。そのため、より多くのメモリ量を設定したい場合は、この設定を調整することで、NVMeの利用効率をさらに高めることが可能です。
・Tier Partition の役割
NVMeデバイスをMemory Tieringに適用するためには、専用のTier Partitionが必要です。これにより、NVMe全体をメモリとして使用するわけではないという設計上の制限も理解できました。
・性能への影響
NVMeはDRAMほど高速ではないため、NVMeがメモリとして使用される場合、特定のワークロードでレイテンシの増加が発生する可能性があります。適切な設定と用途の選定が重要です。
メモリ階層化は、現在はTech Previewの段階であり、本番環境での利用は推奨されていません。
しかし、リソース効率を高め、総所有コスト (TCO) を削減する可能性があるとされているため、今後の正式リリースに期待します。
6.参考情報
今回の検証をするにあたって参考にした情報を記載します。
Using the "Memory Tiering over NVMe" feature in vSphere 8.0 Update 3.
https://knowledge.broadcom.com/external/article?legacyId=95944
※上記のリンク先からPDFをダウンロードすると詳細の制約や手順を確認できます。