2
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

Proxmox × Cisco:Open vSwitchのRSTPで起動・ネットワーク変更時の約30秒待ちを短縮する

2
Last updated at Posted at 2026-11-13

2026年11月15日追記:OVS 3.5.0でARPが届かなくなる不具合を確認

本記事の検証環境で、RSTPを有効にした後、OVSのinternal portへARP broadcastが届かなくなる障害を確認しました。未修正のOVSでは、以下の本文の rstp_enable=true をそのまま適用しないでください。 当面はRSTPを無効化し、残存する転送不可状態も解消する必要があります(下記参照)。本文は2026年11月13日に確認した設定と結果の記録として残しています。

症状と切り分け

ホストから同じVLAN内のDNS VMへ接続できなくなり、DNS問い合わせがtimeoutしました。このホストを使うProxmoxのOIDCログインでも、DNSの待ち時間が繰り返され、認証完了まで約14秒かかっていました。

DNS VM自体は稼働しており、Guest Agent・SSHは応答し、ゲスト内の名前解決も成功していました。パケット採取とOVSの転送traceで確認した結果は、次のとおりです。

確認対象 結果
DNS VMのOS・サービス Unbound / NSDが稼働し、設定検査・ゲスト内のDNS問い合わせに成功
ホストからのARP要求 ホスト管理用interfaceと物理uplinkでは観測できるが、VMへつながるOVS internal portには届かない
OVSのbroadcast転送 NORMAL のflood処理へ進むが、対象internal portが出力先から外れている
既知MAC宛のunicast 対象portへ転送されるため、一部の経路では引き続き通信できる

今回のVM接続は、OVS internal portからProxmoxのfirewall用Linux bridgeを経由し、tap interfaceへ接続する構成でした。guestのDNS設定やfirewallより手前で、ARPが欠落していました。 MACの学習状況によって通信可否が異なるため、既存の疎通成功や、スイッチに正しいARP entryがあることだけでは検出できません。

11月13日の確認では、RSTPのroot / Forwardingや既存経路の疎通を確認しましたが、近隣情報が未解決の状態からのARP到達を十分に確認できていませんでした。今回の結果を受け、受入ではこの確認も必要と考えています。

上流で修正済みの不具合と一致

実機の openvswitch-switch は 3.5.0-1+b1 でした。観測した挙動は、RSTPに参加しないinternal portをflood対象から外してしまう、次の上流修正の対象と一致します。

Open vSwitch: Fix internal ports not floodable on bridges with R/STP.

修正では、bridge全体のSTP / RSTP有効状態ではなく、各portがSTP / RSTPへ参加しているかを使って判定します。物理uplinkがForwardingであっても、このinternal port側の転送不具合は起こり得ます。

当面の回避設定:RSTPを無効化し、転送状態を再計算する

変更前の /etc/network/interfaces とOVS設定を保全し、独立した管理接続やコンソールを確保してから作業します。永続設定では、本文の最後の行を次のように変更します。既存のVLAN・IP・BPDU転送設定は保持します。

/etc/network/interfaces(vmbr0の該当行)
up ovs-vsctl set Bridge vmbr0 rstp_enable=false other_config:rstp-priority=61440

ファイル編集だけでは稼働中のOVSは変わりません。 稼働中の値を変更し、読戻すコマンドは次のとおりです。

sudo ovs-vsctl set Bridge vmbr0 rstp_enable=false
sudo ovs-vsctl get Bridge vmbr0 rstp_enable

読戻しが false であることを確認します。この変更のために ifreload -a やネットワークサービス全体の再起動を行う必要はありません。

RSTPを無効にすると、OVS自身によるRSTPのループ防止と高速収束も無効になります。複数uplink・bond・別bridgeなどを含む実際の接続を確認し、L2ループが生じない構成で適用してください。今回のホストでは、無効化だけでは復旧せず、次の追加操作が必要でした。

無効化しても転送不可状態が残る場合

今回のOVS 3.5.0では、stp_enable=false / rstp_enable=false を読戻した後も、DNS VMへARPが届かず、DNS待ちは約3.1秒のままでした。転送traceでもVM側のportがflood先から外れていました。

これは、STP / RSTPを解除しても内部の bundle->floodable=false が戻らない、別の既知不具合と一致します。上流修正:Fix bundle floodable flag when disabling STP/RSTP.

対象portのOpenFlow設定が config: 0(NO_FLOODなし)、STP / RSTPともfalseであることを確認し、設定を保全した上で、DNS VMにつながる1ポートだけ no-flood → flood を切り替えました。OVS 3.5.0の実装では、NO_FLOODの変更がbundleの再計算を起こします。

以下の fwln202o0 は今回の対象port名です。自分のVMの接続先を確認し、機械的にコピーしないでください。

sudo ovs-ofctl mod-port vmbr0 fwln202o0 no-flood
sudo ovs-ofctl mod-port vmbr0 fwln202o0 flood

2操作の間だけ対象portのbroadcastが抑止されます。最後は必ず flood に戻し、実行前後のport設定が一致することを確認します。この切替でRSTPを再有効化するわけではありません。

実施後、OVSの転送traceにDNS VM向けの出力が戻り、ホストからのARP解決・DNS問い合わせが成功しました。

項目 無効化後・port再計算前 port再計算後
DNS VMへのARP FAILED 正しいMACを学習
DNS問い合わせ timeout UDP / TCP、A / AAAAが約15〜19msで応答
OIDC Discoveryの名前解決 約3.1秒 約8〜16ms
OIDC DiscoveryのHTTPS取得全体 約3.4秒 約0.35〜0.42秒

OVS・ホスト・VMの再起動、DNSの優先順位変更は行っていません。確認したのはこの1ポートとDiscovery取得までで、ほかのVM側portや、利用者によるSSO全体の再試験とは区別します。恒久対応では、internal portの判定修正と、この解除時の再計算修正の両方を含むpackageを確認します。

変更後は、設定値だけでなく、未解決の近隣からのARP、DNSのUDP / TCP、影響するVMの通信を確認します。IPv6を利用する場合はNDPからの疎通も確認し、既に近隣情報が学習された状態のpingだけで完了としないようにします。

修正版はいつ利用できるか

2026年11月15日時点で確認した状況です。上流のコードへの取り込みと、利用中のOSでのpackage配布は別です。

段階 確認した状態
上流の開発コード 2026年10月7日に修正取り込み済み
3.5系の保守ブランチ 修正あり。NEWS の次版表記は v3.5.5 - xx xxx xxxx で、公開日は未定
Debian 13 / 今回のホスト 稼働版・apt candidateとも 3.5.0-1+b1。このホストで使える修正版の配布時期は未確認

参照:3.5系保守ブランチの修正コード、同ブランチのNEWS、Debian trixieの配布状況。保守ブランチと配布状況は今後変わります。

修正を含むpackageの提供と実機での受入を確認してから、RSTPの再有効化を判断します。単にOVSの版番号を上げるだけで、この修正が含まれるとは判断しません。


前記事からの更新:起動やネットワーク変更時の「約30秒待ち」を短くする

以前、ポストESXi時代にネットワークエンジニアに送るProxmox再入門で、Proxmox上にCiscoの仮想アプライアンスを収容する方法を紹介しました。Open vSwitch(以下、OVS)でVLAN trunkを扱う設定も、その中で取り上げています。

今回は、そのネットワーク設定のアップデートです。

前記事の構成ではOVSのRSTPを有効化しておらず、私の環境ではProxmoxの起動時やネットワーク構成変更時に、約30秒通信できない時間がありました。OVSもスパニングツリーに参加させ、直結するCiscoスイッチのMSTPと連携することで、この待ち時間を大幅に短縮できる構成にします。

ポイントは、設定ファイルに次の1行を追加することです。

up ovs-vsctl set Bridge vmbr0 rstp_enable=true other_config:rstp-priority=61440

本記事では、その理由と、実機での設定・確認方法を紹介します。RSTPはOVSが従来から持つ機能で、前記事の構成に有効化設定を追加しています。

本記事の実機確認日は2026年11月13日です。RSTPの有効化、上流rootの学習、Forwarding、BPDUの受信、通信の維持を確認しました。再起動やネットワーク再読み込みを繰り返して停止時間を計測する試験は行っていません。「何秒から何ミリ秒になった」という実測値は、この記事では示しません。

約30秒の待ち時間とRSTPの関係

従来のSTPでは、ポートが転送を開始するまでにListeningとLearningを通り、既定値ではそれぞれ15秒、合計約30秒待ちます。

RSTPでは、point-to-pointリンク上のブリッジ同士がProposal / Agreementを交換して転送開始の条件を確認し、タイマー待ちを省いた高速な遷移が可能です。相手とRSTPの合意が成立しなければ、従来のタイマーによる遷移に戻る場合があります。CiscoのRSTP解説にも、この違いが説明されています。

今回の更新では、Cisco側のタイマーを短くする設定は行いません。OVS側でもRSTPを有効にして、スイッチと連携できるようにします。

項目 前記事の構成 今回の構成
OVSのRSTP 無効 有効
Ciscoとの接続 OVS自身はRSTPに不参加 OVSとMSTP側がCISTで連携
起動・変更時の転送開始 私の環境では約30秒の通信待ちが発生 RSTPの高速遷移を利用できる構成
Cisco側のForward Delay 15秒 15秒のまま

なお、MSTPとRSTPは相互運用できます。今回のCatalystは全VLANをMST instance 0に割り当てており、CIST(Common and Internal Spanning Tree)としてOVSと接続します。OVS側にCiscoと同じMST region名やVLANごとのinstanceを設定する必要はありません。CatalystのMSTP設定ガイド

CiscoのMSTPをMST0だけで使うと、単一のRSTPとして連携できる

CiscoのMSTPは、IEEE 802.1wのRSTPを基盤に動作します。RSTPの高速遷移はMSTPの基本機能であり、instance数にかかわらず使われます。追加のMST instanceを作らず、全VLANをinstance 0(MST0)に割り当てた構成では、全VLAN共通の1つのツリーをIEEE 802.1wベースで扱います。

今回のようにMST0だけを使う構成は、標準RSTPを使うOVSと単一ツリーで連携させる際にも適しています。設定モードはMSTPのままで、MSTP BPDUをRSTP側が解釈して相互運用します。

出典:Catalyst 9300 / IOS XE 17.18.x — Spanning-Tree Modes and Protocols

Meraki MSスイッチが混在する環境でも有益

この構成は、Catalyst・Meraki MS・OVSが混在する環境でも有益です。 Meraki MSは標準のRSTP(IEEE 802.1w)と相互運用でき、MSTPの複数instanceもRSTP側からは1つのツリーとして見えます。Catalyst側をMST0だけにそろえると、全VLAN共通のツリーとして設計・確認しやすくなります。

Merakiの公式ガイドは、PVST+/Rapid PVST+との接続ではVLAN1上のinstanceとtrunk上のVLAN1許可などの条件を示し、特にMSがRapid PVST+のCatalyst間に入る構成では、port inconsistencyなどを避けるためCatalyst側をMSTPにすることを推奨しています。

なお、MS390/C9300-Mは既定でMST0だけを使い、複数instanceには設定できません。この実装も、ほかのMSスイッチのRSTPと互換性を保つためのものです。

出典:Meraki Advanced MS Setup Guide — Spanning Tree / Protocol interoperability

MS混在環境の説明は公式資料に基づく設計上の補足です。本記事の実機確認範囲は、構成図に示すCatalystとOVSの接続です。

検証構成

以下のホスト名・スイッチ名・IPアドレスは説明用のダミー値です。MACアドレスと、ポート番号・VLAN・プロトコルの状態は実機の値を使用しています。

PVE-HOSTに直結しているCiscoスイッチはSW-ACCESSです。 root bridgeは、その上流にある既存のスイッチです。

対象 実機の版・設定
Proxmox VE pve-manager 9.2.26、kernel 7.0.14-26-pve
Open vSwitch 3.5.0
ifupdown2 3.3.0-1+pmx13
直結スイッチ SW-ACCESS / Catalyst C9200-24PXG / IOS XE 26.02.01
物理リンク PVE-HOST eno3 ↔ SW-ACCESS TenGigabitEthernet1/1/3、10Gbps / full duplex
ホスト管理 vmbr0_2064、192.0.2.10/24、VLAN 2064

本構成はOVS bridgeです。Proxmox標準のLinux bridgeに対する設定とはコマンドが異なります。

Cisco側:MST0と直結ポートを確認する

SW-ACCESSでは、既にMSTPが動作していました。今回の作業でスイッチの設定変更は行っていません。

MST instance 0へのVLAN割り当て

確認コマンド:

show running-config | section ^spanning-tree
show spanning-tree mst configuration

実機出力:

SW-ACCESS#show running-config | section ^spanning-tree
spanning-tree mode mst
spanning-tree extend system-id

SW-ACCESS#show spanning-tree mst configuration
Name      []
Revision  0     Instances configured 1

Instance  Vlans mapped
--------  ---------------------------------------------------------------------
0         1-4094
-------------------------------------------------------------------------------

今回の環境では、全VLANをMST0で扱っています。

PVE-HOSTへのtrunk

設定のうち、今回関係する部分を抜粋します。

interface TenGigabitEthernet1/1/3
 description ### to PVE-HOST ###
 switchport trunk native vlan 2064
 switchport trunk allowed vlan 2-4094
 switchport mode trunk

このポートは通常のスパニングツリーポートとして動作し、PortFast / BPDU Guard / BPDU Filterは有効にしていません。OVSがBPDUを送信する構成なので、対象ポートとグローバル既定値を事前に確認します。

確認には次を使います。

show running-config interface TenGigabitEthernet1/1/3
show spanning-tree summary
show spanning-tree interface TenGigabitEthernet1/1/3 detail

この例のallowed vlan 2-4094は既存ラボの設定値です。新規に構成する場合は、実際に必要なVLANに合わせてください。

Proxmox側:既存のVLAN設定にRSTPを追加する

1. 現在の状態と設定を保全する

最初に、bridge名とRSTPの状態を確認します。

sudo ovs-vsctl list-br
sudo ovs-vsctl get Bridge vmbr0 rstp_enable
sudo ovs-vsctl get Bridge vmbr0 other_config

今回の変更前は、rstp_enableがfalse、other_configにはforward-bpdu="true"だけが設定されていました。

/etc/network/interfacesとOVS設定は、ホスト内にバックアップしてから変更しました。遠隔作業では、管理接続を失った場合に元へ戻せるコンソールや復元手段も用意します。

2. vmbr0に起動時の設定を追加する

/etc/network/interfacesの関連部分は次のとおりです。管理IPやVLAN設定はそのままに、vmbr0 stanzaの最後へRSTPの1行を追加しています。IPv6や今回無関係な設定は省略しています。

/etc/network/interfaces(関連部分)
auto eno3
iface eno3 inet manual
    ovs_type OVSPort
    ovs_bridge vmbr0
    ovs_options vlan_mode=native-untagged tag=2064

auto vmbr0_2064
iface vmbr0_2064 inet static
    address 192.0.2.10/24
    gateway 192.0.2.1
    ovs_type OVSIntPort
    ovs_bridge vmbr0
    ovs_options tag=2064

auto vmbr0
iface vmbr0 inet manual
    ovs_type OVSBridge
    ovs_ports eno3 vmbr0_2064
    up ovs-vsctl set bridge vmbr0 other-config:forward-bpdu=true
    up ovs-vsctl set Bridge vmbr0 rstp_enable=true other_config:rstp-priority=61440

61440はbridge priorityです。今回の上流rootの32768より大きな値にすることで、既存のスイッチ側をrootとして優先します。rootはpriorityが小さいbridgeから選ばれます。OVSのRSTP設定仕様

物理ポートのnative VLANと、OVS管理用internal portのtagは引き続き2064です。RSTPの有効化に伴って、IPアドレスやVLAN番号を変更する必要はありません。

前記事で扱ったforward-bpdu=trueと、今回のrstp_enable=trueは別の設定です。前者は予約マルチキャストフレームの転送、後者はOVS自身のRSTP参加を制御します。RSTP有効時のSTP BPDUはOVSが処理するので、BPDUをそのまま通すだけの構成とは動作が変わります。

前記事の2026年6月の追記にあるとおり、EAPOL用の明示的なovs-ofctl add-flowは、この設定例には追加していません。稼働環境に残っていた既存flowの削除は、今回の作業対象にはしていません。

3. 稼働中のOVSへ反映する

永続設定を編集した後、今回の変更だけを稼働中のOVSに反映しました。

sudo ovs-vsctl set Bridge vmbr0 rstp_enable=true other_config:rstp-priority=61440

この設定を反映するために、ネットワークサービス全体を再起動する必要はありません。今回もnetworking.serviceの再起動やifreload -aは実行せず、ホストとVMを稼働させたまま変更しました。

設定ファイルの読み取り確認には、次を使用しました。

sudo ifquery vmbr0

実機確認:上流rootを学習し、eno3がRoot / Forwardingになる

OVS側

確認コマンド:

sudo ovs-vsctl get Bridge vmbr0 rstp_enable
sudo ovs-appctl rstp/show vmbr0

rstp_enableはtrueです。rstp/showの実機出力から、rootと物理uplinkに関係する部分を抜粋します。

---- vmbr0 ----
Root ID:
  stp-priority    32768
  stp-system-id   00:cc:fc:39:8b:80
  stp-hello-time  2s
  stp-max-age     20s
  stp-fwd-delay   15s
  root-port       eno3
  root-path-cost  2000

Bridge ID:
  stp-priority    61440
  stp-system-id   58:47:ca:7a:87:b6
  stp-hello-time  2s
  stp-max-age     20s
  stp-fwd-delay   15s

  Interface  Role       State      Cost     Pri.Nbr
  ---------- ---------- ---------- -------- -------
  eno3       Root       Forwarding 2000     128.6

確認点は次の3つです。

  • OVSが既存の上流rootを学習している。
  • eno3がRoot / Forwardingになっている。
  • タイマーはhello 2 / max-age 20 / forward-delay 15のまま。

表示にforward-delay 15sが残っていても、RSTPの高速遷移が無効という意味ではありません。 タイマー値を小さくすることと、RSTPの合意によってタイマー待ちを省くことを区別します。

BPDUの受信も確認できます。

sudo ovs-vsctl --columns=name,rstp_status,rstp_statistics list Port eno3

採取時の実機出力:

name                : eno3
rstp_status         : {rstp_designated_bridge_id="8.000.00ccfc398b80", rstp_designated_path_cost="0", rstp_designated_port_id="801b", rstp_port_id="8006", rstp_port_role=Root, rstp_port_state=Forwarding}
rstp_statistics     : {rstp_error_count=0, rstp_rx_count=219, rstp_tx_count=0, rstp_uptime=427}

別時点での受信数26から、今回採取時の219への増加を確認しています。カウンターは累積値で、停止時間そのものを表すものではありません。

直結スイッチSW-ACCESS側

確認コマンド:

show spanning-tree mst 0
show spanning-tree interface TenGigabitEthernet1/1/3 detail
show spanning-tree inconsistentports

show spanning-tree mst 0の関連部分を抜粋します。

##### MST0    vlans mapped:   1-4094
Bridge        address 0476.b027.5f80  priority      32768 (32768 sysid 0)
Root          address 00cc.fc39.8b80  priority      32768 (32768 sysid 0)
              port    Te1/0/24        path cost     0
Regional Root address 00cc.fc39.8b80  priority      32768 (32768 sysid 0)
                                      internal cost 4000      rem hops 18
Operational   hello time 2 , forward delay 15, max age 20, txholdcount 6

Interface                        Role Sts Cost      Prio.Nbr Type
----------------                 ---- --- --------- -------- --------------------------------
Te1/0/24                         Root FWD 2000      128.24   P2p
Te1/1/3                          Desg FWD 2000      128.27   P2p

SW-ACCESSでは上流向けのTe1/0/24がRoot Port、PVE-HOST直結のTe1/1/3がDesignated / Forwardingです。PVE-HOSTのeno3がRoot Portであることと対応します。

port詳細でも、転送状態とBPDUを確認しました。

 Port 27 (TenGigabitEthernet1/1/3) of MST0 is designated forwarding
   Port path cost 2000, Port priority 128, Port Identifier 128.27.
   Designated root has priority 32768, address 00cc.fc39.8b80
   Designated bridge has priority 32768, address 0476.b027.5f80
   Designated port id is 128.27, designated path cost 0
   Timers: message age 0, forward delay 0, hold 0
   Number of transitions to forwarding state: 2
   Link type is point-to-point by default, Internal
   BPDU: sent 538, received 3

show spanning-tree inconsistentportsでは、inconsistent portは0でした。

変更後に確認した範囲

稼働中のOVSでRSTPを有効化し、次を確認しました。

確認項目 結果
OVS側のRSTP true、eno3はRoot / Forwarding
上流root 既存のpriority 32768 / 00:cc:fc:39:8b:80を維持
SW-ACCESSのPVE-HOST直結ポート Designated / Forwarding、BPDU受信あり
OVSのBPDU受信 増加、error 0
IPv4疎通 ホストからgateway・DNS・管理サーバー・PBXへ各3/3
IPv6疎通 ホストからgatewayへ3/3
guestの疎通 CT105からgatewayへ3/3
既存設定・稼働状態 VLAN・経路・VM PID・CTの状態・cluster quorumを維持

今回のuplinkは1本です。冗長リンクの切替や、起動・ネットワーク構成変更時の実際の停止時間は別途確認する必要があります。RSTPが短縮するのはL2の転送開始までの待ち時間で、ホストやVM自体の起動時間を短縮する設定ではありません。

おわりに

前記事のOVS構成にRSTPを追加すると、Ciscoスイッチとスパニングツリーで連携できます。起動時やネットワーク変更時の約30秒の待ち時間を見直す際は、まずOVSのrstp_enableと、直結スイッチのport状態を確認してみてください。

今回の追加設定は、vmbr0のRSTP有効化とbridge priorityの指定です。既存のVLAN trunkを維持したまま、RSTPの高速遷移を利用できる構成に更新しました。

2
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
2
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?