たぶんChromium系のエンジンを使っているとダメ。Electronとかもダメ。
どこのバグなのか分からないですが、以下の設定を導入してpulseaudioを再起動すると直ったので、備忘録しておきます。
調査したPulseaudioのバージョン: 13.0
以下のようにしてリングバッファのサイズを小さく変更します。
/etc/pulse/daemon.conf
default-fragment-size-msec = 2
さらに、以下のように設定を変更してタイマーベースの動作からポーリングベースへ変更します。
/etc/pulse/default.pa
load-module module-udev-detect tsched=0
設定ファイルの変更後、pulseaudio -kしてPulseaudioを再起動します。
手元の環境ではこれで直りました。