[2020/11/18 追記] 解消されました。
Android Studio 4.1.1にアップデートしたら、
ベクターアセットが表示されない問題が解消されていました。
https://androidstudio.googleblog.com/2020/11/android-studio-411-available.html
Android Studio4.1.0に更新したら…
ベクターアセットのマテリアルアイコンが表示されなくなりました。
解決方法
C:\Users\ユーザー名\AppData\Local\Android\Sdk\icons\material\materialicons
↑ここにマテリアルアイコンがすべて保存されているので、
使いたいアイコンのxmlを、プロジェクトのdrawableフォルダへ手動でコピーすることで解決しました。
スタックオーバーフローでも…
スタックオーバーフローでも同じことが起きて困っている人がいた。
https://stackoverflow.com/questions/64382564/how-i-fix-nothing-to-show-in-my-vector-asset-in-android-studio
アイコンが保存されている場所までのURLにスペースが入っているとダメかも、とのこと。
同じ現象で困っている人の助けになればと思います。