結論

Secure Bootをオフにしてドライバ入れ直したら動きました。（2日潰しました...）

環境

自作PC：SSD２つ入れてて片方Windows、片方Ubuntu20.04
WiFi受信機：BUFFALO WI-U2-433DHP

こちらがStar数も多そうでした。

参考までにですが最初は有線LANも無かったのでひとまずiPhoneをUSBで繋いでテザリングで最低限のネット通信を行いました。(dkmsのインストールなど)