「ローカルではちゃんと表示されるのに」っていういつものやつです。

settings.pyにwhitenoiseの一行追加

settings.py


MIDDLEWARE = [
    'django.middleware.security.SecurityMiddleware',
    'django.contrib.sessions.middleware.SessionMiddleware',
    'django.middleware.common.CommonMiddleware',
    'django.middleware.csrf.CsrfViewMiddleware',
    'django.contrib.auth.middleware.AuthenticationMiddleware',
    'django.contrib.messages.middleware.MessageMiddleware',
    'django.middleware.clickjacking.XFrameOptionsMiddleware',
    'whitenoise.middleware.WhiteNoiseMiddleware',    # この行を追加
]

これで無事CSSも読み込まれます。

これやってもまだ表示されないようなら、wsgi.pyとかでwhitenoiseをimportしていないか確認しましょう。
もしimport していたらその行をコメントアウトすればいいらしいです。