意外とめんどくさかったのでメモ。もちろんブラウザの設定からクッキーを消すこともできるけどそれもブラウザごとに違うし色々めんどくさいのでRails側でやる方法。
まず 「Session 消し方 Rails」とかで検索すると出てくるので
rake db:sessions:clear とか rake tmp:sessions:clear だけど、これじゃ消えない。
エラー画面で reset_session とか session[:user_id] = nil とかもしてみたけど、どうも反映はされないっぽい。
解決策
今見てるViewの controller の該当methodに session.clearって書く。これでOK、ちゃんと消えた。