bashに限らないけど。
下記ファイルをExplorerHere.batなどとしてどこかに置いておく。
@echo off
start .
これを実行すればいいわけで。たとえばCドライブのルートフォルダーに置いたなら、Cygwinなら
alias eh='/cygdrive/c/ExplorereHere.bat'
MSYSなら
alias eh='C:/ExplorereHere.bat'
ですね。
PATHが通っているフォルダーに置いておけば
alias eh='ExplorereHere.bat'
でいい。
冒頭に書いたとおり、別にbashに限らずどんなシェルからでも起動できます。もちろんCMDからも。なのでPATHが通っているパスに置いておけば便利かと思います。
ちなみに逆はエクスプローラーのコンテキストメニュー（右クリック）で「ターミナルで開く」、です。