リモート上のタグの指しているコミットIDは、git ls-remote
コマンドで確認できます。
git ls-remote --tags origin mytag^{}
originというリモートリポジトリにmytagというタグがプッシュされている前提です。
タグの末尾に ^{} を付ける必要があるので注意。
実行結果は以下のとおり。
$ git ls-remote --tags origin mytag^{}
$ <コミットのハッシュ> refs/tags/mytag^{}