エラー内容

S3のURLをhttpsにしてアクセスしたら、NET::ERR_CERT_COMMON_NAME_INVALIDが発生しました。

原因

アクセスしていた時のURLがhttpsの仮想ホスト形式で、かつドットが含まれるバケット名を使用していたため。

パス形式に変更しました。

仮想ホスト形式（リージョン指定なし）
http://[バケット名].s3.amazonaws.com

パス形式（東京リージョンの場合）
http://s3-ap-northeast-1.amazonaws.com/[バケット名]

仮想ホスト形式はバケットがどのリージョンにあっても同じ形式でアクセス出来ますが、パス方式ではリージョン指定が必須です（バージニア以外）

ドットを含むようなバケット名はAWSも推奨していないので、使わないのが一番です。
https://docs.aws.amazon.com/ja_jp/AmazonS3/latest/userguide/bucketnamingrules.html

2020年9月30日以前に作成済みのS3バケットはパス形式廃止対象から除外されているようです。
いずれにしろ今後は仮想ホスト形式を使用するようにするのが良いと思います。

廃止の件などはクラメソさんの記事がわかりやすかったです。
https://dev.classmethod.jp/articles/s3-path-deprecation-plan/