それはある朝突然に

微妙に忙しくてひーこらしていた月曜のことでした。クライアントさんから「システムが開かない」という連絡が。これ、Oracle Cloud Infrastructure（以下OCI）上にRDBMS置いてるんですが、そこへの接続エラーだったんですね。

（画像出典：Pixabay）

当然ですが、先週までは問題なく使えていたシステムですので。原因を探るべくいろいろ確認してみました。

Webコンソールからは異常なし？

まず、OCIのWebコンソール（って言うのかしら）から、データベースノードの状態を確認してみました。ステータス見た限り起動はしてるっぽいです。ですが、SSH接続が出来ません。

手動で起動をかけてみる

このシステム、データベースノードを夜間止めてます。起動とかシャットダウンは、こちらのサーバ上にあるシェルスクリプトで、cronからキックしてます。ですので、そのシェルスクリプトを直打ちで再起動かけました。
（画像出典：Pixabay）
が、やっぱ、だめぽ。

Oracleサポート騒動記？

でまあ、Oracleサポートに連絡を試みたのですが。なんか、いろいろめんどくさくて使いづらい（のはあそこの伝統だと思ってる）というわけで。ここで大した解決策を見出すことはできませんでした。
（画像出典：Pixabay）
時間だけが行き過ぎる。

問題の整理

考えられそうな問題は

OCI本体のエラー（先日大規模なのが発生した）
通信ルールがどっかでリセットされた(TCPポート1521と23だったかがダメ）
あたりかなと。

とりあえず、先日大規模なのが発生したらしいのですが、OCIのトラブルの可能性を考えて、こちらのサイトからチェックを試みました。
あ、画像はトラブル発生時のものではありませんが、正常が確認されました。序に、コールドスタンバイ用の別データベスノードを起動、こちらは生きてましたので、OCIのトラブルという可能性は消えました。
Webコンソールから通信ルールもチェックしたんですが、これも勝手に変更とかされてはいませんでした。ついでに、SQL Developerからのアクセスを試みましたら。できません。
エラーコードちょっと変わったっぽいんですが。大勢に影響はなさそうです。ううう、なんなんだこれ。

こんなときにはノードの再起動

というわけで、Webコンソールは生きていることがわかりましたので。そこから、だめもとで手動でデータベースノードの再起動を実施しました。シャットダウンに、通常よりえらく時間がかかりましたが。再起動は無事完了。

（画像出典：Pixabay）
たぶん、Oracle本体に原因を確認しても「わかりません」で終わる気がします。おそらくなんですが、データベースノードの起動の最中に、なんらかの不幸な出来事が発生。うまく起動はできなかったのですが、Webコンソール上からは起動しているように見えた、って感じなんでしょうね。

まとめます

Oracle Cloud Infrastructureで、前日まで稼働できていたシステムに「ORA-12170」でアクセスできなくなったときは
- 何はなくともノードの再起動
- それでダメなら致命的な問題の可能性
（画像出典：Pixabay）
身も蓋もありませんね。