- SPFILEに不正な値が設定されてインスタンスが起動しなくなったときの復旧手順
- DBCSのSPFILEはASM管理領域にあり
- srvctlを利用したデータベース構成の変更
はじめに
Oracle Database Cloud Service (DBCS) において、本番環境ではストレージ管理ソフトウェアに「Oracle Grid Infrastructure」を選択されることが推奨されています。Oracle Grid Infrastructureを利用して作成されたDBシステムでは、ディスク領域管理にASM (Automatic Storage Management) が使われ、Oracle Databaseの初期化パラメータを格納するサーバ・パラメータ・ファイル (SPFILE) もASM管理領域に配置されています。
本記事では。人為的なミス等によってSPFILEの初期化パラメータに不正な値が書き込まれ、Oracle Databaseインスタンスが起動しなくなった障害を想定し、SPFILEの復旧手順について記します。
検証環境
- DBシステム・バージョン: 19.14.0.0.0
- Oデータベース・バージョン: 19.14.0.0.0
- Oracle Databaseソフトウェア・エディション: Standard Edition
- ストレージ管理ソフトウェア: Oracle Grid Infrastructure
障害発生状況の再現
アーカイブ・ログの格納先に誤ったディレクトリ・パスを指定してしまいORA-16032が発生した状況を再現したいと思います。
作成済のDBCSインスタンスにopcユーザーでSSHでログインし、oracleユーザーに変更して作業を行います。
$ sudo su - oracle
SQLPlusを起動して、まずはLOG_ARCHIVE_DEST_1のデフォルト値を確認しておきます。
$ sqlplus / as sysdba
SQL*Plus: Release 19.0.0.0.0 - Production on Fri Apr 15 14:57:53 2022
Version 19.14.0.0.0
Copyright (c) 1982, 2021, Oracle. All rights reserved.
Connected to:
Oracle Database 19c Standard Edition 2 Release 19.0.0.0.0 - Production
Version 19.14.0.0.0
SQL> set pages 10
SQL> set line 100
SQL> column dest_id format "99"
SQL> column dest_name format a30
SQL> column destination format a60
SQL> select dest_id,dest_name,destination from v$archive_dest where dest_id=1 or dest_id=2;
DEST_ID DEST_NAME DESTINATION
------- ------------------------------ ------------------------------------------------------------
1 LOG_ARCHIVE_DEST_1 USE_DB_RECOVERY_FILE_DEST
2 LOG_ARCHIVE_DEST_2
SQL>
alter systemコマンドでlog_archive_dest_1を不正な値に書き換えます。ここではscopeにspfileを指定しているため、即時に設定は反映されないです。
SQL> alter system set log_archive_dest_1='location=/u03/' scope=spfile;
System altered.
SQL> select dest_id,dest_name,destination from v$archive_dest where dest_id=1 or dest_id=2;
DEST_ID DEST_NAME DESTINATION
------- ------------------------------ ------------------------------------------------------------
1 LOG_ARCHIVE_DEST_1 USE_DB_RECOVERY_FILE_DEST
2 LOG_ARCHIVE_DEST_2
SQL>
Oracleを再起動してみましょう。
SQL> shutdown immediate;
Database closed.
Database dismounted.
ORACLE instance shut down.
SQL> startup
ORA-16032: parameter LOG_ARCHIVE_DEST_1 destination string cannot be translated
ORA-07286: sksagdi: cannot obtain device information.
Linux-x86_64 Error: 2: No such file or directory
SQL> startup nomount
ORA-16032: parameter LOG_ARCHIVE_DEST_1 destination string cannot be translated
ORA-07286: sksagdi: cannot obtain device information.
Linux-x86_64 Error: 2: No such file or directory
SQL>
ORA-16032が発生してNOMOUNTでも起動しない状態になりました。この状態から復旧していきたいと思います。
復旧作業
OCR情報の確認
作業で利用するOCR情報を確認しておきます。
まず一意のデータベース名を取得します。
$ srvctl config database
DB0318_nrt1pz
取得された一意のデータベース名を利用してOCRに登録されている情報を確認しておきます。
$ srvctl config database -d DB0318_nrt1pz -a
Database unique name: DB0318_nrt1pz
Database name: DB0318
Oracle home: /u01/app/oracle/product/19.0.0.0/dbhome_1
Oracle user: oracle
Spfile: +DATA/DB0318_NRT1PZ/PARAMETERFILE/spfile.267.1099660635
Password file:
（省略）
データベース名や復旧したいSPFILEが格納されたASM内のディレクトリを確認できました。
仮のPFILEを利用してインスタンス起動
Oracle Databaseのインスタンを起動できるようにするために仮のPFILEを作成します。db_nameにはデータベース名（一意のデータベースではない）を設定します。
$ cat $ORACLE_HOME/dbs/init_temp.ora
db_name=DB0318
large_pool_size=100m
shared_pool_size=400m
db_cache_size=100m
SQLPlusから、仮のPFILEを利用してNOMOUNTでOracleの起動を試みます。
$ sqlplus / as sysdba
SQL*Plus: Release 19.0.0.0.0 - Production on Fri Apr 15 17:25:16 2022
Version 19.14.0.0.0
Copyright (c) 1982, 2021, Oracle. All rights reserved.
Connected to an idle instance.
SQL> startup nomount pfile='$ORACLE_HOME/dbs/init_temp.ora';
ORACLE instance started.
Total System Global Area 650116224 bytes
Fixed Size 8899712 bytes
Variable Size 528482304 bytes
Database Buffers 104857600 bytes
Redo Buffers 7876608 bytes
SQL>
仮のPFILEを利用してNOMOUNT状態でOracleインスタンスを起動できました。
ASM内のSPFILEからPFILE作成し、問題箇所を修正
事前に確認しておいたSPFILEが格納されたASM内のディレクトリ・パスを利用してオリジナルのSPFILEよりPFILEを作成します。作成後、仮のOracleインスタンスを停止しておきます。
SQL> CREATE PFILE = '$ORACLE_HOME/dbs/init_from_sp.ora' FROM SPFILE='+DATA/DB0318_NRT1PZ/PARAMETERFILE/spfile.267.1099660635';
File created.
SQL> shutdown immediate;
ORA-01507: database not mounted
ORACLE instance shut down.
SQL>
SPFILEより作成したPFILEの問題箇所を修正します。
今回のケースですと、下記の行を、
*.log_archive_dest_1='location=/u03/'
元の設定値に戻すために削除します。
SPFILE再作成
修正したPFILEからインスタンス起動し、SPFILEの再作成を行います。
$ sqlplus / as sysdba
SQL*Plus: Release 19.0.0.0.0 - Production on Fri Apr 15 17:55:31 2022
Version 19.14.0.0.0
Copyright (c) 1982, 2021, Oracle. All rights reserved.
Connected to an idle instance.
SQL> startup nomount pfile='$ORACLE_HOME/dbs/init_from_sp.ora';
ORACLE instance started.
Total System Global Area 1.4496E+10 bytes
Fixed Size 9151688 bytes
Variable Size 1207959552 bytes
Database Buffers 1.3254E+10 bytes
Redo Buffers 24399872 bytes
SQL> create spfile from pfile='$ORACLE_HOME/dbs/init_from_sp.ora';
File created.
SQL> shutdown immediate
ORA-01507: database not mounted
ORACLE instance shut down.
SQL>
ASM管理領域内に作成されたSPFILEの確認
opcユーザーよりgridユーザーに切り替えてasmcmdを利用して確認します。
$ sudo su - grid
$ asmcmd -p
ASMCMD [+] > ls -l +DATA/DB0318_NRT1PZ/PARAMETERFILE/
Type Redund Striped Time Sys Name
PARAMETERFILE UNPROT COARSE APR 15 17:00:00 Y spfile.267.1099660635
PARAMETERFILE UNPROT COARSE APR 15 17:00:00 Y spfile.271.1102096597
ASMCMD [+] >
新しくspfile.271.1102096597が作成されていることが確認できます。
OCR内のSPFILE情報変更
再度oracleユーザーでログインし、OCRに登録されているSPFILEの情報を変更します。
$ sudo su - oracle
$ srvctl modify database -d DB0318_nrt1pz -p '+DATA/DB0318_NRT1PZ/PARAMETERFILE/spfile.271.1102096597'
OCR情報を確認して新しく作成したspfile.271.1102096597が登録されていることを確認します。
$ srvctl config database -d DB0318_nrt1pz -a
Database unique name: DB0318_nrt1pz
Database name: DB0318
Oracle home: /u01/app/oracle/product/19.0.0.0/dbhome_1
Oracle user: oracle
Spfile: +DATA/DB0318_NRT1PZ/PARAMETERFILE/spfile.271.1102096597
Password file:
(省略)
不要になったPFILEを削除します。
$ rm $ORACLE_HOME/dbs/init_from_sp.ora
$ rm $ORACLE_HOME/dbs/init_temp.ora
新しいSPFILEよりOracleインスタンス起動、SPFILE確認
最後に新しいSPFILEでOracleインスタンスが起動し、データベースをOpen出来ることを確認します。
$ sqlplus / as sysdba
SQL*Plus: Release 19.0.0.0.0 - Production on Fri Apr 15 18:18:34 2022
Version 19.14.0.0.0
Copyright (c) 1982, 2021, Oracle. All rights reserved.
Connected to an idle instance.
SQL> startup
ORACLE instance started.
Total System Global Area 1.4496E+10 bytes
Fixed Size 9151688 bytes
Variable Size 1207959552 bytes
Database Buffers 1.3254E+10 bytes
Redo Buffers 24399872 bytes
Database mounted.
Database opened.
SQL> set pages 10
SQL> set line 100
SQL> SHOW PARAMETER SPFILE;
NAME TYPE VALUE
------------------------------------ ----------- ------------------------------
spfile string +DATA/DB0318_NRT1PZ/PARAMETERF
ILE/spfile.271.1102096597
SQL>
新しいspfile.271.1102096597を利用してデータベースをOpenできたことが確認できました。最後にsrvctlを利用してOracleを再起動しておきます。
$ srvctl stop database -db DB0318_nrt1pz -stopoption immediate -verbose
$ srvctl start database -db DB0318_nrt1pz -verbose
$ srvctl status database -db DB0318_nrt1pz
Instance DB0318 is running on node dbcs
おつかれさまでした。以上となります。