ACFS(ASM Cluster Filesystem) は Oracle ASM をファイルシステムとして使用可能にする仕組みです。

Oracle ACFSについて
https://docs.oracle.com/cd/F19136_01/ostmg/understand-acfs-concepts.html#GUID-579FDDA5-7D18-4A01-B3D6-906B6DB93851
：
Oracle ACFSは、すべてのカスタマ・ファイルをサポートする、スタンドアロン・サーバーおよびクラスタ全体の汎用ファイル・システムとして設計されています。
：

今回の記事では OCI BaseDB の EE-EP(Enterprise Edition - Extreme Performance) RAC に ACFS をマウントしてみますやで。
彡(^)(^)

1. 参考ドキュメント

以下のマニュアルを参照しています。ACFS のマウントには幾つかの方法がありますが acfsutilコマンドによるマウントを行います。

Oracle ACFSの管理の理解
https://docs.oracle.com/cd/F19136_01/ostmg/understand-acfs-admin.html#GUID-EC577A31-256E-4FD2-9E9F-749D78B378D0
・acfsutilコマンドで作成され、ノード・リストを指定するOracle ACFSリソースは、そのリストのノードすべてにマウントされます。

Oracle ACFSファイル・システムの作成
https://docs.oracle.com/cd/F19136_01/ostmg/steps-manage-acfs.html#GUID-FA9F9335-ADA4-48D1-B060-6F096E3BAE6C

2. Oracle ADVMボリュームの作成

BaseDB に opcユーザーでログインして、gridユーザーにスイッチします。asmcmdコマンドを起動します。

su - grid
asmcmd
lsdg

#結果
$ su - grid
$ asmcmd
ASMCMD> lsdg
State    Type    Rebal  Sector  Logical_Sector  Block       AU  Total_MB  Free_MB  Req_mir_free_MB  Usable_file_MB  Offline_disks  Voting_files  Name
MOUNTED  EXTERN  N         512             512   4096  4194304    262144   250256                0          250256              0             Y  DATA/
MOUNTED  EXTERN  N         512             512   4096  4194304    262144   245052                0          245052              0             N  RECO/

volcreateコマンドでOracle ADVMボリュームを作成します。+DATAディスクグループに 50GB ほど確保します。

volcreate -G data -s 50G volume1
volinfo -G data volume1

-- 結果
ASMCMD> volcreate -G data -s 50G volume1
ASMCMD> volinfo -G data volume1
Diskgroup Name: DATA

	 Volume Name: VOLUME1
	 Volume Device: /dev/asm/volume1-274
	 State: ENABLED
	 Size (MB): 51200
	 Resize Unit (MB): 64
	 Redundancy: UNPROT
	 Stripe Columns: 8
	 Stripe Width (K): 1024
	 Usage: 
	 Mountpath:

asmcmd を抜けて作成されたボリュームをlsコマンドで確認してみます。

$ ls -la /dev/asm/volume1-274 
brwxrwx--- 1 root asmadmin 251, 140290 Apr 30 11:04 /dev/asm/volume1-274

/dev配下のデバイスとして参照できます。

3. mkfs によるフォーマットと acfsutil によるマウント

mkfsユーティリティでデバイスをフォーマットします。

/sbin/mkfs -t acfs /dev/asm/volume1-274

#結果
$ /sbin/mkfs -t acfs /dev/asm/volume1-274
mkfs.acfs: version                   = 19.0.0.0.0
mkfs.acfs: on-disk version           = 46.0
mkfs.acfs: volume                    = /dev/asm/volume1-274
mkfs.acfs: volume size               = 53687091200  (  50.00 GB )
mkfs.acfs: Format complete.
$

gridユーザーを抜けてrootユーザーにスイッチします。acfsutil でフォーマットしたデバイスをマウントします。

sudo su -
/sbin/acfsutil registry -a /dev/asm/volume1-274 /acfs1

#結果
# /sbin/acfsutil registry -a /dev/asm/volume1-274 /acfs1
acfsutil registry: mount point /acfs1 successfully added to Oracle Registry
#

dfコマンドでマウントされているか確認します。

# df -k
Filesystem                     1K-blocks     Used Available Use% Mounted on
devtmpfs                        16239508        0  16239508   0% /dev
tmpfs                           16284060  1623140  14660920  10% /dev/shm
tmpfs                           16284060      952  16283108   1% /run
tmpfs                           16284060        0  16284060   0% /sys/fs/cgroup
/dev/mapper/vg00-root           10054932  3964256   5550004  42% /
tmpfs                           16284060      224  16283836   1% /tmp
/dev/mapper/vg00-opt            34438992 13798900  19134760  42% /opt
/dev/mapper/vg00-home             980396      180    911404   1% /home
/dev/sda2                         996780    97020    830948  11% /boot
/dev/mapper/vg00-var            10064220   927952   8637544  10% /var
/dev/sda1                         130798     5138    125660   4% /boot/efi
/dev/mapper/vg00-var_log         3981024    78504   3676424   3% /var/log
/dev/mapper/vg00-var_log_audit   1959784    21028   1817516   2% /var/log/audit
/dev/mapper/vg00-var_tmp          980396       68    911516   1% /var/tmp
/dev/sde                       205314024 26282420 168529460  14% /u01
tmpfs                            3256812        0   3256812   0% /run/user/102
/dev/asm/commonstore-274         5242880   834280   4408600  16% /opt/oracle/dcs/commonstore
tmpfs                            3256812        0   3256812   0% /run/user/101
tmpfs                            3256812        0   3256812   0% /run/user/1000
/dev/asm/volume1-274            52428800   666000  51762800   2% /acfs1 ★★★

4. ファイル書き込みと異なるノードからの確認

今回は RAC なので複数ノードで ACFS がマウントされています。

# 1号機の df の結果
[opc@aysoskbasedb19c1 ~]$ uname -a
Linux aysoskbasedb19c1 5.4.17-2136.326.6.el8uek.x86_64 #2 SMP Thu Nov 30 22:30:37 PST 2023 x86_64 x86_64 x86_64 GNU/Linux
[opc@aysoskbasedb19c1 ~]$ df -k /acfs1
Filesystem           1K-blocks   Used Available Use% Mounted on
/dev/asm/volume1-274  52428800 666000  51762800   2% /acfs1
[opc@aysoskbasedb19c1 ~]$

# 2号機の df の結果
[opc@aysoskbasedb19c2 ~]$ uname -a
Linux aysoskbasedb19c2 5.4.17-2136.326.6.el8uek.x86_64 #2 SMP Thu Nov 30 22:30:37 PST 2023 x86_64 x86_64 x86_64 GNU/Linux
[opc@aysoskbasedb19c2 ~]$ df -k /acfs1
Filesystem           1K-blocks   Used Available Use% Mounted on
/dev/asm/volume1-274  52428800 666000  51762800   2% /acfs1
[opc@aysoskbasedb19c2 ~]$

# crsctl のリソース稼働状況
[opc@aysoskbasedb19c2 ~]$ /u01/app/19.0.0.0/grid/bin/crsctl stat res ora.data.volume1.acfs -t
--------------------------------------------------------------------------------
Name           Target  State        Server                   State details
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.data.volume1.acfs
               ONLINE  ONLINE       aysoskbasedb19c1         mounted on /acfs1,ST
                                                             ABLE
               ONLINE  ONLINE       aysoskbasedb19c2         mounted on /acfs1,ST
                                                             ABLE
--------------------------------------------------------------------------------
[opc@aysoskbasedb19c2 ~]$

1号機でファイルを書いてみます。

[oracle@aysoskbasedb19c1 dump]$ pwd
/acfs1/dump
[oracle@aysoskbasedb19c1 dump]$ echo "Hello, ACFS!" > Hello.txt
[oracle@aysoskbasedb19c1 dump]$ ls -la
total 88
drwxr-xr-x 2 oracle oinstall 20480 Apr 30 11:55 .
drwxr-xr-x 5 root   root     32768 Apr 30 11:08 ..
-rw-r--r-- 1 oracle oinstall    13 Apr 30 11:55 Hello.txt
[oracle@aysoskbasedb19c1 dump]$ cat Hello.txt
Hello, ACFS!
[oracle@aysoskbasedb19c1 dump]$

書いたファイルを2号機で読んでみます。

[oracle@aysoskbasedb19c2 dump]$ pwd
/acfs1/dump
[oracle@aysoskbasedb19c2 dump]$ ls -la
total 88
drwxr-xr-x 2 oracle oinstall 20480 Apr 30 11:55 .
drwxr-xr-x 5 root   root     32768 Apr 30 11:08 ..
-rw-r--r-- 1 oracle oinstall    13 Apr 30 11:55 Hello.txt
[oracle@aysoskbasedb19c2 dump]$ cat Hello.txt
Hello, ACFS!
[oracle@aysoskbasedb19c2 dump]$

1号機で書かれたファイルを2号機で読み込めました彡(^)(^)

5. ACFS のクラスタ・リソースとしての定義確認

acfsutil で登録した ACFS は Oracle Clusterware のクラスタ・リソースとして登録されています。

# crsctl のリソース稼働状況
[opc@aysoskbasedb19c2 ~]$ /u01/app/19.0.0.0/grid/bin/crsctl stat res ora.data.volume1.acfs -t
--------------------------------------------------------------------------------
Name           Target  State        Server                   State details
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.data.volume1.acfs
               ONLINE  ONLINE       aysoskbasedb19c1         mounted on /acfs1,ST
                                                             ABLE
               ONLINE  ONLINE       aysoskbasedb19c2         mounted on /acfs1,ST
                                                             ABLE
--------------------------------------------------------------------------------
[opc@aysoskbasedb19c2 ~]$

-pオプション付きの crsctlコマンドでクラスタ・リソースの定義を確認してみます。

[grid@aysoskbasedb19c1 ~]$ crsctl stat res ora.data.volume1.acfs -p
NAME=ora.data.volume1.acfs
TYPE=ora.acfs.type
ACFS_INTERNAL_USE=1186418149
ACL=owner:root:rwx,pgrp:root:r-x,other::r--,user:grid:r-x
ACTIONS=
ACTION_SCRIPT=
ACTION_TIMEOUT=60
AGENT_FILENAME=%CRS_HOME%/bin/orarootagent%CRS_EXE_SUFFIX%
AUTO_START=always
AUX_VOLUMES=
CANONICAL_VOLUME_DEVICE=/dev/asm/volume1-274
CHECK_INTERVAL=15
CHECK_TIMEOUT=120
CLEAN_TIMEOUT=60
CSS_CRITICAL=no
DELETE_TIMEOUT=60
DESCRIPTION=CRS resource type for ASM Cluster File Systems
ENABLED=1
FS_DESCRIPTION=
FS_OPTIONS=
FS_TYPE=ACFS
GH_CREATED=0
IGNORE_TARGET_ON_FAILURE=yes
INSTANCE_FAILOVER=1
INTERMEDIATE_TIMEOUT=0
INTERNAL_MOUNTPOINT_PATH=/acfs1
LOAD=1
LOGGING_LEVEL=1
MODIFY_TIMEOUT=60
MOUNTPOINT_PATH=/acfs1
MOUNT_ACL=owner:root:rwx,pgrp:root:r-x,other::r-x
NLS_LANG=
OFFLINE_CHECK_INTERVAL=30
RESOURCE_GROUP=
RESTART_ATTEMPTS=5
RESTART_DELAY=0
SCRIPT_TIMEOUT=60
SERVER_CATEGORY=ora.hub.category
START_CONCURRENCY=0
START_DEPENDENCIES=hard(ora.DATA.VOLUME1.advm) pullup(ora.DATA.VOLUME1.advm,ora.asm)
START_TIMEOUT=500
STOP_CONCURRENCY=0
STOP_DEPENDENCIES=hard(intermediate:ora.DATA.VOLUME1.advm)
STOP_TIMEOUT=120
TARGET_DEFAULT=atleastone
TYPE_VERSION=3.3
UPTIME_THRESHOLD=1d
USER_WORKLOAD=no
USR_ORA_ENV=
VOLUME_DEVICE=/dev/asm/volume1-274
WORKLOAD_CPU=0
WORKLOAD_CPU_CAP=0
WORKLOAD_MEMORY_MAX=0
WORKLOAD_MEMORY_TARGET=0

[grid@aysoskbasedb19c1 ~]$

TYPE=ora.acfs.type のリソースとして登録されています。ADVMボリュームとの依存性が定義されています。

6. まとめ

OCI BaseDB に ACFS をマウントできました。OSファイル置き場として利用可能なので、皆さん活用して下さいね。
彡(^)(^)