最近准备使用Oracle ACFS在RAC环境下搭建OGG-HA,于是在RedHat6.5 64位系统上搭建了一套Oracle11.2.0.4.0 RAC,发现ACFS无法使用。之后查找大量资料,发现11G ACFS并不支持RedHat6.5,11.2.0.4.0只支持到RedHat6.3。接下来介绍一下OracleACFS Support on Linux的信息。

不支持ACFS的描述

[grid@redhat6.5 ~]$cat /etc/issue|sed –n ‘1p’
Red Hat Enterprise Linux Server release 6.5(Santiago)
[grid@redhat6.5 ~]$ lsmod | grep acfs                 #不支持的OS上
 
[grid@redhat6.2 ~]$cat /etc/issue|sed –n ‘1p’
Red Hat Enterprise Linux Server release 6.2(Santiago)
[grid@redhat6.2 ~]$lsmod| grep acfs                    #支持的OS上
oracleacfs          1670360  0
oracleoks             321904  2 oracleacfs,oracleadvm
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
 
 

从上可以看到对于不支持ACFS的OS Kernel模块上是没有ACFS相关信息的。接下来我们看看Cluster服务上的ACFS相关的服务

[grid@redhat6.5 ~]$ crs_stat -t -vora.registry.acfs           #不支持的OS上
CRS-0210: Could not find resource ‘ora.registry.acfs’.
 
[grid@redhat6.2 ~]$ crs_stat -t -vora.registry.acfs            #支持的OS上
Name          Type     R/RA  F/FT   Target    State    Host         
--------------------------------------------------------------------------------------- 
ora....ry.acfs    ora....fs.type 0/5    0/  ONLINE   ONLINE    note1  
[grid@redhat6.2 ~]$crsctl status resora.drivers.acfs –init        #支持的OS上
NAME=ora.drivers.acfs
TYPE=ora.drivers.acfs.type
TARGET=ONLINE
STATE=ONLINE on note1
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
 
 

在安裝Grid Infrastructure执行root.sh脚本的时候创建ACFS注册表资源(ora.registry.acfs)。此过程会初始化集群内节点的ACFS加载注册表,若初始化成功,ora.registry.acfs资源状态为ONLINE,否则初始化失败。对于不支持的OS都会初始化失败。可以通过以下方法验证:

[grid@redhat6.2 ~]$ acfsdriverstate -orahome$ORACLE_HOME supported
ACFS-9200: Supported
 
[grid@redhat6.5 ~]$ acfsdriverstate-orahome $ORACLE_HOME supported
ACFS-9459: ADVM/ACFS is not supported on this OSversion: ’unknown’
ACFS-9201:Not Supported
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
 
 

acfsdriverstate是一个shell脚本,通过调用$ORACLE_HOME/lib/acfstoolsdriver.sh脚本,之后由acfstoolsdriver.sh调用$ORACLE_HOME/lib/osds-*.pm脚本进行验证。其中osds-acfslib.pm的perl脚本就是用于验证支持的OSPlatforms及对应的版本。接下来我们来看看这个脚本(由于本人对perl不了解,也只是能看懂一点)

# Testing for "oraclelinux_release", etcprevents us from dropping
# into the code below from other RH based distroslike CentOS, for example.
if ((defined($release)) &&               #Redhat or OEL if defined
     (($release =~ /^redhat-release/) ||     # straight RH
      ($release =~ /^enterprise-release/) ||   # Oracle Enterprise Linux
      ($release =~ /^oraclelinux-release/)))    # Oracle Linux
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
 
 

这里提到基于RedHat的发行版,如CentOS,Oracle Linux等都是基于RedHat开源源码编译的OS是支持ACFS的,于是就有大神此基础上对脚本添加了对CentOS的支持如下:

if ((defined($release)) &&                #Redhat or OEL if defined
     (($release =~ /^redhat-release/) ||       # straight RH
       ($release=~ /^enterprise-release/) ||   # Oracle Enterprise Linux
       ($release =~ /^centos-release/)||      #Centos Linux
      ($release =~ /^oraclelinux-release/)))   # Oracle Linux
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
 
 

看到这里会不会有朋友灵感爆发,尝试去修改osds-acfslib.pm里支持内核版本的相关信息呢?对的,笔者就尝试过,但对于笔者这种菜鸟来说,肯定是以失败告终的。接下来再进一步分析失败的原因:

[root@ redhat6.2 ~]#/u/app/11.2.0/grid/bin/acfsroot version_check   #支持的OS上
ACFS-9316: Valid ADVM/ACFS distribution mediadetected at: '
/u/app/11.2.0/grid/install/usm/EL6/x86_64/2.6.32-220/2.6.32-220.el6-x86_64/bin'
 
[root@ redhat6.5 ~]#/u/app/11.2.0/grid/bin/acfsroot version_check    #不支持的OS上
ACFS-9459: ADVM/ACFS is not supported on this OSversion: ’unknown’
ACFS-9319:Unknown OS kernel version ’26.32-431.el6.x86_64’detected
ACFS-9320:Missing file: ’oracleoks.ko’
ACFS-9320:Missing file: ’oracleacfs.ko’
ACFS-9317: No ADVM/ACFS distribution media detectedat location: '
/u/app/11.2.0/grid/install/usm'
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
 
 

到这里原因应该很清楚了,/u/app/11.2.0/grid/install/usm目录下会有相应的内核支持目录,这是安装GridInfrastructure时建立的,详情请查看grep “acfs”/u/app/oraInventory/logs/installActions*.log的相关信息,对于不支持的OS Platforms及内核版本是不会建立的,里面包含了ACFS驱动模块(oracleoks.ko,oracleadvm.ko oracleacfs.ko)。因此我们可以通过/u/app/11.2.0/grid/install/usm目录查看ACFS支持的Linux操作系统不同的内核类型(这里我列举2个Oracle版本的):

11.2.0.3.0版本:

/u/app/11.2.0/grid/install/usm目录下有(cmds,EL5,EL6,SLES10 ,SLES11)五个子目录

[root@ redhat6.2 usm]# tree -L 3 EL5 EL6
EL5
|-- i386
|   `--2.6.18-8
|       |--2.6.18-8.el5-i686
|       |--2.6.18-8.el5PAE-i686
|       `--2.6.18-8.el5xen-i686
`-- x86_64
    |--2.6.18-8
    |   |-- 2.6.18-8.el5-x86_64
    |   `-- 2.6.18-8.el5xen-x86_64
    |--2.6.32-100
    |   `-- 2.6.32-100-x86_64
    `--2.6.32-200
        `--2.6.32-200-x86_64
EL6
`-- x86_64
    |--2.6.32-100
    |   `-- 2.6.32-100-x86_64
    |--2.6.32-200
    |   `-- 2.6.32-200-x86_64
    `--2.6.32-71
        `--2.6.32-71.el6-x86_64
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
 
 

 11.2.0.4.0版本:

/u/app/11.2.0/grid/install/usm目录下有(cmds,Novell,Oracle)三个子目录

[root@note1 usm]# tree -L 3 Oracle Novell
Oracle
├── EL5
│   └── x86_64
│      └── 2.6.18-8
├── EL5UEK
│   └── x86_64
│      ├── 2.6.32-100
│      ├── 2.6.32-200
│      ├── 2.6.32-300
│      ├── 2.6.32-400
│      ├── 2.6.39-100
│      ├── 2.6.39-200
│      ├── 2.6.39-300
│      └── 2.6.39-400
├── EL6
│   └── x86_64
│      ├── 2.6.32-220
│      ├── 2.6.32-279 #RedHat 6.3
│      └── 2.6.32-71
└── EL6UEK
    └──x86_64
        ├──2.6.32-100
        ├──2.6.32-200
        ├──2.6.32-300
        ├──2.6.32-400
        ├──2.6.39-100
        ├──2.6.39-200
        ├──2.6.39-300
        └──2.6.39-400
Novell
├── SLES10
│   └── x86_64
│      └── 2.6.16.21-0.8
└── SLES11
    └──x86_64
        ├──2.6.27.19-5
        ├──2.6.32.12-0.7
        ├──3.0.13-0.27
        └──3.0.61-0.9
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
  • 31.
  • 32.
  • 33.
  • 34.
  • 35.
  • 36.
  • 37.
  • 38.
  • 39.
  • 40.
 
 

 然后通过命令uname –r (RedHat 6)、uname –r –i (RedHat5)确认OS是否支持ACFS。

对于以上总结:

1、若需要使用ACFS时,先规划选取可用该功能OS,避免重装,可以使用CentOS,但内核版本是必须满足支持ACFS的内核。

2、也可以使用UEK(UnbreakableEnterprise Kernel)进行更换内核。

3、要使用ACFS需要将asm的兼容性设置为11.2(alterdiskgroup data set attribute 'COMPATIBLE.ASM'='11.2';)

请参考:

http://docs.oracle.com/cd/E11882_01/install.112/e47689/oraclerestart.htm

http://docs.oracle.com/database/121/CWLIN/storage.htm

https://support.oracle.com/CSP/main/article?cmd=show&type=NOT&id=1369107.1