grid – Oracle and Linux

11gR2修改主机名导致CRS-0184以及CRS-4000的错误

11月 19,2013 留下评论 grid, oracle 11g

我们通常都说，在部署Oracle数据库服务器前，要规划好主机名、IP地址等基础信息，一经确定，尤其是部署好Oracle数据库之后，就不要轻易修改主机名或者是IP地址等。而且我们也都知道这个理儿，但可是，可但是，在实际工作当中，你难免不会遇到这种情况。

除了自己前不久曾遭遇到的一则，在Windows Server 2008 R2 X64上跑的一套10.2.0.5.0配置有ASM单实例物理备库因修改主机名的故障。而今又遇到一则类似的故障场景：

一操作系统版本：CentOS release 5.6 (Final) X86_64平台

二 Oracle版本：Oracle 11gR2 11.2.0.1.0 64位配置ASM的单实例数据库

三故障现象：修改主机名并重启主机后，导致数据库不可用，准确的说是grid软件的CRS进程都不能启动。如下：

1 检查服务状态：

[shell]
wxwl_iop-> crs_stat -t
CRS-0184: Cannot communicate with the CRS daemon.

wxwl_iop-> [/shell]

2 发现ohasd守护进程都不存在：

[shell]
wxwl_iop-> ps -ef|grep has
root 4869 1 0 Nov14 ? 00:00:02 /bin/sh /etc/init.d/init.ohasd run
grid 27544 26907 0 09:58 pts/2 00:00:00 grep has
wxwl_iop->[/shell]

3 检查Oracle restart是否配置以及尝试手工启动Oracle Restart均报错：

[shell]
wxwl_iop-> crsctl config has
CRS-4014: Oracle High Availability Services autostart was not defined.
Failure at scls_scr_create with code 1
Internal Error Information:
Category: -1
Operation: has_ha_privs
Location: scrcreate5
Other: need ha priv
System Dependent Information: 0

CRS-4000: Command Config failed, or completed with errors.
wxwl_iop-> crsctl start has
Failure at scls_scr_create with code 1
Internal Error Information:
Category: -1
Operation: has_ha_privs
Location: scrcreate5
Other: need ha priv
System Dependent Information: 0

CRS-4000: Command Start failed, or completed with errors.
wxwl_iop-> [/shell]

4 在/etc/oracle/scls_scr路径下，看到只有之前的旧主机名下的Oracle Restart的配置信息，并没有关于新主机名的Oracle Restart的配置信息

[shell]
[root@wxwl_iop scls_scr]# ll
total 4
drwxr-xr-x 4 root oinstall 4096 Nov 7 16:42 localhost
[root@wxwl_iop scls_scr]# pwd
/etc/oracle/scls_scr
[/shell]

四故障原因：人为修改了数据库服务器主机名，并重启主机，导致Oracle Restart启动报错，进而ASM实例，监听、磁盘组以及数据库实例均无法正常启动。

五解决步骤：

1 root用户强制删除CRS相关的配置信息：

ACFS-9201: Not Supported
CRS-4013: This command is not supported in a single-node configuration.
CRS-4000: Command Stop failed, or completed with errors.
You must kill crs processes or reboot the system to properly
cleanup the processes started by Oracle clusterware
Use of uninitialized value in chdir at /usr/lib/perl5/5.8.8/File/Find.pm line 751.
Use of chdir(”) or chdir(undef) as chdir() is deprecated at /usr/lib/perl5/5.8.8/File/Find.pm line 751.
error: package cvuqdisk is not installed
Successfully deconfigured Oracle clusterware stack on this node
[root@wxwl_iop scls_scr]# [/shell]

2 root用户重新配置Oracle Restart：

[shell]
[root@wxwl_iop scls_scr]# /u01/app/11.2.0/grid/crs/install/roothas.pl
2013-11-15 10:02:36: Checking for super user privileges
2013-11-15 10:02:36: User has super user privileges
2013-11-15 10:02:36: Parsing the host name
Using configuration parameter file: /u01/app/11.2.0/grid/crs/install/crsconfig_params
LOCAL ADD MODE
Creating OCR keys for user ‘grid’, privgrp ‘oinstall’..
Operation successful.
CRS-4664: Node wxwl_iop successfully pinned.
Adding daemon to inittab
CRS-4123: Oracle High Availability Services has been started.
ohasd is starting
ADVM/ACFS is not supported on centos-release-5-6.el5.centos.1

wxwl_iop 2013/11/15 10:02:49 /u01/app/11.2.0/grid/cdata/wxwl_iop/backup_20131115_100249.olr
Successfully configured Oracle Grid Infrastructure for a Standalone Server
[root@wxwl_iop scls_scr]#[/shell]

重新配置Oracle Restart之后，在/etc/oracle/scls_scr路径下，看到之前的旧主机名下的Oracle Restart的配置信息自动消除，而出现新的关于新主机名的Oracle Restart的配置信息。

[shell]
[root@wxwl_iop scls_scr]# ll
total 4
drwxr-xr-x 4 root oinstall 4096 Nov 15 10:02 wxwl_iop
[root@wxwl_iop scls_scr]#
[/shell]

且此时，grid用户可顺利通过执行 crs_stat -t查看服务状态：

[shell]
wxwl_iop-> crs_stat -t
Name Type Target State Host
————————————————————
ora.cssd ora.cssd.type OFFLINE OFFLINE
ora.diskmon ora….on.type OFFLINE OFFLINE
wxwl_iop-> [/shell]

3 通过srvctl命令手工添加Listener、ASM、oracle instance到Oracle Restart管理

grid用户添加Listener、ASM服务到Oracle Restart

[shell]
wxwl_iop-> srvctl add listener
wxwl_iop-> crs_stat -t
Name Type Target State Host
————————————————————
ora….ER.lsnr ora….er.type OFFLINE OFFLINE
ora.cssd ora.cssd.type OFFLINE OFFLINE
ora.diskmon ora….on.type OFFLINE OFFLINE
wxwl_iop-> srvctl add asm -l listener -d data,fra
wxwl_iop-> crs_stat -t
Name Type Target State Host
————————————————————
ora….ER.lsnr ora….er.type OFFLINE OFFLINE
ora.asm ora.asm.type OFFLINE OFFLINE
ora.cssd ora.cssd.type OFFLINE OFFLINE
ora.diskmon ora….on.type OFFLINE OFFLINE
wxwl_iop-> [/shell]

oracle用户添加数据库到Oracle Restart
grid 用户添加出错：

[shell]
wxwl_iop-> srvctl add database -d iopdb -o /u01/app/oracle/product/11.2.0/db_1
PRCD-1025 : Failed to create database iopdb
PRKH-1014 : Current user grid is not the same as oracle owner oracle of oracle home /u01/app/oracle/product/11.2.0/db_1.
wxwl_iop->
[/shell]

需要以oracle用户添加：

[shell]
wxwl_iop-> srvctl add database -d normaldb -o /u01/app/oracle/product/11.2.0/db_1 -n normaldb -a ‘data,fra’
wxwl_iop->
[/shell]

最后，对于配置了Oracle Restart环境下的数据库，分别以grid用户通过srvctl命令来启动listener、ASM实例，以oracle用户通过srvctl命令来启动数据库。

启示：对于已经配置好Oracle数据库的服务器，真的不要轻易修改主机名或者IP地址，尤其是RAC环境或者是11gR2开始的配置有Oracle Restart的standalone Server环境。当然，在安装和配置数据库之前，务必要做好充足的前期规划。当然，如果非要修改的话，也要配合DBA一起来重新配置。

附：关于文章提及为什么要在/etc/oracle/scls_scr路径下，查看是否存在关于主机名相关的Oracle Restart配置信息，将在下一篇中分享O(∩_∩)O~

Grid软件安装过程中orainstRoot.sh和root.sh脚本到底做了什么？

11月 18,2013 留下评论 grid, oracle 11g

在Linux平台上，从Oracle 11gR2开始，不论是单实例的库，还是RAC库，如果需要用到ASM时，通常都需要单独安装Grid Infrastructure软件。而在Linux平台上以图形界面【OUI Oracle Universal Installer】安装Oracle 11gR2 Grid软件过程中，会提示以root用户执行orainstRoot.sh和root.sh脚本【如下图一：单实例安装，图二：RAC安装】。

图一：Linux平台安装单实例时，grid软件需要执行的脚本

图二：Linux平台安装RAC时，grid软件需要执行的脚本

那么这两个脚本分别做了什么，有什么作用呢？本文简单记录：

一 /u01/app/oraInventory/orainstRoot.sh脚本的作用

1 添加grid用户及oinstall组对Oracle Central Inventory 目录的读写权限；

Oracle Central Inventory 目录默认情况下，位于$ORACLE_BASE的上一级目录下，如下图三：

图三：Oracle Central Inventory的路径

2 删除其它用户组对该目录的读、写、执行权限；

[shell]11gOCM-> pwd
/u01/app
11gOCM> ls
total 20
drwxrwxr-x. 3 grid oinstall 4096 Oct 28 10:38 11.2.0
drwxr-xr-x 2 grid oinstall 4096 Oct 30 10:20 acfs
drwxrwxr-x. 8 grid oinstall 4096 Oct 28 10:38 grid
drwxrwxr-x. 8 oracle oinstall 4096 Nov 5 10:57 oracle
drwxrwx—. 6 grid oinstall 4096 Oct 10 11:09 oraInventory
11gOCM->[/shell]

3 创建/etc/oraInst.loc文件。

11gOCM->
cat /etc/oraInst.loc
inventory_loc=/u01/app/oraInventory
inst_group=oinstall
11gOCM->

二 /u01/app/11.2.0/grid/root.sh脚本的作用

1 cp grid用户的$ORACLE_HOME/bin下的oraenv、dbhome、coraenv可执行程序到/usr/local/bin路径下；

11gOCM-> pwd
/u01/app/11.2.0/grid/bin
11gOCM-> ll oraenv dbhome coraenv 
-rwxr-xr-x. 1 grid oinstall 5778 Jan  1  2000 coraenv
-rwxr-xr-x. 1 grid oinstall 2415 Jan  1  2000 dbhome
-rwxr-xr-x. 1 grid oinstall 6183 Jan  1  2000 oraenv
11gOCM-> ll /usr/local/bin/
total 232
-rwxr-xr-x. 1 grid root   5778 Oct 10 10:54 coraenv
-rwxr-xr-x. 1 grid root   2415 Oct 10 10:54 dbhome
-rwxr-xr-x. 1 grid root   6183 Oct 10 10:54 oraenv
-rwxr-xr-x  1 root root 214001 Oct 10 16:39 rlwrap
11gOCM->

2 创建/etc/oratab文件；

 
11gOCM-> cat /etc/oratab 
#Backup file is  /u01/app/11.2.0/grid/srvm/admin/oratab.bak.11gocm line added by Agent
#

# This file is used by ORACLE utilities.  It is created by root.sh
# and updated by either Database Configuration Assistant while creating
# a database or ASM Configuration Assistant while creating ASM instance.

# A colon, ':', is used as the field terminator.  A new line terminates
# the entry.  Lines beginning with a pound sign, '#', are comments.
#
# Entries are of the form:
#   $ORACLE_SID:$ORACLE_HOME:<N|Y>:
#
# The first and second fields are the system identifier and home
# directory of the database respectively.  The third filed indicates
# to the dbstart utility that the database should , "Y", or should not,
# "N", be brought up at system boot time.
#
# Multiple entries with the same $ORACLE_SID are not allowed.
#
#
+ASM:/u01/app/11.2.0/grid:N
orcl:/u01/app/oracle/product/11.2.0/db_1:N              # line added by Agent
11gOCM->

3 创建grid用户的OCR keys文件；

4 启动ohasd守护进程，并且将ohasd守护进程的启动文件写入到/etc/inittab文件中，以便于ohasd守护进程随着操作系统的启动而启动。如果是Oracle Enterprise Linux 6及以上版本的操作系统的话，则将该配置信息写入到/etc/init/oracle-ohasd.conf的独立配置文件中。

11gOCM-> cat /etc/init/oracle-ohasd.conf 
# Copyright (c) 2001, 2011, Oracle and/or its affiliates. All rights reserved. 
#
# Oracle OHASD startup

start on runlevel [35]
stop  on runlevel [!35]
respawn
exec /etc/init.d/init.ohasd run >/dev/null 2>&1

这是Oracle Enterprise Linux 6及以上版本的操作系统上的变化，在以前版本的操作系统下，由/etc/inittab文件来控制的条目均转移到/etc/init下单个文件来控制。

Oracle Grid Infrastructure包含哪些组件及其新特性？

10月 30,2013 留下评论 ASM, grid, oracle 11g

Oracle 从11gR2开始，推出Grid Infrastructure[我个人习惯称之为Grid软件]，那么Grid Infrastructure究竟有哪些优势，又包含哪些组件呢？

首先，Grid Infrastructure包含下述组件：

ASM：Automatic Storage Management；

ACFS：ASM Cluster File System；

ACFS snapshot；

Oracle Clusterware；

Oracle Restart。

其次，Grid Infrastructure 又有什么新特性呢？

探其优势，简单总结，从其包含的组件可知，如果在RAC环境下，无需单独安装clusterware软件，只需安装grid即可。如果在单实例环境下，数据库的存储如果想用ASM的话，那么就必须得先安装grid软件，并创建ASM磁盘组之后，方可安装oracle软件，在创建数据库的时候，存储才可以选择放在ASM磁盘组上。

另：对于非RAC架构下的Standalone 数据库，其Oracle Restart可以接管包括数据库服务、数据库实例、ASM实例、ASM磁盘组、数据库监听等组件的故障处理。举例来说，假设数据库在运行过程中，如果监听进程意外终止、或者数据库意外crash掉，那么Oracle Restart将接管并重启这些服务。

最后，11gR2的ASM同之前的ASM相比，又有什么增强呢？

如下图：

从上，看到在11gR2之前[包含11gR1及10g]，ASM位于操作系统层面之上，ASM为数据库访问存储设备提供驱动，然后为上层的数据库提供存储，最后数据库供最上层的应用系统访问。

而从11gR2开始，看到ASM依然位于OS层面之上，和ASM同层的多出来个ADVM[ASM Dynamic Volume Manager]。往上，位于同层的除了database之外，还有ACFS[ASM Cluster File System]和ASM为第三方文件系统提供支持。

补充，简单描述ASM disk,ASM diskgroup,ADVM,ACFS的关系？

一块儿物理硬盘或物理硬盘的一个分区或存储设备上的LUN或一个LVM均可以被创建成一块ASM disk,一块或多块儿ASM磁盘在逻辑上可以被用来创建成一个ASM磁盘组。

有了ASM diskgroup之后，可以通过图形界面工具[ASMCA、OEM]或者命令行工具[ASMCMD、SQL*PLUS]在磁盘组上创建出一个或多个ASM Dynamic Volume 。ADVM上的卷设备文件对于操作系统而言被作为块设备来识别，其位于/dev/asm/<volume name>-nnn。

使用mkfs命令就可以在ADVM上创建ACFS类型的文件系统了[命令如：mkfs -t acfs -n advm-volume-name /dev/asm/<volume name>-nnn]，最后类似于在操作系统上挂载其它设备一样，可以将/dev/asm/<volume name>-nnn直接挂在到操作系统上使用了。

Tag grid

一 操作系统版本：CentOS release 5.6 (Final) X86_64平台