Oracle RAC + ASM + Grid安装

（一）环境准备

主机操作系统	windows10
虚拟机平台	vmware workstation 12
虚拟机操作系统	redhat 5.5 x86(32位) ：Linux.5.5.for.x86.rhel-server-5.5-i386-dvd.iso
grid版本	linux_11gR2_grid.zip （32位）
oracle版本	linux_11gR2_database_1of2 和 linux_11gR2_database_2of2（32位）
共享存储	ASM

（二）操作系统安装

（2.1）操作系统安装

操作系统安装相对而言较简单，不做详述。系统的配置信息大致如下，后面还会根据需要添加和删除设备

（2.2）安装VM Tools

为了方便在主机与虚拟机之间进行文件拖拽、复制粘贴、使用共享文件夹等功能，我们需要安装VM Tools,VM Tools的安装包已经集合在了vmware workstation里面了。下面一步一步安装VM Tools。

step 1：虚拟机-> 安装Vmware Tools

step 2： mount查看是否装载 VMware Tools 虚拟 CD-ROM 映像，如果有红色部分，说明已经将VM tools安装包mount在了/media目录下

step 3：转到安装目录/tmp，解压VM tools安装包

step 4：开始安装VM Tools

[root@Redhat tmp]# cd vmware-tools-distrib
[root@Redhat vmware-tools-distrib]#./vmware-install.pl

遇到选项，直接回车即可。

step 5：安装结束，重启虚拟机

[root@rac1 ~]# reboot

step6：测试VM Tools安装是否成功

从主机拖到一个文档到虚拟机，如果拖动成功，说明VM Tools已经安装成功

（三）操作系统配置

（3.1）网络配置

（3.1.1）主机名配置

①节点1：

[root@rac1 ~]# vim /etc/sysconfig/network

NETWORKING=yes
NETWORKING_IPV6=no
HOSTNAME=rac1

②节点2：

[root@rac2 ~]# vim /etc/sysconfig/network
 
NETWORKING=yes
NETWORKING_IPV6=no
HOSTNAME=rac2

（3.1.2）IP配置

为了使用静态IP配置数据库，我又为每台虚拟机新增加了一块网卡，将其配置成only-host模式，新增网卡方式如下：

step1：添加网络

点击vmware的“编辑”-> “虚拟网络编辑器”-> “更改设置”-> “添加网络”，按下图选择，保存

step2：在两台虚拟机上添加网卡

选择虚拟机，“设置”->“添加”->“网络适配器”，选择“自定义”，这个自定义是我们上一步定义的网络，结果如下：

step3：根据网络设置，我们规划IP地址如下：

接下来就是配置IP地址了，对于节点1（主机名：rac1），我们：

①配置eth1

--或删除BOOTPROTO

--不要修改硬件地址

--设置网卡为开机启动

--增加IP和MASK

[root@rac1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1

#修改下面红色部分

# Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
DEVICE=eth1
# BOOTPROTO

dhcp
HWADDR=:0C::9C:DF:6A
ONBOOT

=yes IPADDR=192.168..10

NETMASK

=255.255.5.0

②配置eth2

[root@rac1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth2
# 修改红色部分
 
# Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
DEVICE=eth2
# BOOTPROTO

dhcp
ONBOOT

yes
HWADDR

=:0C:

:6G:8C:5F

IPADDR

=192.168.

15.10
NETMASK

=255.255..0

对于节点2（主机名：rac2），我们参照节点1即可：

①配置eth1

[root@rac2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1
 
# Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
DEVICE=eth1
# BOOTPROTO

=dhcp ONBOOT=

yes
HWADDR=:0c::b0:4e:b6
IPADDR

192.168

19.11
NETMASK

=255.255.

255.0

②配置eth2

[root@rac2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth2
 
# Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
DEVICE=eth2
# BOOTPROTO

dhcp
ONBOOT

yes
HWADDR=:0c::b0:4e:c0
IPADDR

=192.168.

15.11
NETMASK

=255.255.

255.0

（3.1.3）hosts文件配置

在2个节点上配置hosts文件，以节点1为例

[root@rac1 ~]# vim /etc/hosts
# 在文件的最后面加上
 
#eth1 public
192.168.19.10 rac1
192.168.19.11 rac2
#virtual
192.168.19.12 rac1-vip
192.168.19.13 rac2-vip
#eth2 private
192.168.15.10 rac1-priv
192.168.15.11 rac2-priv
#scan
192.168.19.14 rac-scan

配置完成后，重启网卡

[root@rac1 ~]# service network restart

重启网卡时，遇到了一个小错误，提示：

Device eth2 has different MAC address than expected, ignoring.
[FAILED]

看了其他人的文章，发现是网卡配置文件里面的MAC地址与实际虚拟机的MAC地址不一样，解决办法如下：

step1：查看本机实际MAC地址（红色部分）

[root@rac1 ~]# ifconfig eth2
eth2      Link encap:Ethernet  HWaddr :0C::9C:DF:7E
          inet addr:192.168.15.10  Bcast:192.168.15.255  Mask:255.255.255.0
          inet6 addr: fe80::20c:29ff:fe9c:df7e/ Scope:Link
          UP BROADCAST RUNNING MULTICAST  MTU:  Metric:
          RX packets: errors: dropped: overruns: frame:
          TX packets: errors: dropped: overruns: carrier:
          collisions: txqueuelen:
          RX bytes: (15.1 MiB)  TX bytes: (10.3 MiB)
          Interrupt: Base address:0x2824

step2：查看我们配置的MAC地址

[root@rac1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth2
# 修改红色部分
 
# Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
DEVICE=eth2
# BOOTPROTO=dhcp
ONBOOT=yes
HWADDR=:0C::6G:8C:5F
IPADDR=192.168.15.10
NETMASK=255.255.255.0

发现我们配置的MAC地址与实际的MAC地址不一样，修改网卡step2里面的MAC地址，重启网卡。

（3.1.4）测试网络

测试主机与虚拟机、虚拟机与虚拟机之间通讯是否正常

①在主机上执行

ping 192.168.15.10
ping 192.168.15.11
ping 192.168.19.10
ping 192.168.19.11

②在节点1上执行，其中192.168.15.1与192.168.19.1均为主机ip

ping 192.168.15.1
ping 192.168.15.11
ping 192.168.19.1
ping 192.168.19.11

③在节点2执行

ping 192.168.15.1
ping 192.168.15.10
ping 192.168.19.1
ping 192.168.19.10

如果都能够ping通，说明网络配置正确。

（3.2）共享存储配置

(3.2.1)存储规划

磁盘功能	个数	每个大小（GB）
OCR	3	1
DATA	3	10
ARCHIVE	1	10

（3.2.1）创建共享存储

step1：以管理员方式打开DOS窗口，到vmware workstation安装目录下，执行以下命令创建共享磁盘：

vmware-vdiskmanager.exe -c -s 1000MB -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk1.vmdk"
vmware-vdiskmanager.exe -c -s 1000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk2.vmdk"
vmware-vdiskmanager.exe -c -s 1000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk3.vmdk"
vmware-vdiskmanager.exe -c -s 10000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk1.vmdk"
vmware-vdiskmanager.exe -c -s 10000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk2.vmdk"
vmware-vdiskmanager.exe -c -s 10000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk3.vmdk"
vmware-vdiskmanager.exe -c -s 10000Mb -a lsilogic -t  "F:\vmwareVirtueMachine\RAC\ShareDisk\archdisk1.vmdk"

（3）修改2个虚拟机的vmx配置文件，在虚拟机的安装目录下的.vmx文件最后加上以下信息：

scsi1.present = "TRUE"
scsi1.virtualDev = "lsilogic"
scsi1.sharedBus = "virtual"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk1.vmdk"
scsi1:.deviceType = "plainDisk"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk2.vmdk"
scsi1:.deviceType = "plainDisk" 
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\votingdisk3.vmdk"
scsi1:.deviceType = "plainDisk"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk1.vmdk"
scsi1:.deviceType = "plainDisk"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk2.vmdk"
scsi1:.deviceType = "plainDisk"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\datadisk3.vmdk"
scsi1:.deviceType = "plainDisk"
 
scsi1:.present = "TRUE"
scsi1:.mode = "independent-persistent"
scsi1:.filename = "F:\vmwareVirtueMachine\RAC\ShareDisk\archdisk1.vmdk"
scsi1:.deviceType = "plainDisk"
 
disk.locking = "false"
diskLib.dataCacheMaxSize = ""
diskLib.dataCacheMaxReadAheadSize = ""
diskLib.DataCacheMinReadAheadSize = ""
diskLib.dataCachePageSize = ""
diskLib.maxUnsyncedWrites = ""

重启虚拟机，2个节点都重启

[root@rac1 ~]# reboot

最终我们看到的虚拟机的硬件配置大致是这样的

（四）Oracle & Grid预配置

（4.1）创建用户

在2个节点上创建用户及安装目录：

/usr/sbin/groupadd -g  oinstall
/usr/sbin/groupadd -g  asmadmin
/usr/sbin/groupadd -g  asmdba
/usr/sbin/groupadd -g  asmoper
/usr/sbin/groupadd -g  dba
/usr/sbin/groupadd -g  oper
useradd -u  -g oinstall -G asmadmin,asmdba,asmoper,oper,dba grid
useradd -u  -g oinstall -G dba,asmdba,oper oracle
mkdir -p /u01/app/11.2./grid
mkdir -p /u01/app/grid
mkdir /u01/app/oracle
chown -R grid:oinstall /u01
chown oracle:oinstall /u01/app/oracle
chmod -R  /u01/

安装目录结构如下：
[root@rac1 u01]# tree
.
`-- app
    |-- 11.2.0
    |   `-- grid
    |-- grid
    `—oracle

（4.2）配置环境变量

（4.2.1）配置ORACLE的环境变量，ORACLE_SID需根据主机来填写

[oracle@rac1 ~]$ cd
[oracle@rac1 ~]$ vi .bash_profile

#添加下面的部分

export TMP=/tmp
export TMPDIR=$TMP
export ORACLE_SID=rac1

# 如果是节点2，则： export ORACLE_SID=

rac2
export ORACLE_BASE=/u01/app/oracle
export ORACLE_HOME=$ORACLE_BASE/product/11.2./db_1
export TNS_ADMIN=$ORACLE_HOME/network/admin
export PATH=/usr/sbin:$PATH
export PATH=$ORACLE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/lib
export CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib
umask

（4.2.1）配置GRID的环境变量，ORACLE_SID需根据主机来填写

[grid@rac1 ~]$ cd
[grid@rac1 ~]$ vi .bash_profile
# 添加下面的部分
 
export TMP=/tmp
export TMPDIR=$TMP
export ORACLE_SID=+asm1  # 如果是节点2，则：export ORACLE_SID=+asm

export ORACLE_BASE=/u01/app/grid
export ORACLE_HOME=/u01/app/11.2./grid
export PATH=/usr/sbin:$PATH
export PATH=$ORACLE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/lib
export CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib
umask

（4.3）配置节点互信

（4.3.1）配置oracle用户的节点互信

step1：2个节点执行

su - oracle
 
mkdir ~/.ssh
chmod  .ssh
/usr/bin/ssh-keygen -t rsa
/usr/bin/ssh-keygen -t dsa

step2：将所有的key文件汇总到一个总的认证文件中，在节点1上执行

su – oracle

ssh rac1 cat ~/.ssh/id_rsa.pub >> authorized_keys
ssh rac2 cat ~/.ssh/id_rsa.pub >> authorized_keys
ssh rac1 cat ~/.ssh/id_dsa.pub >> authorized_keys
ssh rac2 cat ~/.ssh/id_dsa.pub >> authorized_keys

step3：节点1上存在一份完整的key，拷贝到节点2

[oracle@rac1 ~]$ cd ~/.ssh/
[oracle@rac1 .ssh]$ scp authorized_keys rac2:~/.ssh/
[oracle@rac2 .ssh]chmod  authorized_keys

step4：在2个节点都执行一下命令

ssh rac1 date
ssh rac2 date
ssh rac1-priv date
ssh rac2-priv date

step5：检验是否配置成功，在节点1上不用输入密码就可以通过ssh连接节点2，说明配置成功

[oracle@rac1 ~]$ ssh rac2
[oracle@rac2 ~]$ id
uid=(oracle) gid=(oinstall) groups=(oinstall),(asmdba),(dba),(oper)
[oracle@rac2 ~]$ hostname
rac2

（4.3.2）配置grid用户的节点互信

与Oracle用户执行方式相同，只是执行脚本的用户变成了grid。

（4.4）配置系统内核参数

（4.4.1）内核参数设置

[root@rac1 ~]# vi /etc/sysctl.conf
# 在末尾添加

kernel.msgmnb =
kernel.msgmax =
kernel.shmmax =
kernel.shmall =
fs.aio-max-nr =
fs.file-max =
kernel.shmall =
kernel.shmmax = 2002012160
kernel.shmmni =
kernel.sem =
net.ipv4.ip_local_port_range =
net.core.rmem_default =
net.core.rmem_max =
net.core.wmem_default =
net.core.wmem_max =
net.ipv4.tcp_wmem =
net.ipv4.tcp_rmem =

参数说明：

kernel.shmmni：整个系统共享内存段的最大数目

fs.file-max：系统中所允许的文件句柄最大数目

net.core.rmem_default：套接字接收缓冲区大小的缺省值

net.core.rmem_max：套接字接收缓冲区大小的最大值

net.core.wmem_default：套接字发送缓冲区大小的缺省值

net.core.wmem_max：套接字发送缓冲区大小的最大值

net.ipv4.ip_local_port_range：应用程序可使用的IPv4端口范围

使得修改内核参数生效

[root@rac1 ~]# sysctl -p

（4.4.2）配置oracle、grid用户的shell限制

[root@rac1 ~]# vi /etc/security/limits.conf
# 在末尾添加

grid soft nproc
grid hard nproc
grid soft nofile
grid hard nofile
oracle soft nproc
oracle hard nproc
oracle soft nofile
oracle hard nofile

（4.5）配置共享存储

step1：查看磁盘

[root@rac1 ~]# fdisk -l

通过该命令，可看到我们后面添加上去的磁盘信息，磁盘从sdb到sdh

step2：分区、格式化磁盘。由于是共享磁盘，所以只需要在一个节点上执行即可

# 在节点1上格式化，以/dev/sdb为例：

[root@rac1 ~]# fdisk /dev/sdb
 
The number of cylinders for this disk is set to .
There is nothing wrong with that, but this is larger than ,
and could in certain setups cause problems with:
) software that runs at boot time (e.g., old versions of LILO)
) booting and partitioning software from other OSs
   (e.g., DOS FDISK, OS/ FDISK)
 
Command (m for help): n
Command action
   e   extended
   p   primary partition (-)
p
Partition number (-):
First cylinder (-, default ):
Using default value
Last cylinder or +size or +sizeM or +sizeK (-, default ):
Command (m for help): w
The partition table has been altered!
 
Calling ioctl() to re-read partition table.
Syncing disks.

step3：在2个节点上添加裸设备，2个节点都要执行

[root@rac2 ~]# vi /etc/udev/rules.d/-raw.rules
 # 在后面添加
 
ACTION=="add", KERNEL=="sdb1", RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION=="add", KERNEL=="sdc1", RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add", KERNEL=="sdd1", RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add", KERNEL=="sde1", RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION=="add", KERNEL=="sdf1", RUN+="/bin/raw /dev/raw/raw5 %N"
ACTION=="add", KERNEL=="sdg1", RUN+="/bin/raw /dev/raw/raw6 %N"
ACTION=="add", KERNEL=="sdh1", RUN+="/bin/raw /dev/raw/raw7 %N"
 
KERNEL=="raw[1]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[2]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[3]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[4]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[5]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[6]", MODE="", OWNER="grid", GROUP="asmadmin"
KERNEL=="raw[7]", MODE="", OWNER="grid", GROUP="asmadmin"

启动裸设备，2个节点都执行

[root@rac2 ~]# start_udev

查看裸设备，2个节点都要查看

[root@rac1 ~]# raw -qa
/dev/raw/raw1:    bound to major , minor
/dev/raw/raw2:    bound to major , minor
/dev/raw/raw3:    bound to major , minor
/dev/raw/raw4:    bound to major , minor
/dev/raw/raw5:    bound to major , minor
/dev/raw/raw6:    bound to major , minor
/dev/raw/raw7:    bound to major , minor

（4.6）安装依赖软件包

（4.6.1)配置共享文件夹（2个节点都要配置）

step1：关闭虚拟机

step2：设置”->“选项”->“共享文件夹”->“总是启用”->“添加 ”。然后添加操作系统安装包，为了方便，我们将grid、oracle安装包也添加进去。

step3：查看结果

[root@rac1 ~]# cd /mnt/hgfs/soft/
[root@rac1 soft]# ls
database  linux_11gR2_database_1of2.zip  Linux.5.5.for.x86.rhel-server-5.5-i386-dvd.iso
grid      linux_11gR2_database_2of2.zip

（4.6.2)配置yum源

step 1：创建ISO文件的挂载目录并挂载

[root@rac1 /]# mkdir /yum

[root@rac1 /]# cd /mnt/hgfs/soft/
[root@rac1 soft]# mount -o loop Linux.5.5.for.x86.rhel-server-5.5-i386-dvd.iso /yum

step2：找到rpm包

[root@rac1 Server]# cd /yum/Server/
[root@rac1 Server]# ll
...
-r--r--r--  root root    Jan    zlib-devel-1.2.-.i386.rpm
-r--r--r--  root root   May     zsh-4.2.-.el5.i386.rpm
-r--r--r--  root root    May     zsh-html-4.2.-.el5.i386.rpm
[root@rac1 Server]# ll |wc -l

step 3：配置Linux OS介质为yum源

[root@rac1 ~]# cd /etc/yum.repos.d/
[root@rac1 yum.repos.d]# ls
rhel-source.repo
[root@RedHat yum.repos.d]# rm -rf redhat.repo
[root@RedHat yum.repos.d]# vi lijiaman.repo
 
# 在新的yum源里面添加红色部分
[dvdinfo]
name=my_yum
baseurl=file:///yum/Server
enabled=
gpgcheck=

step4：收集安装包的信息

[root@rac1 yum.repos.d]# yum makecache

step5：为方便重启虚拟机之后依然可以使用yum，在rc.local里面添加:

[root@rac1 yum.repos.d]# vim /etc/rc.local
#添加红色部分
 
mount -o loop Linux.5.5.for.x86.rhel-server-5.5-i386-dvd.iso /yum

（4.6.3）安装依赖包

不同的操作系统安装不同的包，具体可看官方教程:

http://docs.oracle.com/cd/E11882_01/install.112/e41961/prelinux.htm#CWLIN

我这里安装的包如下：

yum install -y binutils-*
yum install -y compat-libstdc++-*
yum install -y elfutils-libelf-*
yum install -y elfutils-libelf-*
yum install -y elfutils-libelf-devel-static-0.125
yum install -y gcc-4.1.
yum install -y gcc-c++-4.1.
yum install -y glibc-2.5-
yum install -y glibc-common-2.5
yum install -y glibc-devel-2.5
yum install -y glibc-headers-2.5
yum install -y kernel-headers-2.6.
yum install -y ksh-
yum install -y libaio-0.3.
yum install -y libaio-devel-0.3.
yum install -y libgcc-4.1.
yum install -y libgomp-4.1.
yum install -y libstdc++-4.1.
yum install -y libstdc++-devel-4.1.
yum install -y make-3.81
yum install -y sysstat-7.0.

（五）安装Grid

（5.1）安装前的检查

step1：解压grid安装包

[root@rac1 ~]# cd /mnt/hgfs/soft/
[root@rac1 soft]# unzip linux_11gR2_grid.zip

step2：安装cvuqdisk包，用于检查RAC环境配置

[root@rac1 soft]# cd grid/
[root@rac1 grid]# ls
doc  install  response  rpm  runcluvfy.sh  runInstaller  sshsetup  stage  welcome.html
[root@rac1 grid]# cd rpm/
[root@rac1 rpm]# ls
cvuqdisk-1.0.-.rpm
[root@rac1 rpm]# rpm -ivh cvuqdisk-1.0.-.rpm
Preparing...                ########################################### [%]
Using default group oinstall to install package
   :cvuqdisk               ########################################### [%]

step3：检查环境配置，这里需要一项一项的去核对，确保没有不通过的选项，

[root@rac1 rpm]# su - grid
[grid@rac1 ~]$ cd /mnt/hgfs/soft/grid/
[grid@rac1 grid]$ ls
doc  install  response  rpm  runcluvfy.sh  runInstaller  sshsetup  stage  welcome.html
[grid@rac1 grid]$ ./runcluvfy.sh stage -pre crsinst -n rac1,rac2 -fixup -verbose
 
Performing pre-checks for cluster services setup 
 
Checking node reachability...

这里我的检查中有3项目不合格：

①用户等效性：

Checking user equivalence...

Check: User equivalence for user "grid"
Node Name                             Comment
------------------------------------ ------------------------
rac2                                  failed
rac1                                  failed
Result: PRVF-4007 : User equivalence check failed for user "grid"

解决方法：

安装前面的方法，重新配置grid用户互信。

②补丁包

Check: Package existence for "unixODBC-2.2.11"
Node Name Available Required Comment
------------ ------------------------ ------------------------ ----------
rac2 missing unixODBC-2.2.11 failed
Result: Package existence check failed for "unixODBC-2.2.11"

Check: Package existence for "unixODBC-devel-2.2.11"
Node Name Available Required Comment
------------ ------------------------ ------------------------ ----------
rac2 missing unixODBC-devel-2.2.11 failed
Result: Package existence check failed for "unixODBC-devel-2.2.11"

解决方法：

yum install –y unixODBC*

③NTP时钟同步

Starting Clock synchronization checks using Network Time Protocol(NTP)...

NTP Configuration file check started...
The NTP configuration file "/etc/ntp.conf" is available on all nodes
NTP Configuration file check passed

Checking daemon liveness...

Check: Liveness for "ntpd"
Node Name                             Running?
------------------------------------ ------------------------
rac2                                  no
rac1                                  no
Result: Liveness check failed for "ntpd"
PRVF-5415 : Check to see if NTP daemon is running failed
Result: Clock synchronization check using Network Time Protocol(NTP) failed

解决方法：

在11gr2 版本的Rac 在安装 GI软件时，需要通过2种途径实现节点间时间同步：

1.操作系统 NTP 时间同步

2.Oracle Cluster Time Synchronization Service

在oracle11G R2版本中,oracle自己增加了集群中的时间同步服务,如果操作系统没有配置NTP,就会启用oracle 自带的 Cluster Time Synchronization Service 。

故该错误可以忽略。

（5.2）安装grid

安装主需要在一个节点上进行即可，会自动同步到另一个节点，我们在rac1上执行安装工作

step1：开启安装

[root@rac1 ~]# xhost +
xhost:  unable to open display ""
[root@rac1 ~]# su - grid
[grid@rac1 ~]$ cd /mnt/hgfs/soft/grid/
[grid@rac1 grid]$ ls
doc  install  response  rpm  runcluvfy.sh  runInstaller  sshsetup  stage  welcome.html
[grid@rac1 grid]$ ./runInstaller

step2：图形安装

这一步需要注意SCAN Name，我们在/etc/hosts文件里面设置为什么值，这里就填什么值

添加另一个节点

添加节点之后，点击“SSH Connectivity”，填写grid用户的密码，点击“setup”

配置网络，这里至少需要两个网络，根据前面的IP规划表选择即可

选择3块1GB的磁盘，组成一个磁盘组OCR

输入密码，这里有警告信息，看了一下，是密码不够复杂，不符合Oracle的规定，忽略不管

下面的几个图忘记截图了，从网上找了一张图，在Prerequisite Check中，NTP检查失败，忽略

开始进行安装…

安装过程中，会填出如下窗口：

按照其要求，一个节点一个节点的执行，千万不要2个节点一起执行，以我为例：

step1：在虚拟机rac1上打开一个窗口，以root用户登录

执行脚本：

[root@rac1 ~]# /u01/app/oraInventory/orainstRoot.sh 
 
# 待上面脚本执行完成，再执行下面脚本
[root@rac1 ~]# /u01/app/11.2./grid/root.sh

step2：漫长的等待

step3：确认节点1上的脚本执行完成，在虚拟机rac2上打开一个窗口，以root用户登录

执行脚本：

[root@rac2 ~]# /u01/app/oraInventory/orainstRoot.sh 
 
# 待上面脚本执行完成，再执行下面脚本
[root@rac2 ~]# /u01/app/11.2./grid/root.sh

step4：漫长的等待

step5：确认节点2的脚本执行完成。点击“OK”；

===================================================

安装到最后，有报错信息出现：

原因：

由于配置了/etc/hosts来解析SCAN，导致未走DNS来进行SCAN的解析，爆出此错误，可以考虑忽略掉
解决办法：
ping scan ip，如果可以ping通，忽略，跳过即可。

[grid@rac1 grid]$ ping rac-scan
PING rac-scan (192.168.19.14) () bytes of data.
 bytes from rac-scan (192.168.19.14): icmp_seq= ttl= time=0.021 ms
 bytes from rac-scan (192.168.19.14): icmp_seq= ttl= time=0.026 ms

至此grid安装完成。

（5.3）配置磁盘组

在节点1上执行

[grid@rac1 ~]$ asmca

点击“create”

创建磁盘组DATA

创建磁盘组ARCH

最终结果：

（六）安装Oracle

（6.1）安装Oracle软件

解压安装包，调出图形界面

[oracle@rac1 ~]$ cd /mnt/hgfs/soft/
[oracle@rac1 soft]$ unzip linux_11gR2_database_1of2.zip
[oracle@rac1 soft]$ unzip linux_11gR2_database_2of2.zip
[oracle@rac1 soft]$ ls
database  linux_11gR2_database_1of2.zip  Linux.5.5.for.x86.rhel-server-5.5-i386-dvd.iso
grid      linux_11gR2_database_2of2.zip
[oracle@rac1 soft]$ cd database/
[oracle@rac1 database]$ ls
doc  install  response  rpm  runInstaller  sshsetup  stage  welcome.html
[oracle@rac1 database]$ ./runInstall

选择第二个，只安装数据库软件

这里节点互信总是出问题，重新手动配置一下就好了，没完全搞明白 -_-

时钟同步问题，忽略

漫长的等待

结束。

（6.2）创建数据库

在oracle用户下执行命令

[oracle@rac1 ~]$ dbca

部分截图：

与安装grid一样，执行脚本，一个节点一个节点的执行，先执行完节点1，在执行节点2

结束安装。

（6.3）检查安装结果

发现arch和data磁盘组还是有问题，没有自动启动（这个问题比较奇怪，我安装了3次，在个人电脑上安装遇到2次，在服务器上安装则没有这个问题，怀疑是个人电脑I/O不足，在数据库启动时磁盘mount超时了）

[grid@rac1 ~]$ crsctl status res -t
--------------------------------------------------------------------------------
NAME           TARGET  STATE        SERVER                   STATE_DETAILS
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.ARCH.dg
               OFFLINE OFFLINE      rac1
               ONLINE  ONLINE       rac2
ora.DATA.dg
               OFFLINE OFFLINE      rac1
               OFFLINE OFFLINE      rac2
ora.LISTENER.lsnr
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.OCR.dg
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.asm
               ONLINE  ONLINE       rac1                     Started
               ONLINE  ONLINE       rac2                     Started
ora.eons
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.gsd
               OFFLINE OFFLINE      rac1
               OFFLINE OFFLINE      rac2
ora.net1.network
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.ons
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.registry.acfs
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
--------------------------------------------------------------------------------
Cluster Resources
--------------------------------------------------------------------------------
ora.LISTENER_SCAN1.lsnr
              ONLINE  ONLINE       rac1
ora.oc4j
              OFFLINE OFFLINE
ora.rac.db
              OFFLINE OFFLINE
              OFFLINE OFFLINE
ora.rac1.vip
              ONLINE  ONLINE       rac1
ora.rac2.vip
              ONLINE  ONLINE       rac2
ora.scan1.vip
              ONLINE  ONLINE       rac1

手动启动arch和data

[grid@rac1 ~]$ srvctl start diskgroup -g arch
[grid@rac1 ~]$ srvctl start diskgroup -g data

再次查看资源状态，已经启动

[grid@rac1 ~]$ crsctl status res -t
--------------------------------------------------------------------------------
NAME           TARGET  STATE        SERVER                   STATE_DETAILS
--------------------------------------------------------------------------------
Local Resources
--------------------------------------------------------------------------------
ora.ARCH.dg
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2
ora.DATA.dg
               ONLINE  ONLINE       rac1
               ONLINE  ONLINE       rac2

接下来，启动数据库

[grid@rac1 ~]$ srvctl start database -d rac

查看资源状态，数据库已经启动

ora.rac.db
              ONLINE  ONLINE       rac1                     Open
              ONLINE  ONLINE       rac2                     Open

进入数据库，

[grid@rac1 ~]$ su - oracle
Password:
[oracle@rac1 ~]$ sqlplus / as sysdba
 
SQL*Plus: Release 11.2.0.1. Production on Sun Oct  :: 
 
Copyright (c) , , Oracle.  All rights reserved.
 
Connected to:
Oracle Database 11g Enterprise Edition Release 11.2.0.1. - Production
With the Partitioning, Real Application Clusters, Automatic Storage Management, OLAP,
Data Mining and Real Application Testing options

查看实例状态

SQL> col host_name format a10;
SQL> select host_name,inst_id,instance_name,version from gv$instance;
 
HOST_NAME     INST_ID INSTANCE_NAME    VERSION
---------- ---------- ---------------- -----------------
rac1             rac1           11.2.0.1.
rac2             rac2           11.2.0.1.

一切正常。结束

其它问题：

问题1：无法进入asm实例

在grid下，想要进入asm实例，发现asm实例状态为idle，如下：

[grid@rac1 ~]$ sqlplus / as sysasm

SQL*Plus: Release 11.2.0.1.0 Production on Tue Sep 11 18:43:36 2018

Connected to an idle instance.

[grid@rac1 ~]$ asmcmd
Connected to an idle instance.
ASMCMD>

通过crsctl查看，我的asm实例明明是启动的，那么为什么状态为idle呢？从网上查找资料，发现都是grid用户环境变量的问题。查看监听，确认asm实例名称，发现asm实例名称是大写的，在前面安装grid的时候没注意，导致出现该问题。

[grid@rac2 ~]$ lsnrctl

LSNRCTL for Linux: Version 11.2.0.1.0 - Production on 11-SEP-2018 19:20:42

Welcome to LSNRCTL, type "help" for information.

LSNRCTL> status
Connecting to (DESCRIPTION=(ADDRESS=(PROTOCOL=IPC)(KEY=LISTENER)))
STATUS of the LISTENER
------------------------
Alias LISTENER
Version TNSLSNR for Linux: Version 11.2.0.1.0 - Production
Start Date 11-SEP-2018 18:18:12
Uptime 0 days 1 hr. 2 min. 31 sec
Trace Level off
Security ON: Local OS Authentication
SNMP OFF
Listener Parameter File /u01/app/11.2.0/grid/network/admin/listener.ora
Listener Log File /u01/app/grid/diag/tnslsnr/rac2/listener/alert/log.xml
Listening Endpoints Summary...
(DESCRIPTION=(ADDRESS=(PROTOCOL=ipc)(KEY=LISTENER)))
(DESCRIPTION=(ADDRESS=(PROTOCOL=tcp)(HOST=10.141.71.102)(PORT=1521)))
(DESCRIPTION=(ADDRESS=(PROTOCOL=tcp)(HOST=10.141.71.104)(PORT=1521)))
Services Summary...
Service "+ASM" has 1 instance(s).
Instance "+ASM2", status READY, has 1 handler(s) for this service...
Service "rac" has 1 instance(s).
Instance "rac2", status READY, has 1 handler(s) for this service...
Service "racXDB" has 1 instance(s).
Instance "rac2", status READY, has 1 handler(s) for this service...
The command completed successfully

于是将grid用户的.bash_profile文件中的oracle_sid修改为大写即可

修改前：

[grid@rac1 ~]$ more .bash_profile
# .bash_profile
 
# Get the aliases and functions
if [ -f ~/.bashrc ]; then
    . ~/.bashrc
fi
 
# User specific environment and startup programs
 
PATH=$PATH:$HOME/bin
export TMP=/tmp
export TMPDIR=$TMP
export ORACLE_SID=+asm1  # 如果是节点2，则：export ORACLE_SID=+asm2
export ORACLE_BASE=/u01/app/grid
export ORACLE_HOME=/u01/app/11.2./grid
export PATH=/usr/sbin:$PATH
export PATH=$ORACLE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/lib
export CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib
umask

修改后：

[grid@rac1 ~]$ more .bash_profile
# .bash_profile
 
# Get the aliases and functions
if [ -f ~/.bashrc ]; then
    . ~/.bashrc
fi
 
# User specific environment and startup programs
 
PATH=$PATH:$HOME/bin
export TMP=/tmp
export TMPDIR=$TMP
export ORACLE_SID=+ASM1  # 如果是节点2，则：export ORACLE_SID=+asm2
export ORACLE_BASE=/u01/app/grid
export ORACLE_HOME=/u01/app/11.2./grid
export PATH=/usr/sbin:$PATH
export PATH=$ORACLE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/lib
export CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib
umask

问题2：通过scan ip连接不上数据库（2018.09.12补充）

在我的电脑上配置了tns文件，然后连接到数据库上时，报错

ORA-12545: 因目标主机或对象不存在，连接失败

通过其它IP（public ip和vip）都可以脸上数据库，网上查找相似问题，发现是11.2.0.1的bug，只需要将初始化参数local_listener中的host的值改为vip即可。

修改方法如下：

---------节点1
SQL> alter system set local_listener='(DESCRIPTION=(ADDRESS_LIST=(ADDRESS=(PROTOCOL=TCP)(HOST=10.141.71.103)(PORT=1521))))' scope=both sid='racdb1';
System altered.
 
SQL> alter system register;
System altered.
 
---------节点2
SQL> alter system set local_listener='(DESCRIPTION=(ADDRESS_LIST=(ADDRESS=(PROTOCOL=TCP)(HOST=10.141.71.104)(PORT=1521))))' scope=both sid='racdb2';
System altered.
 
SQL> alter system register;
System altered.

修改前：

----------2个节点配置均如下
SQL> show parameter listener
 
NAME                     TYPE        VALUE
-----------------------  ----------- ------------------------------
listener_networks        string
local_listener           string      (DESCRIPTION=(ADDRESS_LIST=(AD
                                     DRESS=(PROTOCOL=TCP)(HOST=rac1-vip)(PORT=))))
remote_listener          string      rac-scan:

修改后：

------------节点1
SQL> show parameter listener
 
NAME                      TYPE         VALUE
------------------------  -----------  ------------------------------
listener_networks         string
local_listener            string     (DESCRIPTION=(ADDRESS_LIST=(AD
                                      DRESS=(PROTOCOL=TCP)(HOST=10.141.71.)(PORT=))))
remote_listener           string     rac-scan:
 
-------------节点2
SQL> show parameter listener
 
NAME                     TYPE         VALUE
-----------------------  -----------  ------------------------------
listener_networks        string
local_listener           string     (DESCRIPTION=(ADDRESS_LIST=(AD
                                     DRESS=(PROTOCOL=TCP)(HOST=10.141.71.)(PORT=))))
remote_listener          string     rac-scan:

注释：这个错误是另一次安装遇到的，故数据库、服务器信息有所变化。

【完】

Oracle RAC + ASM + Grid安装的更多相关文章

基于CentOS与VmwareStation10搭建Oracle11G RAC 64集群环境：4.安装Oracle RAC FAQ-4.5.安装Grid，创建ASM磁盘组空间不足
因之前分区时,分区的Last cylinder的值选了“1”,导致创建磁盘组空间不足.解决办法是先删除分区,重新创建分区并删除ASM磁盘,然后重建ASM磁盘 1. 先删除分区,重新创建分区: 1)查询 ...
Oracle RAC集群安装之：Grid软件安装过程蓝屏
前几天在安装一套RAC服务器的过程中,遇到了蓝屏事件,折腾了蛮久(在排查是否存在硬件问题上花费了相当多一部分时间),整个过程大概说明如下: 1.两台华为的PC SERVER,操作系统为WIN SERV ...
Oracle RAC asm常用命令
在Oracle RAC环境下,使用grid帐号执行运行asmcmd进入asm命令模式,如: [grid@oradb-node1 ~]$ asmcmd ASMCMD> ASMCMD> du ...
单节点oracle、ASM 详细安装步骤
目录 1.安装环境 2.系统要求 2.1 Linux安装Oracle系统要求 1.查看RAM和交换空间以及磁盘大小 2.检查所需软件包 3.配置host和主机名 2.2修改操作系统核心参数 1.创建相 ...
oracle rac 在完成安装错误。
今天是2014.05.26,离别N继续使用长今博客.成交一直忙于最近.该条目加上家庭网络还没有缴纳会费,我开始变得不太安全.学习是一个需要冷静情绪.心脏的声音是. 由于改变笔记本,特别需要重新建立Ra ...
基于CentOS与VmwareStation10搭建Oracle11G RAC 64集群环境：4.安装Oracle RAC FAQ-4.6.重新配置与缷载11R2 Grid Infrastructure
1.[root@linuxrac1 ~]# /u01/app/oraInventory/orainstRoot.sh 2.[root@linuxrac2 ~]# /u01/app/oraInvento ...
基于CentOS与VmwareStation10搭建Oracle11G RAC 64集群环境：4.安装Oracle RAC FAQ-4.4.无法图形化安装Grid Infrastructure
无法图形化安装: [grid@linuxrac1 grid]$ ./runInstaller Starting Oracle Universal Installer... Checking Temp ...
基于CentOS与VmwareStation10搭建Oracle11G RAC 64集群环境：4.安装Oracle RAC FAQ-4.2.Oracleasm Createdisk ASM磁盘失败:Instantiating disk: failed
1.错误信息:Instantiating disk: failed [root@linuxrac1 /]# /usr/sbin/oracleasm createdisk OCR_VOTE /dev/s ...
一步一步搭建 oracle 11gR2 rac+dg之grid安装(四)【转】
一步一步在RHEL6.5+VMware Workstation 10上搭建 oracle 11gR2 rac + dg 之grid安装 (四) 转自一步一步搭建 oracle 11gR2 rac+d ...

随机推荐

oop 第三次作业文件读写
oop第三次作业 GitHub 对于迟交我感到很抱歉 031602510 体会这次的用到了之前的文件读写,传参定义函数有返回值,使代码更加简洁.面向对象的程序设计,在面对函数多元的情况下,编程更加 ...
【1414软工助教】博客链接和coding链接
某些同学提供的coding.net用户名无法访问.请同学们自己点击自己的两个链接,如果发现有错,请在本博客的评论区给出正确的链接. 格式为: 学号后3位链接例如:***502 https://co ...
团队作业8----第二次项目冲刺（Beta阶段）第六天
BETA阶段冲刺第六天 1.小会议ing 2.每个人的工作 (1)昨天已完成的工作重复部分可以用红色字体显示 (2) 今天计划完成的工作 (3) 工作中遇到的困难: 尤少辉:在测试的时候,当队友提出 ...
201521123060 《Java程序设计》第5周学习总结
1.本周学习总结 2.书面作业 Q1.代码阅读:Child压缩包内源代码 1.1 com.parent包中Child.java文件能否编译通过?哪句会出现错误?试改正该错误.并分析输出结果. 答:不能 ...
201521123071 《JAVA程序设计》第十二周学习总结
第12周作业-多线程 1. 本周学习总结 1.1 以你喜欢的方式(思维导图或其他)归纳总结多流与文件线程相关内容. 2. 书面作业 1. 字符流与文本文件:使用 PrintWriter(写),Buff ...
201521123025《java程序设计》第12周学习总结
#1. 本周学习总结 #2. 书面作业将Student对象(属性:int id, String name,int age,double grade)写入文件student.data.从文件读出显示. ...
201521123031 《Java程序设计》第13周学习总结
1. 本周学习总结以你喜欢的方式(思维导图.OneNote或其他)归纳总结多网络相关内容. 2. 书面作业 1. 网络基础 1.1 比较ping www.baidu.com与ping cec.jmu ...
table相关的选择器 & children()与find()的区别 & 选择器eq(n)与nth-child(n)的差异
<!DOCTYPE html> <html lang="en"> <head> <meta charset="utf-8&quo ...
python 浅析对return的理解
最近很忙,但是还是很认真的学习python这个东西,不是出于什么目的,只是单纯的喜欢罢了.最近学习的东西比较简单,但是也遇到了一些问题,就是比较迷惑人的问题,今天小编就在这里讲讲自己的对return的 ...
org.springframework.expression.spel.SpelEvaluationException: EL1011E: Method call: Attempted to call method test() on null context object
前言本文中提到的解决方案,源码地址在:springboot-thymeleaf,希望可以帮你解决问题. 至于为什么已经写了一篇文章thymeleaf模板引擎调用java类中的方法,又多此一举的单独整 ...

Oracle RAC + ASM + Grid安装

Oracle RAC + ASM + Grid安装的更多相关文章

随机推荐

热门专题