當前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Oracle 11gR2 GI日常管理手册

發布時間：2024/1/17 编程问答 39 豆豆

生活随笔收集整理的這篇文章主要介紹了 Oracle 11gR2 GI日常管理手册小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

Oracle 11gR2 GI日常管理手冊

目錄
1 文檔簡介 4
1.1 編寫目的 4
1.2 適用范圍 4
1.3 名詞解釋 4
1.4 格式約定 4
1.5 特別說明 4
2 在集群中增加新節點 5
2.1 新節點機器安裝環境準備 5
2.1.1 新節點機器與網絡存儲的連接 5
2.1.2 新節點機器信息 5
2.1.3 存儲信息 5
2.1.4 軟件版本 6
2.2 安裝前配置 6
2.2.1 配置存儲 6
2.2.2 創建用戶和組 7
2.2.3 檢查硬件要求 7
2.2.4 檢查網絡配置 7
2.2.5 檢查內核版本及軟件包 8
2.2.6 設置內核參數 8
2.2.7 修改root用戶的umask及PATH變量 8
2.2.8 安裝cvuqdisk RPM包 8
2.2.9 配置SSH無密碼登陸 8
2.2.10 配置Shell Limits 8
2.2.11 檢查selinux配置 8
2.2.12 檢查NTP時間同步 8
2.2.13 配置OCR和VOTE Disk 8
2.2.14 使用CVU進行安裝前檢查 8
2.3 安裝及配置ASM Lib 9
2.3.1 安裝ASMLib軟件包 9
2.3.2 配置ASMLib 9
2.3.3 掃描ASM Disk Groups 10
2.4 擴展CRS Home到新節點 10
2.4.1 在CRS Home運行addNode.sh腳本 10
2.4.2 在新節點上運行root.sh腳本加入集群 10
2.4.3 修改新節點上數據庫啟動腳本的的權限 13
2.5 擴展Oracle Home到新節點 13
2.5.1 新節點上的環境配置 13
2.5.2 使用CVU進行安裝前檢查 13
2.5.3 在Oracle Home運行addNode.sh腳本 14
2.5.4 在新節點上運行root.sh腳本 14
2.5.5 同步新節點上的oratab文件 14
2.6 擴展資源組的切換域到新節點 15
2.6.1 修改Serverpool成員 15
2.6.2 資源組切換測試 15
3 在集群中刪除節點 16
3.1 數據庫切換或下線回收 16
3.1.1 數據庫切換 16
3.1.2 數據庫下線回收 16
3.2 從Oracle Home中刪除節點 16
3.2.1 從Oracle Home中刪除節點 16
3.3 從CRS Home中刪除節點 17
3.3.1 從cluster中刪除節點 17
3.3.2 已刪除節點機器下線 19
4 參考文檔 19
4.1 Oracle Clusterware Administration and Deployment Guide 11g Release 2 19

?
1 文檔簡介
1.1 編寫目的
為Linux數據庫平臺集群軟件Oracle 11gR2 Grid Infrastructure的日常管理提供參考。

1.2 適用范圍
該文檔的閱讀對象為基礎架構管理部系統組、存儲組、項目組等相關人員。

1.3 名詞解釋
序號術語/縮略語全稱和說明
1 GI Grid Infrastructure的簡稱，Oracle公司的集群和存儲管理軟件的統稱，包含集群軟件Clusterware和存儲管理軟件ASM。
2 CRS Clusterware的簡稱，Oracle公司的集群管理軟件。
3 ASM Automatic Storage Management的簡稱，Oracle公司的存儲管理軟件。

1.4 格式約定
以“#”開頭代表root用戶；
以“$”開頭代表普通用戶；
以“>”開頭代表DB用戶；
以“SQL>”開頭代表sqlplus命令；
以“灰色底紋”標注的為命令或輸入字符；
以“斜體”標注的為配置文件內容；

“所有節點”表示集群中的所有機器；
“主節點”表示“節點一”，集群中的第一臺機器（下面的cnsh230244）。

1.5 特別說明
1、下面的步驟以在二節點（cnsh230244、cnsh230245）集群中新增節點（cnsh230246）和刪除節點（cnsh230246）為范例，目的的要詳述的操作方法，除方法以外的許多東西會與實際環境存在不同，如存儲LUN的數量及大小、用戶名、目錄名等，實際配置過程中，請嚴格按照《Oracle 11gR2 集群管理規范.docx》來執行。

2、另本文肯定存在一些錯漏的地方，請及時提出并修正，大家共同不斷進行完善。

2 在集群中增加新節點
2.1 新節點機器安裝環境準備
2.1.1 新節點機器與網絡存儲的連接

機器連接主網
按照機器標裝規則，使用雙網卡鏈路連接到新節點要加入集群的主網。

機器連接心跳網
使用雙網卡鏈路連接到新節點要加入集群的心跳網絡。

機器連接SAN存儲
1）按照機器標裝規則，使用雙HBA卡鏈路連接到新節點要加入集群的SAN存儲；

2）將集群中所有的共享LUN擴展到新節點上，使用新節點也可以訪問所有的共享LUN。

2.1.2 新節點機器信息
注：cnsh230244、cnsh230245為集群中原有的節點，cnsh230246為要加入集群的新節點。

硬件及OS
主機名機器型號 OS版本內核版本

cnsh230244 HP DL585 G6 RHEL5.4 X86_64 2.6.18-164.9.1.el5
cnsh230245 HP DL585 G6 RHEL5.4 X86_64 2.6.18-164.9.1.el5
cnsh230246 HP DL585 G6 RHEL5.4 X86_64 2.6.18-164.9.1.el5

IP信息
主機名主網IP 節點VIP 心跳網IP SCAN IP

cnsh230244 10.31.9.124 10.31.9.247 1.1.2.1 10.31.9.254
cnsh230245 10.31.9.147 10.31.9.248 1.1.2.2
cnsh230246 10.31.9.152 10.31.9.249 1.1.2.3

2.1.3 存儲信息

SAN存儲
共享主機 LUN大小(GB) 數量用途要求

cnsh230244
cnsh230245
cnsh230246 1 3 OCRVD_DG 3個LUN在不同的RAID組中

25 2 ACFS_DG 存儲采用RAID5或RAID10均可 50 4 DATA_DG 存儲采用RAID10 50 4 FRA_DG 存儲采用RAID5或RAID10均可

注：將集群中所有共享的LUN擴展到新節點。

本地存儲
主機名 LV大小(GB) 數量用途 Mount點說明

cnsh230244 20 1 LVgrid /oracle_grid 用以安裝Grid Infrastructure

100 1 LVdata /data01 臨時用以存放安裝介質

cnsh230245 20 1 LVgrid /oracle_grid 用以安裝Grid Infrastructure

100 1 LVdata /data01 臨時用以存放安裝介質

cnsh230246 20 1 LVgrid /oracle_grid 用以安裝Grid Infrastructure

100 1 LVdata /data01 臨時用以存放安裝介質

2.1.4 軟件版本

OS Kernel版本
2.6.18-164.9.1.el5 x86_64

ASM Lib版本
ASMLib-2.6.18-164.9.1.el5-2.0.5-1.el5.x86_64

安裝介質：
在sa上的“/data01/oracle/ASMLib-2.6.18-164.9.1.el5-2.0.5-1.el5.x86_64”目錄。

Grid Infrastructure版本
11.2.0.2.0

2.2 安裝前配置
2.2.1 配置存儲

配置本地存儲
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.1.1 配置本地存儲”。

配置SAN存儲
該部分由存儲組進行實施。

配置DM Multipath多鏈路軟件，修改好/etc/multipath.conf配置文件，使新節點看到的LUN信息與原集群中的節點一致。

2.2.2 創建用戶和組

創建GI用戶和DB用戶
1）參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.3 創建用戶和組”，建立Grid用戶，注意UID和GID需要與其它節點保持一致；

2）參看原集群中的節點，建立所有的Oracle數據庫用戶，注意UID和GID需要與其它節點保持一致。

設置用戶環境變量
1）使用grid用戶登陸原集群中節點一，將$HOME目錄下的.bash_profile復制到新節點上覆蓋同名文件；

2）分別使用各個Oracle用戶登陸原集群中節點一，將各個Oracle數據庫用戶$HOME目錄下的.bash_profile復制到新節點上覆蓋同名文件。

2.2.3 檢查硬件要求
參看“3.4 檢查硬件要求”。

2.2.4 檢查網絡配置
1）主網及心跳網配置如下：
主機名主網網卡主網IP 心跳網網卡心跳網IP
cnsh230246 bond0 10.31.9.152/24 bond1 1.1.2.3/24

2）修改原集群中所有節點hosts文件配置，增加新節點IP相關（紅色）的行：
注意：IP與主機名之間必須使用空格，不使用TAB鍵！

vim /etc/hosts

127.0.0.1 localhost.localdomain localhost
10.31.9.124 cnsh230244
10.31.9.147 cnsh230245
10.31.9.152 cnsh230246

1.1.2.1 cnsh230244-priv
1.1.2.2 cnsh230245-priv
1.1.2.3 cnsh230246-priv

10.31.9.247 cnsh230244-vip
10.31.9.248 cnsh230245-vip
10.31.9.249 cnsh230246-vip
10.31.9.254 clusterware01-scan

3）將修改后的hosts文件復制到新節點上，覆蓋同名文件。

4）檢查所有節點上的nsswitch.conf配置，這一行應該如下：

cat /etc/nsswitch.conf | grep ^hosts

hosts: files dns

2.2.5 檢查內核版本及軟件包
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.6 檢查內核版本及軟件包”。

2.2.6 設置內核參數
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.7 設置內核參數”。

2.2.7 修改root用戶的umask及PATH變量
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.8 修改root用戶的umask及PATH變量”。

2.2.8 安裝cvuqdisk RPM包
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.9 安裝cvuqdisk RPM包”。

2.2.9 配置SSH無密碼登陸

配置GI用戶無密碼登陸
1）使用grid用戶登陸原集群中節點一，將$HOME目錄下的.ssh目錄復制到新節點grid用戶的$HOME目錄中；

2）測試驗證所有節點兩兩之間grid用戶都能夠無密碼登陸。

配置所有DB用戶無密碼登陸
1）分別使用各個DB用戶登陸原集群中節點一，將$HOME目錄下的.ssh目錄復制到新節點對應DB用戶的$HOME目錄中；

2）測試驗證所有節點兩兩之間各個DB用戶都能夠無密碼登陸。

2.2.10 配置Shell Limits
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.11 配置Shell Limits”。

2.2.11 檢查selinux配置
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.12 檢查selinux配置”。

2.2.12 檢查NTP時間同步
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“3.13 檢查NTP時間同步”。

2.2.13 配置OCR和VOTE Disk
OCR及VOTE Disk已經在集群建立時配置好，無需配置。

2.2.14 使用CVU進行安裝前檢查
1）使用grid用戶登陸節點一，運行：
$ cluvfy stage -pre nodeadd -n cnsh230246 -verbose

2）檢查的結果有如下兩處是failed的，不用理會。
注：其余的都應該是passed，WARNING可以忽略。

Checking for multiple users with UID value 0
PRVF-4132 : Multiple users "root,ada,paxf" with UID "0" exist on "cnsh230246".
Result: Check for multiple users with UID value 0 failed

Checking Oracle Cluster Voting Disk configuration...
ERROR:
PRVF-5449 : Check of Voting Disk location "ORCL:OCRVD_DISK01(ORCL:OCRVD_DISK01)" failed on the following nodes:

cnsh230246:No such file or directory

ERROR:
PRVF-5449 : Check of Voting Disk location "ORCL:OCRVD_DISK02(ORCL:OCRVD_DISK02)" failed on the following nodes:

cnsh230246:No such file or directory

ERROR:
PRVF-5449 : Check of Voting Disk location "ORCL:OCRVD_DISK03(ORCL:OCRVD_DISK03)" failed on the following nodes:

cnsh230246:No such file or directory

PRVF-5431 : Oracle Cluster Voting Disk configuration check failed

2.3 安裝及配置ASM Lib
2.3.1 安裝ASMLib軟件包
參看《Oracle 11gR2 GI基本安裝手冊.docx》中的“4.1 安裝ASMLib軟件包”。

2.3.2 配置ASMLib
1）配置ASM，在新節點上操作：

/etc/init.d/oracleasm configure

Configuring the Oracle ASM library driver.

This will configure the on-boot properties of the Oracle ASM library

The following questions will determine whether the driver is

on boot and what permissions it will have. The current values

will be shown in brackets ('[]'). Hitting without typing an
answer will keep that current value. Ctrl-C will abort.

Default user to own the driver interface []: grid
Default group to own the driver interface []: asmadmin
Start Oracle ASM library driver on boot (y/n) [n]: y
Scan for Oracle ASM disks on boot (y/n) [y]: y
Writing Oracle ASM library driver configuration: done
Initializing the Oracle ASMLib driver: [ OK ]
Scanning the system for Oracle ASMLib disks: [ OK ]

2）修改/etc/sysconfig/oracleasm，在新節點上操作：
找到以下這二行并修改為：
ORACLEASM_SCANORDER="dm"
ORACLEASM_SCANEXCLUDE="sd"

2.3.3 掃描ASM Disk Groups
1）重啟新節點；
2）在新節點上查看ASM Disks，應該與原集群中的其它節點一致：

oracleasm listdisks

OCRVD_DISK01
OCRVD_DISK02
OCRVD_DISK03
DATA_DISK03
DATA_DISK04
DATA_DISK05
DATA_DISK06
FRA_DISK01
FRA_DISK02
FRA_DISK03
FRA_DISK04
FRA_DISK05
FRA_DISK06
ACFS_DISK01
ACFS_DISK02
DATA_DISK01
DATA_DISK02

2.4 擴展CRS Home到新節點
2.4.1 在CRS Home運行addNode.sh腳本
1）驗證所有節點上root用戶的umask為022；

2）使用grid用戶登陸節點一，運行addNode.sh腳本：
$ export IGNORE_PREADDNODE_CHECKS=Y
$ cd $ORACLE_HOME/oui/bin
$ ./addNode.sh -silent \
"CLUSTER_NEW_NODES={cnsh230246}" "CLUSTER_NEW_VIRTUAL_HOSTNAMES={cnsh230246-vip}"

2.4.2 在新節點上運行root.sh腳本加入集群

1）在新節點上使用root運行如下腳本，將cnsh230246添加到cluster中：

/oracle_grid/app/oraInventory/orainstRoot.sh

/oracle_grid/11.2.0/grid/root.sh

2）檢查集群的狀態，新節點cnsh230246成功加入集群：

$ crsctl stat res -t

NAME TARGET STATE SERVER STATE_DETAILS

Local Resources

ora.ACFS_DG.dg

ONLINE ONLINE cnsh230244ONLINE ONLINE cnsh230245OFFLINE OFFLINE cnsh230246

ora.DATA_DG.dg

ONLINE ONLINE cnsh230244ONLINE ONLINE cnsh230245OFFLINE OFFLINE cnsh230246

ora.FRA_DG.dg

ONLINE ONLINE cnsh230244ONLINE ONLINE cnsh230245OFFLINE OFFLINE cnsh230246

ora.LISTENER.lsnr