HPUX MCSG安装详细参考手册.docx
《HPUX MCSG安装详细参考手册.docx》由会员分享,可在线阅读,更多相关《HPUX MCSG安装详细参考手册.docx(16页珍藏版)》请在冰豆网上搜索。
HPUXMCSG安装详细参考手册
HP-UXMC/SG安装详细参考手册
一、配置MC的基本过程
本表仅供参考:
建立/.rhosts,使root对两机的所有资源都有所需的权限
建立Cluster的配置文本:
/etc/cmcluster/config.d
建立pkg1:
/etc/cmcluster/pkg1/pkg1.conf
/etc/cmcluster/pkg1/tl
/etc/cmcluster/pkg1/service1
同步两机的MC配置文件:
rcp-r/etc/cmclusterMachineB:
/etc
检查配置是否正确:
cmcheckconf-v-C/etc/cmcluster/cmclconf-P/etc/mcluster/pkg0/pkg0.conf\
-P/etc/cmcluster/pkg1/pkg1.conf
编译、分发配置:
cmapplyconf-v-C/etc/cmcluster/cmclconf-P/etc/cmcluster/pkg0/pkg0.conf\
-P/etc/cmcluster/pkg1/pkg1.conf
修改LVM启动文件/etc/lvmrc
AUTO_VG_ACTIVATE=0
使VG00,VG01,VG02不随系统的启动便置为可用
修改/etc/hosts增加对pkg0和pkg1浮动地址的定义[Optional]:
pkg0132.97.4.12
pkg1132.97.4.14
修改MC/ServiceGuard启动文件/etc/rc.config.d/cmcluster
AUTOSTART_CMCLD=1
检查/etc/rc.config.d/nfsconf,参数值应设置如下:
[没必要]
NFS_CLIENT=0
NFS_SERVER=0
同步两机的相关的配置文件:
/.rhosts
/etc/lvmrc
/etc/rc.config.d/nfsconf
/etc/rc.config.d/cmcluster
/etc/passwd
/etc/group
/etc/hosts
/etc/cmcluster/*
运行cluster:
cmruncl-v
cmviewcl–v
检查LOG:
/etc/cmcluster/pkg1/control.sh.log
/var/adm/syslog/syslog.log
二、关于本文
编写本文的目的
公司的技术人员,根据该模板均能成功安装配置统一风格、符合FR规范的MC高可用系统,通过本文档,系统管理员可对双机的基本概念有一定的了解;可完成双机的安装配置、日常管理、监控等任务。
规则定义及说明
主机命名规则:
本文的主机名分别是:
node1和node2;并用蓝色表示该名称可随不同环境改变。
其他说明:
本文所有蓝色字符均为根据不同环境修改的;而褐色部分则为可选内容,即这些操作可根据用户实际需要选择;红色表示重要部分。
三、安装软件
l安装MC/ServiceGuard软件。
l安装DatabaseToolkits软件
(安装后位于/opt/cmcluster/toolkit/目录内)。
l使用swinstall命令进行上述安装。
四、准备系统
建立主机信任关系
l编辑安全控制文件/.rhosts:
包含其他节点的根用户授权,如
node1root
node2root
启动时间同步进程
l建议在各个节点上面激活NTP(xntpd进程),编辑/etc/ntp.conf文件。
(注:
该项可以跳过)
五、网卡准备
硬件要求:
每台服务器三块网卡(lan0、lan1、lan2)或两块网卡(lan0、lan1)加RS232串口(只有在双节点群集中使用),其中lan0作为主机的主网卡,作为数据通讯用,而lan1作为lan0的备份网卡,lan2(RS232)作为心跳信号通讯;[光两块网卡也可以,数据和心跳走一条线]
网卡配置:
网卡的配置在/etc/rc.config.d/netconf文件中定义。
注意,在此文件中应将主网卡进行配置,而备份网卡不能配置IP地址。
六、准备磁盘
(关键是共享磁盘--如:
磁盘阵列)
创建逻辑卷(LV)结构
创建root盘的镜像
l如果不需要的话,可以不做(只能使用命令完成,不能使用SAM)
l建立bootableLVM,以备作为root盘的镜像:
#pvcreate-B/dev/rdsk/cxtydz÷
l加入rootVG:
#vgextend/dev/vg00/dev/dsk/cxtydz÷
l将新盘作成boot盘:
#mkboot/dev/rdsk/cxtydz÷
l将AUTOFile复制到新盘的LIF区内:
#mkboot-a“hpux(disk;0)/stand/vmunix”\
/dev/rdsk/cxtydz÷
l对root和primaryswapLV在新盘上做镜像(注意,应将VG00中的所有设备均做镜像,如/usr、/swap等):
#lvextend-m1/dev/vg00/lvol1/dev/dsk/cxtydz÷
l更新BDRA中的boot信息:
#/usr/sbin/lvlnboot-v-r/dev/vg00/lvol1÷
#/usr/sbin/lvlnboot-s/dev/vg00/lvol2÷
l检查BDRA是否正确:
#/usr/sbin/lvlnboot-R/dev/vg00÷
l确认镜像的正确性:
#lvlnboot-v÷
创建卷组(VG)和逻辑卷(LV)
注:
(可以使用SAM或命令方式)
l选择VG所使用的磁盘(得到每个节点上可以看见的磁盘,识别出共享磁盘一般表现为磁盘阵列设备文件),在每个节点上面均执行下面的命令,列出每个节点可见的磁盘设备:
#lssf/dev/dsk/*d0÷
l在节点1上面创建物理卷(PV)
#pvcreate/dev/rdsk/c1t2d0÷
#pvcreate/dev/rdsk/c0t2d0÷
l在节点1上面创建卷组(VG)
创建卷组目录
#mkdir/dev/卷组名÷
在卷组目录内创建卷组控制文件
#mknod/dev/卷组名/groupc640xhh0000÷
(其中,主设备号总是64,次设备号以16进制数0xhh0000表示,hh必须在系统内唯一,使用系统中下一个可用的数值。
使用下面的命令可以得到系统中已经存在的卷组:
#ls-l/dev/*/group÷)
创建卷组并将物理卷加入其中
#vgcreate/dev/卷组名/dev/dsk/c1t2d0÷
#vgextend/dev/卷组名/dev/dsk/c0t2d0÷
l重复上述步骤创建其他卷组
l在节点1上面创建逻辑卷(LV)
#lvcreate-L12/dev/卷组名÷
l在节点1上面创建文件系统(如果需要)
在新建的逻辑卷上面创建文件系统
#newfs-Fvxfs/dev/卷组名/rlvol1÷
创建mount目录点
#mkdir/mnt1÷
Mount文件系统以检查正确性
#mount/dev/卷组名/lvol1/mnt1÷
修改卷组属性
在node1上deactivate卷组:
#umount/mnt1÷
#vgchange-an/dev/卷组名÷
在另一台主机上设置VG
(只能使用命令方式完成)
1)在节点1上面,生成卷组映像文件
#vgchange–cy/dev/卷组名÷//改为cluster模式
#vgexport-v–s-p-m/tmp/卷组名.map/dev/卷组名÷
2)在节点1上面,将卷组映像文件复制到节点2
#rcp/tmp/卷组名.mapnode2:
/tmp/卷组名.map÷
3)在节点2上面,创建卷组目录
#mkdir/dev/卷组名÷
4)在节点2上面,创建卷组控制文件
#mknod/dev/卷组名/groupc640xhh0000÷
5)在节点2上面,使用从节点1复制的卷组映像文件中的信息建立卷组结构
#vgimport-v–s-m/tmp/卷组名.map/dev/卷组名\÷
/dev/dsk/c1t2d0/dev/dsk/c0t2d0÷
(注意,在节点2上面的设备文件名字可能与节点1上面不同,必须确认)
6)在节点2上面激活卷组
#vgchange-ay/dev/卷组名÷
7)创建mount目录点
#mkdir/mnt1÷
Mount文件系统以检查正确性
#mount/dev/卷组名/lvol1/mnt1÷
9)Umount文件系统
#umount/mnt1÷
10)DeactivateVG
#vgchange-an/dev/卷组名
创建其他卷组结构
重复上述步骤,创建其他卷组结构
所有卷组创建完成后
编辑/etc/lvmrc文件,保证在系统启动时不自动激活与CLUSTER有关的卷组(将AUTO_VG_ACTIVATE置为0,并确认root卷组包含在custom_vg_activation函数内)。
这些卷组将在应用包的control.sh文本中激活。
最后步骤
配置MC/ServiceGuard双机前的最后步骤
在配置节点(节点1)上激活所有卷组
#vgchange-ay/dev/卷组名÷
七、配置CLUSTER
(可以使用SAM或命令方式完成)
生成CLUSTER配置文件模板[可以用现成的改]
#cmquerycl-v-C/etc/cmcluster/cmclconf.ascii-nnode1\÷
-nnode2÷
编辑CLUSTER配置文件模板
CLUSTER_NAMEcluster1#CLUSTER的名字
FIRST_CLUSTER_LOCK_VG/dev/vg01#LOCK卷组,集群解体,各节点谁先抢到LockVG就有谁重组集群。
NODE_NAMEnode1#节点名字
NETWORK_INTERFACElan1
HEARTBEAT_IP15.13.171.32#lan1是HEARTBEAT网络
NETWORK_INTERFACElan2#lan2是备份网络
NETWORK_INTERFACElan0#[此网卡不配也可]
STATIONARY_IP192.6.143.10#lan0的静态IP地址
FIRST_CLUSTER_LOCK_PV/dev/dsk/c1t2d0#LOCK盘的物理卷名字
#SERIAL_DEVICE_FILE/dev/tty0p0#RS232串行HEARTBEAT线路
NODE_NAMEnode2
NETWORK_INTERFACElan1
HEARTBEAT_IP15.13.171.30//心跳
NETWORK_INTERFACElan2//备份
NETWORK_INTERFACElan0//数据
STATIONARY_IP192.6.143.20
FIRST_CLUSTER_LOCK_PV/dev/dsk/c1t2d0
#SERIAL_DEVICE_FILE/dev/tty0p0
HEARTBEAT_INTERVAL1000000
NODE_TIMEOUT2000000
AUTO_START_TIMEOUT600000000
NETWORK_POLLING_INTERVAL2000000
VOLUME_GROUP/dev/vg01
VOLUME_GROUP/dev/vg02#注:
所有CLUSTER相关的卷组都要在此写出
检查CLUSTER配置的正确性
(强烈建议:
任何时候对双机配置文件做过改动,重新启动双机之前必须进行配置的检查)
#cmcheckconf-v-C/etc/cmcluster/cmclconf.ascii÷
设置自动启动参数
编辑文件/etc/rc.config.d/cmcluster,将参数AUTOSTART_CMCLD设为1,则在系统自举时自动启动CLUSTER。
八、配置Package和Services
(可以使用SAM或命令方式完成)
创建子目录
在/etc/cmcluster中为每个Package创建子目录
#mkdir/etc/cmcluster/pkg1÷
#mkdir/etc/cmcluster/pkg2÷
建立配置文件模板
为每个Package建立一个配置文件模板
#cmmakepkg-p/etc/cmcluster/pkg1/pkg1conf.ascii÷
#cmmakepkg-p/etc/cmcluster/pkg2/pkg2conf.ascii÷
编辑配置文件模板
编辑Package配置文件,根据实际需要修改相关项:
PACKAGE_NAMEpkg1
NODE_NAMEnode1主节点
NODE_NAMEnode2备份节点
RUN_SCRIPT/etc/cmcluster/pkg1/control.shPackage启动脚本
RUN_SCRIPT_TIMEOUTNO_TIMEOUT
HALT_SCRIPT/etc/cmcluster/pkg1/control.shPackage停止脚本
HALT_SCRIPT_TIMEOUTNO_TIMEOUT
SERVICE_NAMEservice1对每个service重复此3行定义
SERVICE_CMD[]
SERVICE_FAIL_FAST_ENABLEDNOService是标识应用avalible与否的。
SERVICE_HALT_TIMEOUT300
SUBNET15.16.168.0Package对应的子网(可以多个)。
虚拟IP的子网。
各个不同的Package间子网可以相同。
此子网和真实的子网必须一致。
虚拟IP在control.sh中指定。
PKG_SWITCHING_ENABLEDYES
NET_SWITCHING_ENABLEDYES
NODE_FAIL_FAST_ENABLEDNO
建立控制脚本的模板
建立Package控制脚本的模板
#cmmakepkg-s/etc/cmcluster/pkg1/control.sh÷
控制脚本模式设置
将Package控制脚本设为可执行模式
#chmod+x/etc/cmcluster/pkg1/control.sh÷
编辑控制脚本
编辑修改Package控制脚本时注意进行以下工作:
l在PATH中增加启动service所需要的路径
l增加需要激活的卷组名字
l增加需要mount的文件系统和逻辑卷的名字
l定义IP地址和子网
l增加service名字
l增加service命令
l注意函数start_services和halt_services中启动和停止service使用的脚本参数,保证service启动和停止命令的正确性
检查并分发配置文件
l将Package控制脚本复制到其他节点
#rcp/etc/cmcluster/pkg1/control.sh\÷
node2:
/etc/cmcluster/pkg1/control.sh÷
l检查CLUSTER配置(强烈建议:
任何时候对双机配置文件做过改动,重新启动双机之前必须进行配置的检查)
#cmcheckconf-C/etc/cmcluster/cmclconf.ascii\÷
-P/etc/cmcluster/pkg1/pkg1conf.ascii\÷
-P/etc/cmcluster/pkg2/pkg2conf.ascii÷
l停止Cluster
l生成并分发二进制CLUSTER配置文件
#cmapplyconf-v-C/etc/cmcluster/cmclconf.ascii\÷
-P/etc/cmcluster/pkg1/pkg1conf.ascii\÷
-P/etc/cmcluster/pkg2/pkg2conf.ascii÷
l启动Cluster
九、管理Cluster和Package
管理Cluster和节点
启动Cluster
#cmruncl-v÷
#cmruncl-v-nnode1-nnode2÷
在已运行的Cluster中增加一个节点运行
#cmrunnode-vnode2÷
在已运行的Cluster中停止一个节点运行
#cmhaltnode-f-vnode2÷
停止整个Cluster
#cmhaltcl-f-v÷
对Cluster进行重新配置
l停止整个Cluster
l如果要改变CLUSTERLOCKVG,则
#vgchange-cnvg01÷
#vgchange-ayvg01÷
l重新进行配置工作
lcmapplyconf
lcmruncl
管理Package和Service
启动Package
#cmrunpkg-nnode1pkg1÷
#cmmodpkg-enode1pkg1÷//把切换属性置为yes.故障发生后可以自动切换。
很重要!
!
停止Package,不切换
#cmhaltpkgpkg1÷
移动Package
#cmhaltpkgpkg1-nnode1÷
#cmrunpkg-nnode2pkg1÷
#cmmodpkg-epkg1÷//让package可以切换
对Package进行重新配置
l停止整个Cluster
l修改配置文件
l修改control.sh文件(注意保证所有节点一致)
lcmapplyconf
lcmruncl
查看运行情况
#cmviewcl-v÷
十、测试Cluster配置
测试PackageManager
1)得到service的pid(使用ps-ef命令)
2)杀死service进程(使用kill命令)
3)使用cmviewcl-v命令查看状态
4)将Package移动回原节点
5)对数据库系统的测试可以根据具体情况进行
测试ClusterManager
1)关闭一个节点的电源
2)使用cmviewcl-v命令查看状态
3)打开节点的电源
4)使用cmviewcl-v命令查看状态
5)将Package移动回原节点
6)对数据库系统的测试可以根据具体情况进行
测试NetworkManager
1)使用lanscan命令得到主/备网络信息
2)使用cmviewcl-v命令查看状态
3)从主网卡上拔掉网线
4)使用cmviewcl-v命令查看状态(应完成本地网络切换)
5)重新连接网线
6)使用cmviewcl-v命令查看状态
激活VG的方式
1)独占方式
#vgchange–ae/dev/vgxx//以独占方式激活
2)普通方式
#vgchange–cn/dev/vgxx
#vgchange–ay/dev/vgxx
十一、故障诊断方法
1、检查Cluster和Package状态
使用cmviewcl-v命令
2、检查RS232状态
使用cmviewcl-v命令
3、检查PackageIP地址
使用netstat-in命令
4、查看LOG文件
/var/adm/syslog/syslog.log
/etc/cmcluster/pkg1/control.sh.log
5、查看Cluster和Package配置文件
6、查看Package控制脚本文件(control.sh)
7、使用cmquerycl和cmcheckconf命令检查配置的合法性
8、检查LAN配置情况
#netstat-in
#lanscan
#arp-a
#landiag
#linkloop
#/usr/contrib/bin/cmgetconfig-f
#cmviewcl-v
附:
一些有用的系统命令
查看硬件配置情况
#/usr/sbin/dmesg
#/usr/sbin/ioscan
#/usr/sbin/lssf/dev/rdsk/c0t5d0
#diskinfo/dev/rdsk/c0t5d0
#swapinfo÷
#lanscan÷
配置LAN
#/sbin/set_parmshostname
#/sbin/set_parmsip_address
编辑etc/hosts文件
reboot
或
#/sbin/set_parmsinitial(根据提示操作)
创建新文件系统
#newfs-Fhfs÷
#mkdir/mountpoint÷
#mount/mountpoint÷
Edit/etc/fstabfile
扩充HFS文件系统
#umount/mountpoint÷
#lvextend-L400÷
#extendfs÷
#mount/mountpoint÷
移动文件系统
#newfs-Fhfs/dev/vg01/rlvol1÷
#mkdir/home.new÷
#mount/dev/vg01/lvol1/home.new÷
#cd/home÷
#find.|cpio-pdumv/home.new÷
#rm-rf/home/*÷
#umount/home.new÷
#mount/dev/vg01/lvol1/home÷
#rmdir/home.new÷
文件系统日常维护
/var/adm/wtmp
/var/adm/btmp
/