软件系统运维指导手册.docx

1、软件系统运维指导手册系统日常维护指导手册1、目的网e通宽带网络运营支撑系统使用的服务器中， 服务器均采用redhatlinuxas4操作系统，数据库版本为：oraclelOg，随着业务的开展，oracle数据库中存储的 数据量也不断增大，这样操作系统和数据库的日常维护就显得十分重要。本手册详细描述了程序模块，linux操作系统，DHCP双机热备、负载平衡 及oracle数据库等日常检查的主要步骤，指导现场工程师对其进行监控和维护。 2适用范围使用者为网e通宽带网络运营支撑系统维护工程师3、服务器及数据库概述服务器概述服务器数量：4台，基本信息如下：服务器机器型号1操作系统安装的模主机名Ip地址

2、块主服务 器DELLPCCm鉴权数 据库 业务支撑 数据库主 DHCP服务oracle01eth0:从服务 器DELLPC从 DHCP 服务oracle02eth0:数据库概述数据库软件分别安装在主服务器上/dev/mapper/VolGroupOO-LogVolOO 逻辑卷上 ORACLE_BASE=/opt/oracleORACLE_HOME=/opt/oracle/product/10.2.0ORACLE_SID=oracmts4、系统服务程序的详细说明 系统服务程序的构成DHCP主程序：所在服务器主服务器（ip:）程序名称Dhcpd所在目录/opt/dpcpDHCP从程序:所在服务器程

3、序名称Dhcpd所在目录/opt/dpcp系统服务程序的启动、关闭及维护管理4.2.1dhcp主服务4.2.1.1dhcp主服务说明所在目录程序名称程序简要说明/opt/dpcpDhcpdDhcp主程序/etc/主程序的配置文件/var/state/dhcp/租约数据库 4.2.1.2dhcp启动、关闭及进程查看方法1、启动方法：输入:cd/opt/dpcp./dhcpd 即可注意：请首先确认数据库服务正常，数据库监听正常。 输出：rootlocalhostdhcp$./dhcpd InternetSystemsConsortiumDHCPServerV3.0.4 Copyright2004-

4、2006InternetSystemsConsortium.Allrightsreserved.Forinfo,Wrote1leasestoleasesfile.ListeningonLPF/eth0/00:0cSendingonLPF/eth0/00:0c SendingonSocket/fallback/fallback-net 说明：dhcp启动时，会启动1个进程，正常情况下，dhcp启动的进程数为1个。2、关闭方法 输入： killpid说明：pid为进程号，可使用进程查看获得。如|-dhcpd(4665),则进程id为4665, 则 kill4665 就可关闭 dhcp。3、进程查看

5、输入： rootlocalhostdhcp#pstree-p|grepdhcp 输出：|-dhcpd(4665)4.2.1.3 配置说明 启动配置文件： etc/可使用 more 或者 tail 命令查看 配置服务配置，更改后需要重新启动才能生效，该配置文件的设置需要与从服 务器的配置文件吻合。配置文件全文如下：# #DHCPServerConfigurationfile.# ddns-update-stylenone; failoverpeerbuptdhcpprimary; port519;peeraddress19 peerport520;max-response-delay60; ma

6、x-unacked-updates10;mclt600;split128; loadbalancemaxseconds3;# cisico1_cm filename;default-lease-time3600;pool failoverpeerbuptdhcp; denydynamicbootpclients;# cisico1_iad shared-networkcisico1_iaddefault-lease-time3600;poolfailoverpeerbuptdhcp; denydynamicbootpclients;# cisico1_cpe shared-networkcis

7、ico1_cpe default-lease-time3600;pool failoverpeerbuptdhcp; denydynamicbootpclients;ip 租约 租约数据库 /var/state/dhcp/ 可使用 more 或者 tail 命令查看 记录当前服务器与对方服务器的服务状态与分配的 示例如下：starts22007/11/2713:15:22;en ds32007/11/2813:15:22;tstp32007/11/2813:15:22;bindin gstateactive;n extb indin gstatefree; hardwareethernet00

8、:11:1a:07:2e:8e;uid001000021032007.216; :11:1a:7:2e:8e;Dhcp状态如下：failoverpeer namestatemystate normalat2007/11/2713:15:22; peerstate normalat2007/11/2713:15:22;4.2.2dhcp从服务4.2.2.1dhcp从服务说明所在目录程序名称程序简要说明/opt/dpcpDhcpdDhcp主程序/etc/主程序的配置文件/var/state/dhcp/租约数据库所在目录程序名称程序简要说明/opt/dpcpDhcpdDhcp主程序/etc/主程序的

9、配置文件/var/state/dhcp/租约数据库4.2.2.2dhcp启动、关闭及进程查看方法1、启动方法:输入:cd/opt/dpcp./dhcpd 即可注意：请首先确认数据库服务正常，数据库监听正常 输出：rootlocalhostdhcp$./dhcpdIn ternetSystemsCo nsortiumDHCPServerV3.0.4 Copyright2004-2006l nternetSystemsCo nsortium. Allrightsreserved.Fori nfo,pleasevisitWrote1leasestoleasesfile.ListeningonLPF/

10、eth0/00:0c SendingonLPF/eth0/00:0cSendingonSocket/fallback/fallback-net说明：dhcp启动时，会启动1个进程，正常情况下，dhcp启动的进程数为1个。2、关闭方法 输入： killpid说明：pid为进程号，可使用进程查看获得。如|-dhcpd(4665),则进程id为4665, 则 kill4665 就可关闭 dhcp。3、进程查看输入： rootlocalhostdhcp#pstree-p|grepdhcp 输出：|-dhcpd(4665)4.2.2.3配置说明 启动配置文件： etc/ 可使用 more 或者 tail

11、 命令查看 . 配置服务配置，更改后需要重新启动才能生效，该配置文件的设置需要与主服 务器的配置文件吻合。配置文件全文如下：# #DHCPServerConfigurationfile.# ddns-update-stylenone;failoverpeerbuptdhcpsecondary; port520;60; peerport519;max-response-delay60; max-unacked-updates10;mclt600; #split128;loadbalancemaxseconds3;# cisico1_cm filename; default-lease-time3

12、600;poolfailoverpeerbuptdhcp; denydynamicbootpclients;# cisico1_iad shared-networkcisico1_iad default-lease-time3600; pool failoverpeerbuptdhcp; denydynamicbootpclients;# cisico1_cpe shared-networkcisico1_cpe default-lease-time3600;pool failoverpeerbuptdhcp; denydynamicbootpclients;租约数据库 /var/state/

13、dhcp/ip 租约记录当前服务器与对方服务器的服务状态与分配的 示例如下：starts22007/11/2713:15:22; ends32007/11/2813:15:22; tstp32007/11/2813:15:22;bindingstateactive; nextbindingstatefree;hardwareethernet00:11:1a:07:2e:8e; uid001000021032007.216; :11:1a:7:2e:8e;Dhcp 状态如下：failoverpeer namestatemystate normalat2007/11/2713:15:22; pee

14、rstate normalat2007/11/2713:15:22; 4.2.3web管理模块4.2.3.1web管理模块中主要目录说明 /opt/apache为 apache模块所在目录 /opt/taiyuan为web程序存储目录 4.2.5.2web管理模块中各程序说明 命令所在目录：/opt/apache/b in命令命令说明apachectlApacheHTTP服务器控制接口httpdApache超文本传输协议服务器abApacheHTTP服务器性能测试工具apxsAPache功能扩展工具dbmma nage建立和更新DBM形式的基本认证文件htdigest建立和更新摘要认证文件ht

15、passwd建立和更新基本认证文件logresolve将Apache日志文件中的IP地址解析为主机名rotatelogs滚动Apache日志而无须终止服务器4.2.5.3web站点启动、关闭及进程查看方法命令所在目录命令命令说明/opt/apache/b in./apachectlstart启动httpd/opt/apache/b in./apachectlstartssl启动httpd并加载SSL服务/opt/apache/b in./apachectlstop关闭apache/opt/apache/b in./apachectlstatus查看即ache的状态4.2.5.4web日志说明L

16、og 存放目录为：/opt/apache/logs/opt/apache/logs/access_lo前所有访问网站的日志/opt/apache/logs/error_log 为错误信息日志/opt/apache/log为主进程的pid号/opt/apache/logs/ssl_engine_log为ssl引擎日志，即ssl的运行日志，可以通过查 看此日志了解运行状态及错误。/opt/apache/logs/ssl_request_log ssl 请求日志即是哪个ip使用httpsssi协议登录web站点，请求的时间，内容，访问的页面 等。425.5日常维护维护分为：业务维护及系统维护 业务维

17、护就是，利用系统管理员的身份，查看操作日志 系统维护是：定期查看系统日志，apache日志等，看是否有运行错误，并定期 备份日志。5、 服务器硬件维护（略）6、 linux 系统的日常维护 定期检查磁盘空间使用df显示磁盘空间输入： oraclelocalhostserver$df 输出：Filesystem1K-blocksUsedAvailableUse%Mountedon说明：这里显示了 /、/boot、/home分区挂载的系统分区使用的大小，磁盘空间以 k为单位。可以加参数 -horaclelocalhostserver$df-hFilesystemSizeUsedAvailUse%M

18、ountedon/dev/cciss/c0d0p2103G7.3G91G8%/ /dev/cciss/c0d0p199M13M82M13%/boot 2.0G2.0G%/dev/shm/dev/cciss/c0d0p530G181M28G1%/home当某空间使用率超过85%时，通过du查看是哪些文件占用的空间比较大 例如 /home使用了 85%cd/home以root用户查看su输入root用户密码rootlocalhost/#du-m-max-depth=1-m 是以 M 大小显示-max-depth=1表示只是一级子目录的大小，如果想查看二级的就写为 2找出占用很大的文件，经判断后决定

19、删除或转移。使用 top 工具监视 cpu 及内存的使用率每隔5秒，top工具确定哪些进程消耗最多的cpu时间，并按递减顺序在屏幕 显示。输入： oraclelocalhost/$top输出：top-10:52:46up6days,39min,2users,loadaverage:,Tasks:123total,1running,122sleeping,0stopped,0zombieCpu(s):%us,%sy,%ni,%id,%wa,%hi,%siMem:8247956ktotal,1828612kused,6419344kfree,119476kbuffersSwap:8385920kt

20、otal,0kused,8385920kfree,1526064kcachedPIDUSERPRNIVIRTRESSHRS%CPU%MEMTIME+COMMAND说明：当发现个别进程占用率很高，可以通过用“ ps-axj|grep进程名”查看这个进程在进行什么操作，如果发现这个进程持续的时间很长，而且非系统必要进 程；可以通过“ kill 进程的PID号，将进程杀死。（不确定情况下，请不要 使用）；退出 top 用 ctrl+c。 定期查看 root 邮件输入：oraclelocalhostlog$su-lPassword:rootlocalhostroot#mail输出：m说明：前面为N的表

21、示新邮件可以在&后面输入1,代表看第一封信，ctrl+c表示退出查看这封信，h显示 所有的如果都看过的邮件，就可以通过d来删除如果删除110就用& d1-10这样就会删除1-10的信。 定期查看系统日志系统的日志存储于 /var/log 目录下，需要定期查看，常用日志说明如下： :该文件记录了系统在引导过程中发生的事件， 就是 Linux 系统开机自检过程显示的信息maillog:该日志文件记录了每一个发送到系统或从系统发出的电子邮件的活动messages亥日志文件是许多进程日志文件的汇总，从该文件可以看出任何入侵 企图或成功的入侵lastlog:该日志文件记录最近成功登录的事件和最后一次不成

22、功的登录事件，由 login 生成wtmp:该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件 xferlog:该日志文件记录FTP会话，可以显示出用户向FTP服务器或从服务器 拷贝了什么文件 cron:该日志文件记录crontab守护进程crond所派生的子进程的动作，前面加上 用户、登录时间和PID，以及派生出的进程的动作7、备份策略 备份方式为了保证数据库的高安全性，目前我们采用的数据库备份方式为物理备份 和逻辑备份相结合的方式，数据库归档模式为自动归档模式。这样当数据库出 现故障时，我们就可以利用备份文件与归档方法相结合，作数据库 “最新状态 ” 的恢复。备份计划通过自动备份

23、脚本实现每天进行一次热备份及逻辑备份，每周进行一次冷 备份。所备份的数据文件存储于磁阵上的硬盘。常见故障恢复我们首先从/opt/oracle/admin/oracmts/bdump下的日志文件判断是什么故 障。通过查看v$recover_file来确定哪些文件需要恢复，通过查看 v$datafile视图 查看文件ID和文件名之间的相关性通过下面的命令查看需要恢复的数据文件的文件 ID号：selectfile#,online,errorfromv$recover_file;通过视图返回名字和相应的文件 ID:selectname,file#fromv$datafile; 通过这些信息，决定对哪些

24、文件进行恢复，及其采用的恢复方式。7.3.1实例故障当oracle实例由于突然断电或者操作系统故障而崩溃时，可以通过输入 dbstart即可开启数据库，无须发布恢复命令，oracle会自动执行崩溃恢复，最好 启动前后检查日志文件7.3.2介质故障介质故障发生在数据库结构组织出现毁坏时，在这些组织中数据库文件不 能进行读写。在数据库打开的情况下，如果是system表空间的数据文件出现介质失败， 那么oracle需要在mount状态下恢复其数据文件，如果是其他表空间，可以只对介质失败涉及到的数据文件进行恢复，即在 数据库打开的状态下进行恢复。步骤如下：1确定需要恢复的数据文件2使数据文件脱机 3拷

25、贝数据文件备份到原目标地址 4恢复表空间或数据文件 5使表空间或数据文件联机 例：当出现以下信息时，说明是数据库的system表空间出现了问题ERROR: ORA-00604:erroroccurredatrecursiveSQLlevel1 ORA-01116:errorinopeningdatabasefile1 ORA-01110:datafile1:/opt/oracle/oradata/oracmts/ ORA-27041:unabletoopenfileLinuxError:2:NosuchfileordirectoryAdditionalinformation:3System 出

26、现介质失败，表示被误删或被损坏，可以执行如下：1）首先登录 SQL*PLUS 并启用 SYSDBA 权限 输入： :sqlplususer/passwdoracmts;connect/assysdba（; 启动 SYSDBA 权限）shutdownabort （关闭数据库） startupmount （加载数据库） 也可以通过查看视图，确定哪个文件需要恢复 SQLselectfile#,errorfromv$recover_file;FILE#ERROR 1FILENOTFOUND查看 v$datafile 视图查看对应关系 SQLselectfile#,namefromv$datafile;

27、 FILE#NAME1/opt/oracle/oradata/oracmts/2/opt/oracle/oradata/oracmts/3/opt/oracle/oradata/oracmts/FILE#NAME4/opt/oracle/oradata/oracmts/知道要恢复的是 1（）：2） 在SQL提示符下输入 alterdatabasedatafile/opt/oracle/oradata/oracmts/offline;3） 再打开一个终端： 将备份数据文件拷贝到原目标地址，即： cp/opt/backup/opt/oracle/oradata/oracmts/4）然后进行恢复SQ

28、Lrecoverdatafile1;或 recoverdatafile/opt/oracle/oradata/oracmts/;如果不需要归档日志文件进行恢复，即输出Mediarecoverycomplete.如果需要归档日志文件参与恢复，即输出：ORA-00279:change2246878generatedat07/22/200516:28:13neededforthread1 ORA-00289:suggestion:/opt/oracle/oradata/archiveORA-00280:change2246878forthread1isinsequence#167Specifylog

29、:=suggested|filename|AUTO|CANCEL输入：auto即可自动完成恢复。输出：ORA-00279:change2366990generatedat07/25/200500:00:09neededforthread1ORA-00289:suggestion:/opt/oracle/oradata/archiveORA-00280:change2366990forthread1isinsequence#185ORA-00278:logfile/opt/oracle/oradata/archiverecoveryORA-00279:change2375106generated

30、at07/25/200504:00:54neededforthread1ORA-00289:suggestion:/opt/oracle/oradata/archiveORA-00280:change2375106forthread1isinsequence#186 ORA-00278:logfile/opt/oracle/oradata/archive recoveryLogapplied.Mediarecoverycomplete.（表示恢复结束）5） 在SQL提示符下输入alterdatabasedatafile/opt/oracle/oradata/oracmts/online;6） 打开数据库即可，在SQL提示