卡生命周期项目运维手册.docx

1、卡生命周期项目运维手册卡生命周期维护手册上海理想信息产业（集团）有限公司二零一零年七月【目录】1 引言1.1 编写目的本文档是对卡生命周期管理项目的运维内容进行说明，适用于项目成员，系统维护人员。1.2 适用范围卡生命周期项目相关系统使用对象，包括：单位：企业信息化部、个客部卡中心、财务部、其他相关单位。系统：CRM、各卡平台、卡清分清算、ODS、卡生命周期管理系统（本项目新建）、过期11888卡脱机卡系统（本项目新建）卡业务范围：11888卡1.3 定义术语和缩写解释备注CRM客户关系管理系统IBM UVC统一充值平台华为UVC外围统一充值外围消息处理，包括卡充值、现金充值的处理理想三部OD

2、S运营数据系统理想二部清分清算卡交易情况的清分对账理想三部脱机卡库管理过期的11888卡信息理想三部卡生命周期又称财帐核对，主要体现卡财帐平衡关系，现金平衡关系理想三部1.4 参考资料参考文件备注卡生命周期管理项目建设方案-20091112(V3.4).doc卡生命周期管理项目_需求调研报告_20091204.doc卡生命周期管理项目_需求调研报告_20091214.doc2 客户基本信息项目名称项目编号项目经理初验日期试运行期限客户单位名称公司地址客户代表客户电话传真电子邮件邮编2 系统说明2.1 产品/项目介绍通过收集、分散在各系统中的电信卡流转数据，对11888卡生命周期数据，达到提供准

3、确的财帐核对数据及统计报表的目的。通过优化各卡系统之间的关系，从而减少人工管理环节，提高卡业务流程的规范性，具体目标如下： 新建卡生命周期管理子系统从CRM进销存系统、ODS、清分清算、UVC、过期11888卡脱机卡库等平台采集数据，并进行数据处理，提取满足平衡公式所需数据。完成 11888卡的进销存平衡公式、卡平台平衡公式、财务平衡公式以及三者之间在卡的生命周期各个环节上的统计报表。 新建11888卡脱机库平台新建11888卡脱机库，对11888脱机卡的进行存储和管理，为CRM提供11888脱机卡的余额查询功能。 优化卡清分清算平台为卡生命周期管理子系统提供使用各类卡为各计费网元的进行充值和

4、销账数据；增加退款信息，优化目前各卡平台和清分清算平台对账结算功能。2.2 产品/项目面向的用户本项目面象的用户，包括：企业信息化部、个客部卡中心、财务部、其他相关单位的运维操作人员。2.3 产品/项目范围 规范现有的业务操作流程在换卡操作、过期卡进收入、已过期卡未转收入、库存已销毁而平台未删除等情况发生时减少人工控制的环节。 通过系统自动形成财帐平衡报表数据的采集通过系统自动实现，避免人工加减数据，系统通过数据处理，并按照财务平衡公式进行计算，最终形成卡的财帐平衡报表。2.4 网络拓扑图2.5 系统设备详细情况见3 应用部署主机名称服务器所在位置IP地址应用名称部署目录Db-1Card_cy

5、cle_ws?Card_cycle_ws?T:/deploys_filesDb-1finaAccBalance?finaAccBalance?T:/deploys_filesDb-1Czph_uvc?Czph_uvc?T:/deploys_filesDb-1Czph_ods?Czph_ods?T:/deploys_filesDb-1Serv-U?Serv-U?E:/toolsDb-1Czph_total?Czph_total?T:/deploys_filesDb-2Card_cycle_ws?Card_cycle_ws?T:/deploys_filesDb-2finaAccBalance?fi

6、naAccBalance?T:/deploys_filesDb-2Czph_uvc?Czph_uvc?T:/deploys_filesDb-2Czph_ods?Czph_ods?T:/deploys_files?Db-2Serv-U?Serv-U?E:/toolsDb-2Czph_total?Czph_total?T:/deploys_files?说明：card_cycle_ws? 提供给crm查询/删除的webservice接口finaAccBalance 查询页面/报表展现及下载czph_ods crm数据采集czph_uvc uvc数据采集czph_total 报表数据分析/统计serv

7、-u 管理ftp服务4 系统软件信息内容子项情况说明备注操作系统操作系统版本Windows Server 2003 R2 企业版64位操作系统打补丁情况 SP 2安装目录C盘系统管理员名字、口令登录名：Administrator数据库系统厂商系统版本安装目录系统管理员名字、口令WEBLOGIC系统系统版本安装目录系统管理员名字、口令所提供的业务其他系统厂商系统版本安装目录系统管理员名字、口令5 远程接入方式内容描述接入软件Windows自带远程桌面工具IP地址用户名administrator口令admin6 系统安装在远程检查VCS集群状态，需要安装Veritas Cluster Monito

8、r软件，见附件7 系统维护7.1 应用进程和模块巡检（每天一次）设备名服务器名业务软件业务端口周期HA方式机器IP/服务IP应用数据库服务器-1Db-1Card_cycle_ws全天主用finaAccBalance全天主用Czph_uvc全天主用Czph_ods全天主用Serv-U全天主用Czph_total全天主用应用数据库服务器-2Db-2Card_cycle_ws全天备用finaAccBalance全天备用Czph_uvc全天备用Czph_ods全天备用Serv-U全天备用Czph_total全天备用1) 登陆：login: administratorPassword: admin2)

9、查看服务： 查看card_cycle_ws接口进程 巡检周期：每天第一步，使用weblogic登陆 ,用户名/密码：weblogic 第二步，查看server运行状态，点击左功能树lixiangdomain-部署查看右边界面红色部分，活动和ok说明服务正常。 查看finaAccBalance服务进程 巡检周期：每天第一步，使用weblogic登陆 ,用户名/密码：weblogic/ 第二步，查看server运行状态，点击左功能树lixiangdomain-部署查看右边界面红色部分，活动和ok说明服务正常。 查看czph_ods（采集crm数据）接口进程 巡检周期：每天 在开始-运行框内输入se

10、rvices.msc,查找ksmzq_crm_file_import_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止） 查看czph_uvc（采集uvc数据）接口进程 巡检周期：每天在开始-运行框内输入services.msc,查找ksmzq_uvc_file_import_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止） 查看czph_total（卡数据天、月统计）进程 巡检周期：每天在开始-运行框内输入services.msc,查找ksmzq_totalt_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态

11、为已停止） 查看serv-u ftp服务进程 巡检周期：每天在开始-运行框内输入services.msc,查找Serv-U File Server服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止）3) 查看业务日志其日志地址为T:logs可分别查看log目录下所有子文件夹中的*.log文件；日志检查的内容包括： 日志文件没有被删除。 所有*.log文件中均没有warning、error等异常提示信息。 日志文件大小没有发生异常增长。注意：在日志文件中看到类似error、warning等等表示错误的告警字样需向理想报障4) 查看cpu和内存查看服务器CPU占用率操作方法：通过Wi

12、ndows任务管理器-性能选项来检查。判断依据：CPU占用率达到80%时，报异常。（具体数值根据各系统情况而定）服务器内存状态操作方法：通过Windows任务管理器来检查。判断依据：内存占用率达到80%时，报异常。（具体数值根据各系统情况而定）5) 查看存储空间主要是T盘。注意：每天查看占用情况，当文件系统使用率超过80%时，需联系项目组进行日志数据清理。1) 登陆：login: administratorPassword: admin2) 查看服务：a) 查看card_cycle_ws接口进程 巡检周期：每天第一步，使用weblogic登陆 ,用户名/密码：weblogic 第二步，查看se

13、rver运行状态，点击左功能树lixiangdomain-部署查看右边界面红色部分，活动和ok说明服务正常。b) 查看finaAccBalance服务进程 巡检周期：每天第一步，使用weblogic登陆 ,用户名/密码：weblogic/ 第二步，查看server运行状态，点击左功能树lixiangdomain-部署查看右边界面红色部分，活动和ok说明服务正常。c) 查看czph_ods（采集crm数据）接口进程 巡检周期：每天 在开始-运行框内输入services.msc,查找ksmzq_crm_file_import_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态为

14、已停止）d) 查看czph_uvc（采集uvc数据）接口进程 巡检周期：每天在开始-运行框内输入services.msc,查找ksmzq_uvc_file_import_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止）e) 查看czph_total（卡数据天、月统计）进程 巡检周期：每天在开始-运行框内输入services.msc,查找ksmzq_totalt_Service服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止）f) 查看serv-u ftp服务进程 巡检周期：每天在开始-运行框内输入services.msc,查找Serv-U Fil

15、e Server服务，验证其状态是否为已启动（注：已切换为备机的话该状态为已停止）3) 查看业务日志其日志地址为T:logs可分别查看log目录下所有子文件夹中的*.log文件；日志检查的内容包括： 日志文件没有被删除。 所有*.log文件中均没有warning、error等异常提示信息。 日志文件大小没有发生异常增长。注意：在日志文件中看到类似error、warning等等表示错误的告警字样需向理想报障4) 查看cpu和内存查看服务器CPU占用率操作方法：通过Windows任务管理器-性能选项来检查。判断依据：CPU占用率达到80%时，报异常。（具体数值根据各系统情况而定）服务器内存状态操作

16、方法：通过Windows任务管理器来检查。判断依据：内存占用率达到80%时，报异常。（具体数值根据各系统情况而定）5) 查看存储空间主要是T盘。注意：每天查看占用情况，当文件系统使用率超过80%时，需联系项目组进行日志数据清理。7.2 主机巡检1、巡检内容主机名称巡检内容巡检目标巡检周期责任人备注IBM AIX主机系统错误报告如果有新的错误，分析是硬件原因还是软件原因周有无root用户邮件 如果有新的邮件，分析原因周查看hacmp.out如果系统使用了HACMP软件，查看该日志文件周查看文件系统使用率确保关键文件系统的使用率不超过80周查看逻辑卷有无stale如果有卷stale，需要做同步月内

17、存交换区是否超过70如果超过70，需要扩大内存交换区月内存交换区是否为物理内存的1倍以上如果内存交换区小于物理内存大小，需要扩大内存交换区月网络通讯测试主机和网关的联通性月系统dump设置是否正确查看系统dump目录是否为/var/adm/ras月查看rootvg是否有镜像确保rootvg有两块磁盘月系统性能检测查看主机的CPU、MEM、DISK性能季度其他方式Hp主机系统错误报告如果有新的错误，分析是硬件原因还是软件原因月查看文件系统使用率确保关键文件系统的使用率不超过80月内存使用是否超过70如果持续超过70，需要扩大内存或重启释放内存周CPU占用率是否超过70如果持续很长时间超过70%，

18、建议重启周网络通讯测试主机和网关的联通性周服务器运行时温度、散热情况检查，风扇是否正常运转服务器运行温度是否处于正常运行状态范围内，风扇运转正常，检查CPU温度是否在正常范围内周其他方式2、巡检方法 详细说明每一项巡检的步骤，同时说明根据巡检结果如何判断系统是否存在异常。3、巡检频率 注明建议的巡检频率及原因。8 系统常见问题及解决方法8.1 ftp数据如果倒入失败或者未完全倒入，该数据文件将会被移至err文件夹下，该情况可通过页面查询。解决方法：第一步登陆页面点击左侧菜单项“数据采集结果查询”：第二步，选择文件导入归属和处理结果，如有文件部分导入和导入失败的记录，请联系相关归属平台确认文件格式的正确性。8.2 ftp服务无法使用，检查serv-u软件是否工作正常。8.3 汇总报表数据不全（文件少了或者数据少了），需要回退操作1）根据缺失文件或者记录的时间删除日汇总表（表名：t_expired_day_total、t_delete_day_total）中的记录。2） 新的数据文件导入成功后，重新统计日汇总记录。8.4 服务停止。由于所有应用服务均已由ha软件托管，任一服务发生异常了，将自动切换至备机。如其他服务正在处理文件，该文件的后缀名会变更为.doing，切换后请手动将文件改为初始文件名，程序将会重新自动处理。9 应急情况预案见文档结束