某银行数据中心搬迁整体实施计划方案.docx

1、某银行数据中心搬迁整体实施计划方案某银行机房搬迁项目搬迁策略报告1概述某银行数据中心搬迁目标某银行现在使用的机房于1997年建成,位于某市深南东路,随着业务不断发展,业务系统持续增加,机房区间、机房电力空调等基础设施容量趋于饱和,当时设计的能力已难以满足某银行业务发展需要.位于某市保税区市花路的新数据中心,与现机房距离为15公里,预计2010 年2 月12日完成机房整体建设.为满足业务发展需要,某银行需尽快实施新数据中心的搬迁,使数据中心的综合管理和生产运行能力上一个新台阶.某银行初步计划于2010 年3月份实施现有数据中心的整体搬迁,搬迁期间整个银行业务将全部中断,其对外影响非常重大.某银行

2、数据中心搬迁的目标为：完成当前数据中心及中心机房内部所有IT基础设备的现状梳理、根据某银行自身的业务特点和业务需求,制定出符合某银行的搬迁策略和详细方案,保障业务系统顺利搬迁到新数据中心,将搬迁的风险以及搬迁对业务的影响降到最低.某银行数据中心搬迁范围某银行数据中心搬迁的范围主要是某银行位于某市某路某号,某银行大楼数据中心的67个计算机系统101个业务系统,包括核心业务系统、网银系统、外联系统等.其中：计算机设备1063台,包括：主机小型机服务器SAN存储、磁带库、磁带机网络设备UPS、空调、加密机等其他设备机房 范围 5楼大机房 、小机房24楼信用卡测试设备27楼资产管理部5楼动力机房设备利

3、旧11楼测试机房某银行分行 部分测试设备 不包括：11楼集中作业部,22楼金融市场部1楼机房 ,某银行分行 库房 具体的业务系统如下表所示.类别 业务系统 子应用系统 核心业务 综合客服、信用卡、个贷 4个 前置类业务 卡交换、综合理财、黄金交易、个人实盘外汇买卖、开放式基金代销、资讯平台、保理、商业汇票、银银合作、资金交易前中后一体化、现代化支付、供应链金融、第三方存管、联网核查公民身份信息、前置、分行前置等 42个 渠道类业务 网上银行、95501客户服务中心、终端、全行b/s查询机、统一消息平台、金卫士、网上招聘、内部网服务器等 11个 技术支撑 密码服务系统、通讯集群网关、加密机 3个

4、 业务管理类 资产托管、信贷风险管理、国际业务处理、Swift、电子数据存储、电子式储蓄国债、统一数据补录平台、电脑验印、银税信息共享、统一征信、反洗钱监测报告、反恐怖融资黑名单、关联方信息管理、员工买卖股票申报等 18个 经营分析 SAP、客户关系管理、财富管理、资产负债、综合报表、金融统计统一报送、事后监督、ODS等 12个 办公管理 OA、学习管理、人力资源等 6个 科技管理 ITSM 1个 分行 证券资金清算 1个搬迁策略制定的意义搬迁策略是搬迁实施的指导原则,一个好的搬迁策略可以帮助某银行安全、平滑地实现系统搬迁和业务切换,反之,一个不好的搬迁策略则会给搬迁工作带来很多的麻烦,严重时

5、甚至会造成搬迁的失败；某银行搬迁策略制定的主要意义在于：保障业务系统顺利搬迁：全面分析应用关联和物理关联制定业务和数据安全保障建议制定应急预案的建议降低业务中断影响：分析业务中断影响保障业务按优先等级进行恢复缩短重要业务的中断时间降低搬迁风险：多方位的风险识别、风险分析制定风险应对策略建议提高搬迁效率：规划搬迁各批次的应用及设备清单规划搬迁时间梳理搬迁前的准备工作搬迁策略制定1.1.1 搬迁策略制定方法在整个搬迁策略制定的过程中,我们采取了神州数码的搬迁策略制定方法.如下图所示.首先,通过访谈、问卷、现场勘查、现有资料分析,我们对某银行的信息系统基础架构进行了全面的了解,在此基础上,从IT基础

6、架构、应用关联关系、业务中断影响、批处理关联、系统保护现状、物理设备共享关系、设备冗余情况、机房现有环境、人员组织架构及搬迁风险等方面,全面进行了搬迁分析,通过综合考虑各方面的要素,制定出某银行数据中心的整体搬迁策略,包括各应用的搬迁方式、搬迁批次、搬迁阶段临时备份策略、搬迁过程中的数据保护方式、搬迁组织架构、搬迁应急预案等重要策略.1.1.2 搬迁策略制定原则在搬迁策略策略的制定过程中,我们考虑了以下原则：采取先易后难,循序渐进的原则进行分阶段、分步骤的实施,从而可以降低搬迁的系统性风险,减少业务停顿次数和总体停业时间.按业务等级、应用关联和业务中断影响,决定搬迁过程中业务恢复的优先顺序以及

7、不同应用的搬迁方式.制定完善的核心应用和数据保护方式,降低搬迁对核心数据和系统的风险.保障重要应用系统应急环境的建立,缩短搬迁过程的故障处理时间.搬迁过程尽量保持原有IT服务水平Service Level,避免增加单点运行风险.提前测试和验证新机房的环境、网络及数据,保证的搬迁过程的平滑过渡.某银行数据中心搬迁方式通常数据中心的搬迁分为三类：物理搬迁：物理设备整体搬迁.业务系统切换：数据、应用整体切换；无物理设备的搬迁过程.混合型：部分数据、应用切换；部分数据、应用直接物理搬迁.基于对某银行现状的分析和实际的业务连续需求,建议某银行采取混合型的搬迁方式进行数据中心搬迁,部分系统的数据、应用采用

8、切换方式,部分系统直接搬迁.其中各业务系统的搬迁方式如下表所示：业务系统单系统搬迁方式 优点 缺点 核心业务系统,关键724对外系统系统切换平滑切换； 完整的系统和数据保护；业务中断影响最小 需要专有的备用系统环境,技术实施难度和投入较大 对外服务58,7x15业务系统存储切换,服务器物理搬迁完整的数据保护； 业务中断时间较长 对内业务系统设备物理搬迁无需专有的备用环境 依赖本地数据备份保护方式,业务中断时间长 某银行数据中心搬迁策略制定的重点和难点某银行数据中心搬迁策略的重点和难点主要有以下几方面：应用关联复杂：从业务持续角度出发规划搬迁方案,需要充分考虑应用间的千丝万缕的联系.业务中断影响

9、大：在制定搬迁策略时需要最大限度地减少中断时间,降低中断给业务带来的影响.应用搬迁和网络的割接同时进行：这样增加了搬迁的难度,需要确定网络割接所影响的业务系统,保障应用系统搬迁所需的网络环境.应用和设备数量较多：无法一次搬迁,需要分批搬迁.搬迁时间紧迫：三月底左右需要完成全部设备搬迁.备份设备STK带库无法同时搬迁就位：需要考虑临时的备份方案.设备冗余有限,不能全部切换：可以采用核心业务切换,其他系统搬迁的方式.应用间数据交互量大：搬迁次序需要考虑业务间访问所造成的网络性能影响.存储空间不足：需要分批进行2台EVA上数据的同步；同时需要租赁或新购一台NAS存储.需要定义业务恢复时间,保护级别等

10、关键指标,考虑保障数据安全和业务持续的技术架构,编写业务恢复方案,应急预案,测试方案等详细步骤来满足业务持续的要求.搬迁策略阶段工作总结搬迁策略阶段主要工作内容：进行了62场访谈和研讨：涉及90多名应用管理员、应用开发人员和系统、网络、设备、操作室主管、经理及管理员52场应用访谈 3次网络现状和网络割接研讨4次系统、备份、存储现状研讨 1次操作室日常操作管理现状访谈 2次搬迁策略研讨会完成了对103个应用系统的访谈绘制了57份应用系统关联图编制了40份单系统搬迁分析报告整理了各应用系统的详细设备信息 制定了总体应用系统业务关联图、应用总表应用系统批处理关联总表完成了机房的初步勘查工作老机房和新

11、机房现场勘查整理了各机柜的详细设备信息该阶段得出单应用分析报告、搬迁业务影响分析、定时批量任务关联分析、应用关联分析、业务恢复时长分析、应用设备对应清单、机柜设备清单等文档.搬迁策略的总体思路及整体过程批次思路系统批次一为后续关键批次的搬迁提供必要的技术条件,同时验证新数据中心的网络、搬迁的路线、 影响较小或独立的业务系统、核心系统的备机,他们的搬迁不会对银行的业务造成外部影响 批次二 搬迁对外服务724或715的业务系统、以及相应紧密关联的对内业务系统.将对外的业务影响降低最低核心业务系统,一般都是7*24的业务系统,对银行的外部影响较大批次三搬迁剩余的业务系统、开发系统以及利旧的设备一般是

12、58的业务系统,对外部的影响较低由于某银行数据中心需要搬迁的设备和应用比较多并且业务对外影响大,故我们采用分批搬迁,搬迁的总体思路如上表所示.整个搬迁过程如下图所示.从上图可以看出在各批次搬迁前必须具备一定的前提条件,在之后的章节中我们将做详细的讨论.某银行数据中心搬迁的特点通过对某银行数据中心现状的分析以及基于数据保护的要求,某银行数据中心搬迁将会具有以下特点.如下图所示：2 某银行数据中心搬迁策略分析数据中心搬迁策略分析是搬迁策略制定的基础,分析的目的是制定搬迁策略,分析的范围都是围绕搬迁策略的考虑要点而进行.因此本章将首先简单介绍搬迁策略的要点,然后详细描述某银行搬迁策略分析的过程,及其

13、对搬迁策略制定的影响.搬迁策略的要点搬迁策略的要点包括：整体搬迁方式搬迁过程中的数据保护方式搬迁批次划分各批次应用系统清单 各批次搬迁系统的设备数量统计 各批次搬迁时间 各批次内应用系统搬迁先后顺序 各业务中断和恢复时间分析 各批次搬迁前的准备工作搬迁过程中的数据备份策略搬迁过程中的应急环境策略搬迁组织架构策略 搬迁策略分析内容2.1.1 IT架构分析某银行的IT总体架构如下图所示,核心区包含了绝大部分对外对内的业务系统,将与新机房核心区连通；网银区包含的系统有：网银及数字证书、外汇系统、黄金系统、前置-银企直连、公路收费、个贷系统预审批、网站、离行办公系统VPN；外联区包含的系统有：金卫士、

14、统一消息平台、电子储蓄国债.从IT总体架构可以看出,搬迁过程中,由于网络分区的现状及部分网络设备需要搬迁,对外业务相关系统最好一起搬迁,核心区内的业务,由于新老机房核心区联通,可以按多个批次进行搬迁.但整个搬迁过程中,网络环境的具备与快速恢复将是搬迁的重要条件.考虑数据安全的重要性,某银行在新机房采购了DMX3和HP存储,并计划采用数据同步复制结合数据切换的方式,从而避免数据丢失或者存储故障而带来的严重后果.当前的SAN与存储架构如下图所示.新机房采购的DMX3其空间容量比较充分,可以同时和老机房DMX3、DMX1000进行数据复制,而新机房新购的HP空间则容量相对有限,不能同时存放EVA81

15、00-1,EVA8100-2的数据,因此,在数据复制过程中,只能先复制其中一台EVA存储,等数据复制完成并将相关系统搬迁到新机房后,再将空闲存储搬迁至新机房,并和另外一台EVA存储进行数据复制同步.这就要求搬迁策略必须充分考虑HP存储数据复制时间的要求.当前存储与应用系统的对应关系如下图所示：从图中可以看出EVA8100-2对应的系统比较少,因此可以先行搬迁,EVA8100-1上的系统比较多需要分批次搬迁.资产托管系统连接单独的存储.另外,电子存储系统、网银系统、商业汇票、征信系统、ODS连接NAS,因此,也需要考虑NAS的同步复制关系,但目前并没有采够新NAS,因此搬迁策略中要考虑相应的NA

16、S问题.2.1.2 应用关联分析通过前期的应用访谈以及对现有信息的收集,我们对各应用的关联的系统进行分析汇总得出应用关联分析表,如下所示.根据以上的应用关联关系表,在相关系统搬迁至新机房后,就可以判断相关业务测试的可行性以及对外恢复的能力.根据应用关联分析,结合某银行的应用服务等级定义,可以发现搬迁过程中,各应用的恢复等级如下：1.综合客服、信用卡、个贷是对外服务的核心,需要最优先的恢复； 2.SNA网关、前置平台是其他对外服务到综合客户服务的关键通道,也需要最优先的恢复； 3.网银、终端系统、ATMPCV、多媒体自助、金卫士是对外服务的窗口,需要优先恢复； 4.卡交换是银联接入深发行的通道,

17、需要优先恢复； 5.网银的业务与现代化支付关联紧密,需要优先恢复现代化支付； 6.其他系统按应用服务等级进行恢复 2.1.3 业务中断影响分析通过对访谈信息的收集及分析得出业务中断影响分析表,如下图所示.根据业务中断影响,可以发现对外服务的业务需要尽量减少停机次数,并需要尽可能地建立专用应急环境.2.1.4 批处理关联分析各应用批量关联表如下图.详见交付文档某银行 Relocation_搬迁策略分析其中红色批量任务是需要按时完成的任务,很难进行更改.因此系统搬迁时,需要考虑这些时间段,尽量保证这些批量任务在完成后再进行设备搬迁或者系统切换.另外,和主机直接依赖的批量任务有：直接关联应用通道应用

18、批量名称原批量时间备注综合理财系统 扣款、还本、付息主机批前任务总行前置金抵利:到期自动转存批量主机批后任务总行前置金抵利:回盘处理主机批后任务总行前置报表生成主机批后任务国际业务处理国际业务晚间批量程序22:0023:00主机批前任务OBS批量6:00-6:30主机批前任务OPICSOPICS批量18:3021:00主机批前任务商业汇票系统日终批量脚本21:456:10主机批前任务给ODS送数主机批后任务给rtc送报表主机批后任务新终端系统给ODS提供数据3:003:15独立批量备份4:004:30独立批量主机回盘处理4:304:45主机批后任务更新机构表、行部表、人力资源表、角色互斥批量6

19、:006:20独立批量任务发送批量文件21:0521:20主机批前任务更新柜员状态23:0123:10独立批量生成报表23:1023:30独立批量服务重启23:3023:59独立批量个贷系统个贷批量计提扣款20:000:30主机批前任务日间批量主机批前任务个贷存低贷系统批量代收代付系统 存抵贷收益批量支付17:0018:00主机批前保理系统日终作业21：3021：45主机批前换日作业8：008：15主机批后网上银行总行前置商户入账批量21:00主机批前0:00主机批前集团自动划拨22:001min主机批前卡交换系统日终批量0:202:20独立批量日始批量2:002:30主机批后RMAN数据库备

20、份3:005:30独立批量黄金交易系统黄金批量3:003:05主机批前个人外汇实盘买卖系统行情备份6:006:10独立批量前置日志备份6:306:40独立批量交易系统日志备份、数据清理6:306:40独立批量传ODS数据1:301:40独立批量与主机对账6:006:10主机批后客户信息同步主机批后前置某前置hibatchnoecho.sh2：006：00主机批后其他分行hibatchkeep.sh5：006：00主机批后电子式储蓄国债系统日终处理17:0017:45主机批前电子数据存储系统JGP-CONVERT3：0016：00主机批后ODSODS批处理23：4011：30主机批后新代收代付批

21、量系统hibatchkeep.sh2：003：30主机批后ATMPCV系统更新机构表6:106:20主机批后启动主机与前置,ATM与前置对帐3：003：10主机批后给ODS供数2：002：10独立批量信贷风险管理从ODS取文件,该文件来自主机4:00-10:00主机批后对于主机批后的任务,由于主机做完批量后,会将在次日自动覆盖,因此相关应用需要尽快搬迁至新机房,并获取数据后补做批量任务.如不能在规定时间搬迁至新机房,则需要考虑利用备份进行恢复.2.1.5 系统保护分析目前系统连接同城灾备中心做容灾,如下图所示当前系统的主要备份方式有：磁带机备份：操作系统主要采用此方式.Lan-Free备份：主

22、机系统先备份到VSM4虚拟带库,再归档到STK物理带库.VSM4 容量1T,仅能支持3天备份Lan备份：开放平台采用Veritas备份软件RMAN备份到STK物理带库注：信用卡DB采用LanFree备份.综合当前系统的备份方式,我们在搬迁过程中需要考虑临时备份问题.另外,综合客服等4个系统已经在GDS建立了灾备系统,搬迁过程中,如出现紧急情况,可以考虑使用灾备系统进行应急恢复,另外,等系统搬迁至新机房后,也需要考虑尽快恢复灾备系统.2.1.6 物理共享分析通过对收集的信息进行分析我们发现当前系统有物理共享的情况,包括：服务器共享：反洗钱应用服务器、ODS文件服务器、综合报表共享10.51.1.

23、95,综合报表、反洗钱和ODS共享数据库服务器10.1.51.230,等共享情况如下图所F5和Citrix共享：ATM前端系统、CRM系统、RMS系统信贷风险管理、自助终端系统、ABS系统、票据系统、黄金系统、密码系统共用F5；信贷管理系统、资产保全系统、电子数据存储系统、征信信息系统、信用卡销售人员管理系统共用办公Citrix；网银系统、外汇系统、黄金系统、公路收费前置、个贷系统、银企直连前置、网站、离行办公系统VPN共用网银区Citrix.新机房没有新购F5和Citrix,故相关设备需要在同一批次搬迁.NAS共享：网上银行、ODS、电子存储系统、商业汇票、统一征信系统使用NAS存放文件,建

24、议NAS与这5个系统尽量同一批次搬迁,避免以后出现重复停止应用的情况.刀箱共享：刀箱共享的情况如下图所示,在搬迁的时候一组刀箱内的设备尽量同一批次搬迁 .网络分区关联：新老机房的网银分区和外联分区没有实现三层路由连通,需要考虑在同一批次搬迁.各分区对应业务系统如下：网银分区内的系统有：网银系统、外汇系统、黄金系统、公路收费、个贷系统、银企直连、网站、离行办公系统.外联分区的系统有：电子储蓄国债、金卫士、统一消息平台.搬迁过程中,共享的系统需要考虑同一批次搬迁.2.1.7 设备冗余分析通过对应用系统对应设备进行统计分析我们得出应用系统的冗余情况,如下表所示.对外应用系统724,718 冗余情况

25、对外系统58 冗余情况 对内应用 冗余情况 个人贷款系统 DBAPP共用一台冷备机个贷预审批系统DBAPP共用一台冷备机SAP系统ECC和BW共用备机,APP负载均衡,ETL中的DB和APP没有备机开放式基金代销系统DBAPP在一台机器上,有冷备,报表服务器无备机黄金交易系统有备机统一数据补录平台无备机个人实盘外汇买卖系统DB冷备,其它PC server有冷备银银合作平台上,应用有冷备,DB无备机反洗钱监测报告系统没有备机95501客户服务中心系统无备机资金托管系统接收机没有备机,应用有备机反恐怖融资黑名单系统无备机金卫士系统DB和语音服务器都有备机保理系统无备机金融统计统一报送系统互备国际业

26、务处理系统老系统可以做为FBS的备机使用MTS没备机商业汇票系统服务器单点事后监督系统一备多,分行服务器无备机资讯平台系统无备机电脑验印系统综合客服系统S390冷备机银税信息共享AppDB无备机信用卡DB冷备；2台APP热互备客户关系管理系统ACRM有备用机,OCRM不确定综合理财系统无备机财富管理系统服务器单点卡交换系统卡交换服务器有备机,DB无备机文献管理系统服务器单店OPICS文件服务器与应用服务器共用备机,DB无备机右测试机人力资源管理系统应用负载均衡；DB单点故障；现代化支付应用互备、2个DB服务器做RAC学习管理系统App,考试互备流媒体、DB、报表单点网银系统AppDB都有备机I

27、TSM应用、DB互备；柜员管理系统数据库做RAC、应用服务器作集群负载均衡、CAMA与eTeller互备统一征信系统应用负载均衡；DB单点故障；电子数据存储系统Web,App负载NAS,DB单点关联方信息管理系统 员工购买股票系统服务器单点SNA负载均衡信用卡催收管理系统DB有备机总行前置应用一主一备,DB无备机信用卡新申请审批系统应用有备机分行前置两个刀片服务器作备份信用卡反申请欺诈系统应用有备机金融自助终端服务器热备,DB与柜员管理系统共用信用卡销售人员管理系统服务器单点对于有冷备机的设备,需要考虑先搬迁冷备机.对于没有备机的重要系统,需要考虑好新购备机,建立备用环境；对于没有备机的其他系

28、统,需要考虑先做好备份,并通过通用应急环境进行应急恢复.2.1.8 机房环境分析机房概况某银行目前业务生产系统及网络系统主要位于五楼大小两个机房,也有少部分开发测试机,具体情况如下表所示.机房 设备 用途 5楼机要室 主机系统监控平台1、现代化支付备机1、ITSM开发机1 5楼网络室 网络管理1,安全管理1 5楼维修间 网络管理2 5楼小机房 核心区接入交换机、IRA区办公接入交换机、办公区负载均衡Citrix、95501留言、OA邮件转发、开发式代销基金报表、信贷风险管理Web、银税信息共享签名和应用服务器、电子数据存储Web、客户关系管理、新终端、电脑验印、实物资产、统一消息平台、前置系统、通讯网关集群、信用卡销售、客户关系管理、保理、OA开发测试、零售银行DB、swist、密码管理系统、网络管理、安全管理、设备运行监控、财富管理、新终端开发机、资产负债、Congnos报表、ODS、信用卡销售人员管理Web、SAP、反恐怖融资、客户关系管理113 生产 5楼主机房 综合客服