医院双活数据中心建设方案V3.docx

1、医院双活数据中心建设方案V3医院双活数据中心建设方案2013年7月1.需求和目标数字化医院是我国现代医疗发展的趋势。“数字化医院”是指将先进的网络及数字技术应用于医院及相关医疗工作, 实现医院内部医疗和管理信息的数字化采集、存储、传输及后处理，以及各项业务流程数字化运作的医院信息体系。“数字化医院”是由数字化医疗设备、计算机网络平台和医院业务软件所组成的三位一体的综合信息系统。数字化医院工程体现了现代信息技术在医疗卫生领域的充分应用，有助于医院实现资源整合、流程优化，降低运行成本，提高服务质量、工作效率和管理水平。信息系统建设作为医疗行业信息化的核心内容，在近几年的发展中经历了不同的阶段。随着

2、国家新医改方案的实施，对国内传统医院信息系统发展带来前所未有的机遇与挑战，现有的信息系统已难以全面适应医院的需求。因此，一个全新的数字化医院解决方案是当前国内医院信息化行业的迫切需求。1.1项目需求分析医疗行业信息系统中最重要的是信息，包括病人临床信息和医院管理信息等。医疗行业IT部门面临的最明显挑战是由信息数字化造成的信息量持续增长带来的，这些增长来源于：每个医疗过程涉及大量图像加上每年要执行大量扫描，使得存储的医疗记录以超过 70% 的年增长率在增长； 更多类型的数据：财务、临床、图像管理，结构化数据（如数据库）及非结构化数据（如数字影像、报告、视频、演示文稿等）；更多用途的数据：HIS、

3、EMR/EHR、PACS、知识管理以及数据挖掘更多设备产生的数据：药征、患者监视、仪器更多管理法规：国家医疗记录保留要求医疗行业中不同业务应用系统的需求不尽相同。我们以医院的两个最有代表性的应用为例，分析其来自医院业务的需求：HIS/EMR系统随着就诊人数的增长，需要保证系统的性能满足业务发展的需要；需要满足7x24小时高可靠运行的业务连续性要求；需要保证数据的安全性和可恢复性，避免因数据丢失引起的医疗纠纷；PACS系统如果仍然采用随影像设备配置的功能简单的医疗影像系统，如何实现全院影像信息共享和查询？如果实施了全院PACS系统，则带来数据量的快速增长，如何做到控制成本、同时提供数据的共享和快

4、速查询？需要满足7x24小时高可靠运行的业务连续性要求；需要保证数据的安全性和可恢复性，避免因数据丢失引起的医疗纠纷；医疗行业其他应用系统还包括：LIS、医保、银联前置机、合理用药、知识库、排队叫号、病人查询系统、OA、杀毒系统、文件服务器、WEB、Email等。如今，随着医院不断有新的应用系统上线，数据呈级数增长，原有的系统迫切需要扩容升级。由于医院内的HIS、PACS 和电子病历等系统是在不同时期分批建成的，导致各系统的数据处于分散存储状态。不仅如此，每个系统所采取的存储方式与存储介质也各不相同，而且有些存储系统已经无法满足业务不断发展的需要。随着上述系统应用规模的不断扩大，在数据管理方面

5、的问题日益凸显出来，主要表现为：容量不足，数据调用不便；系统结构相对落后，系统稳定性有待提高；最后，分散存储的模式，严重影响了数据资产的管理效率。总体来讲，医疗行业信息化的关注点在于：如何满足业务连续性要求高性能服务不停顿数据不丢失如何解决数据容量迅速增长带来的成本、管理等问题如何解决应用系统不断增加带来的成本、管理等问题1.2需求分析小结随着医院信息化进程的逐步深入，医院部署的的应用系统越来越多，环境也变得越来越复杂，这无形中增加了IT人员管理维护系统的难度。同时，随着应用系统的不断增加，数据也相应大量增长，这就给原有的信息基础架构提出了更高的要求：提高系统数据整体安全性，避免因数据丢失导致

6、的公共事件发生平滑的提供更大的存储空间提供更快的数据响应速度提供更大的数据吞吐能力提供灵活的资源调配能力（包括服务器和存储）并且，随着信息系统在医院教学和管理中的重要性越来越高，信息主管部门越来越多的关注在：如何解决应用系统和数据容量迅速增长带来的问题：利用率降低成本不断增加管理越来越复杂等如何满足关键应用系统的业务连续性要求关键系统高性能关键服务不停顿关键数据不丢失2.双活数据中心整体解决方案随着医疗服务业务的进一步发展，医疗信息系统要求提供7*24小时的高可用性服务，业务运行不允许中断，系统一旦停机会给医院造成巨大的损失。为了应对系统停机、业务中断等风险，多数医院建设了容灾数据中心，传统的

7、以数据复制技术为基础的多数据中心架构均以灾难情况下的站点整体切换为第一目标，这种技术强调灾难情况下的站点恢复能力，但往往由于底层数据复制配置、网络环境、相互依存服务等方面的限制，无法顺利实现单个业务应用系统或主机的透明切换和迁移；另一方面容灾站点的服务器、存储、网络等资源长期处于闲置状态，并且长期占用机房场地并耗费大量能源，所以大部分医院并没有建立一个高效的容灾机制，一旦应用系统或机房硬件出现故障，将会造成业务中断，影响医院运营。在灾难备份与恢复行业国家标准信息系统灾难恢复规范中，将信息系统的灾难恢复能力划分为了6级，明确了RTO/RPO与灾难恢复能力等级的关系，在最高级（第6级）中要求RPO

8、=0，RTO在分钟级内。如何构建一个在发生故障时提供保护并使关键应用程序保持在线，尽可能减少人工干预的高可用性解决方案，成为本方案的最大挑战。2.1双活数据中心建设方案拓扑图2.2双活数据中心建设方案说明以上拓扑图充分考虑了医院建设高性能、高可用的双活数据中心的要求，实现了服务器、存储、网络的端到端冗余，最大程度的保障医院业务系统的稳定运行。2.2.1在以太网络层面：在医院建设好的两个数据中心机房里，每个数据中心均各部署两台网络交换机；可以是两台核心交换机，如果节省成本，可以是一台核心加一台二层汇聚交换机；通过两个数据中心预埋的单模光纤连接，现两个数据中心交换机的互联互通。对于医院各个楼层的汇

9、聚交换机，均通过预埋的光纤分别连接到两个数据中心的核心交换机上，实现链路冗余连接，任何一条光纤或核心交换机发生故障，不影响楼层科室业务系统对数据中心的访问。对于数据中心的服务器设备，每台服务器都配置了多个千兆网络接口，分别连接到该数据中心的核心网络交换机和汇聚网络交换机，实现服务器网络的冗余连接，无单点故障。2.2.2在服务器层面： 为了更好的解决通常“烟囱式“建设方式带来的弊端，采用服务器虚拟化架构解决方案。EMC旗下的全球虚拟化产品领先厂商VMware公司能够为用户提供完善的服务器虚拟架构解决方案，该方案可以实现： 服务器整合和基础架构的优化；消减物理服务器架构的成本；增强数据中心扩展性；

10、改善操作的易用性和灵活性； 增加应用系统的可用性并改善业务连续性；可以在两个数据中心之间构建一个计算资源池，每个数据中心分别部署35台物理服务器，安装Vmware虚拟化软件，将两个数据中心的58台服务器配置成为一个VmwareHA集群，能够支持3050个医院应用系统的正常运行，最有效的利用服务器资源，节省采购和运维成本，降低管理复杂度。同时在构建的VmwareHA集群中，任何一台物理服务器发生故障，该服务器上的虚拟机会平滑迁移到其他的物理服务器上，保障了医院业务系统的稳定运行。对于最关键的HIS、EMR等业务系统，采用物理机构建Oracle RAC或双机热备的方式，在两个数据中心分别部署一台服

11、务器来运行HIS、EMR等数据库。利用EMC的云存储技术，实现跨数据中心的服务器集群，任何一台数据库服务器或数据中心发生故障，医院的HIS、EMR数据库仍然能够从另外一台数据库服务器继续访问医院的HIS、EMR等数据库，确保医院业务的稳定运行，实现业务连续性。2.2.3在SAN网络层面：通过在两个数据中心分别部署两台入门级SAN存储交换机DS-300B，并且通过10公里8Gb接口的长波模块，实现两个数据中心的SAN交换机的两两互联，构建一个跨两个数据中心的大SAN网络。每台DS-300B存储交换机最大支持24个光纤端口，本次为新数据中心的每台交换机配置24个8Gb光纤接口和1个10公里8Gb的

12、长波接口；2.2.4在存储架构层面：为了实现医院的双活数据中心建设，必须能够将两个数据中心的存储进行整合并虚拟成为一个存储系统，这样才能够支持跨数据中心实现主机层面的VmwareHA集群（Vmware集群或其他双机都必须跨数据中心访问共享硬盘）和双机热备；这样当任何一台存储发生故障、任何一个数据中心发生故障，主机可以切换到另一个数据中心的服务器上，启动虚拟机或访问Oracle数据库，保障医院业务系统的稳定运行，实现RPO=0，RTO=0，充分满足业务连续性的需求。EMC的VPLEX云存储系统能够实现数据中心存储的统一管理，对于主流的异构平台存储系统实现统一管理，将多个存储虚拟成为一台存储对外服

13、务。VPLEX云存储系统能够实现对跨数据中心两台存储系统的“双写”，任何一个业务系统对数据的读写都是通过两条链路对两台存储进行操作，任何一台存储发生故障，数据无丢失；任何一个数据中心的存储发生故障，可以通过另一个院区数据中心的存储继续访问，业务系统没有中断，仍然能够保障医院正常业务的开展。每台Vplex云存储系统采用全冗余架构设计，配置冗余控制器，并且能够横向扩展至4台云存储系统，8个控制器；每台Vplex云存储系统配置了72GB缓存和16个8Gb 光纤接口，为了节省交换机的端口，采用将8个8Gb FC接口分别连接到数据中心的DS-300B存储交换机上，实现前后端的冗余连接，保障数据访问的性能

14、和可靠性。在由EMC Vplex云存储系统构建的双活数据中心中，为了判断数据中心的运行状态，避免“脑裂”（由于两个数据中心的通讯中断，可能是线路中断，也可能是一个数据中心故障），在两个数据中心外的任何一个楼层配置一个第三点仲裁（一台运行EMC witness的虚拟机即可），该第三点仲裁通过网络与两个数据中心的Vplex云存储系统互相通信，传递心跳信息；当出现以下故障时，数据中心的信息基础架构平台将会如此应对：1.当两个数据中心都运行正常，但是两个数据中心的互联光纤被挖断，两个vplex云存储系统不能数据同步的情况下：整个平台将会按照初始配置的策略（初始配置时，会设定数据LUN优先级别，每个LU

15、N优先在哪个数据中心保持活动状态），所有的数据卷各自运行在高优先级的数据中心，保持业务系统的稳定运行。2.当一个数据中心的存储发生故障，该数据中心的服务器仍然能够通过Vplex云存储系统访问另外一个数据中心的存储系统，继续应用；3.当一个数据中心发生故障，正常运行的Vplex云存储系统通过网络不能够正常与发生故障的数据中心的vplex进行通信，在结合第三点仲裁判断出另一个数据中心发生故障，正常运行的Vplex云存储系统将会接管两个数据中心的数据卷，对外提供服务，而不管初始配置的优先级策略，充分保障数据中心故障时的医院业务系统的稳定运行。4.其他故障类似处理。而且，EMC的vplex云存储系统对

16、于后台的存储系统上的数据卷只是进行封装、镜像，并不对数据卷进行格式的转换，所以即使发生万万分之一的情况，两个数据中心的配置双控制器的vplex云存储系统发生故障，通过在SAN交换机上进行Zone的设置，让服务器直接访问后台的存储系统，仍然能够保障医院业务系统的正常运行。在后端存储系统选型上，建议使用EMC中高端存储系统VNX5500来存储医院数据中心的所有数据。 当前业务系统分配空间如下：业务系统名称分配空间所在存储名称是否做了Vplex镜像HIS系统537GB /SASVNX5100-2/3是集成平台1024GB/SASVNX5100-2/3是虚拟化2560GB/SASVNX5100-2/3

17、是电子病历11TB/NL-SASVNX5100-2否心电系统2141GB/SASVNX5100-1否PACS系统14.5TB/NL-SASVNX5100-1否 为了提高医院各个业务系统的高可用性，通过双活数据中心实现所有业务系统数据的高可用性，实现跨数据中心的镜像保护。 具体规划如下：业务系统名称分配空间所在存储名称是否做了Vplex镜像备注HIS系统537GB /SASVNX5100-3/VNX5500跨数据中心镜像集成平台1024GB/SASVNX5100-3/VNX5500跨数据中心镜像虚拟化2560GB/SASVNX5100-3/VNX5500跨数据中心镜像电子病历11TB/NL-SA

18、SVNX5100-3/VNX5500跨数据中心镜像如需性能，可考虑迁移到SAS盘心电系统2141GB/SASVNX5100-3/VNX5500跨数据中心镜像迁移到VNX5500，再回迁到VNX5100-3PACS系统14.5TB/NL-SASVNX5100-1/VNX5100-2跨数据中心镜像VNX5100-2和VNX5100-1均需扩充硬盘 在实现双活数据中心的建设时，对现有存储的空间分配进行整合，提高存储空间利用率，并提高医院业务系统访问的性能，具体操作如下：1.将VNX5100-3上扩充空间、性能，将非PACS系统以外的系统数据统一保存在VNX5100-3上，提升VNX5100-3存储系

19、统的性能，实现与新采购的VNX5500存储系统的跨数据中心镜像；根据当前的存储空间分配，如果EMR电子病历数据仍然采用NL-SAS硬盘来存放，则核心主存储VNX5100-3需要扩容17块600GB 15K硬盘+10块2TB硬盘+3块100GB SSD固态磁盘，其中17块600GB 15K硬盘用于跟现有的15块600GB硬盘做成一个存储池，用于集中存储HIS、集成平台、虚拟化、心电等系统的数据以及未来的扩充，10块2TB硬盘用于将备份存储VNX5100-2上的EMR电子病历数据迁移过来，3块100GB SSD用于扩充VNX5100-3存储系统的性能，提供医院业务系统和虚拟机的访问性能。2.在VN

20、X5100-2备份存储上扩充7块2TB NL-SAS硬盘，用于扩容PACS影像系统的存储空间，并在数据迁移到VNX5100-3以后，搬迁到新机房，用于与PACS存储VNX5100-1的存储镜像。3.在VNX5100-1 PACS影像存储上扩展5块600GB 15K硬盘和5块2TB NL-SAS硬盘。用于扩展PACS影像存储的空间。4.购买VNX5500存储系统，根据当前的存储空间，配置35块600GB 15K硬盘和10块2TB NL-SAS硬盘，用于与VNX5100-3存储系统的跨数据中心镜像保护。EMC的中高端VNX5500存储系统配置了24GB SAN存储缓存，还能够扩展36GB的NAS缓

21、存和1000GB的SAN存储缓存，最大程度的满足医院未来对性能增长的需求；最大支持250块硬盘的扩展，也能够极大的满足医院对存储空间的需求。2.3双活数据中心配置汇总产 品 名 称配 置 描 述数量云存储系统EMC Vplex云存储系统，配置冗余控制器，72GB缓存，16个8Gb FC接口，实现与当前数据中心的双活。 1EMC 核心存储EMC VNX5500存储系统，全冗余架构；配置24GB60GB缓存；配置35块600GB 15K 6Gb接口SAS硬盘和 10 块3TB硬盘 1光纤存储交换机配置24端口模块化交换机，本次配置并激活24个8Gb端口和1个10公里8Gb 长波模块。并额外配置2个10公里8Gb长波。2VNX5100-3主存储扩容配置17块600GB 15K硬盘，10块2TB硬盘和3块100GB SSD硬盘，以及VNX5100缓存扩展软件，扩展100GB存储缓存，提升存储性能。1VNX5100-2备存储扩容配置7块2TB NL-SAS硬盘，用于与PACS存储镜像保护1 VNX5100-1PACS存储扩容配置5块2TB和5块600GB 15K硬盘，用于PACS存储空间的扩容1双活数据中心建设、存储优化、数据迁移服务实现对现有存储空间的优化，现有数据的迁移以及双活数据中心的建设。1