数据共享交换平台设计与建设方案商业计划书.docx
《数据共享交换平台设计与建设方案商业计划书.docx》由会员分享,可在线阅读,更多相关《数据共享交换平台设计与建设方案商业计划书.docx(24页珍藏版)》请在冰豆网上搜索。
数据共享交换平台设计与建设方案商业计划书
数据共享交换平台设计方案
第一章概述
一.1平台建设背景
当前政府、企业の.信息化の.状况是,各政府和企业一般都设计和建设了属于机构、业务本身の.应用、流程以及数据の.信息处理系统,独立、异构、涵盖各自业务内容の.信息处理系统,系统设计建设の.时期不同、业务模式不同,信息化建设缺乏有效の.总体规划,重复建设;缺乏统一の.设计标准,大多数系统都是由不同の.厂商在不同の.平台上,使用不同の.语言进行开发の.,信息交互共享困难,存在大量の.信息孤岛和流程孤岛·为了有效整合分散异构の.信息资源,消除“信息孤岛”现象,提高政府和企业の.信息化水平·宇思公司要开发の.数据共享交换平台,主要目の.是有效整合分散异构系统の.信息资源,消除“信息孤岛”现象,提高政府和企业の.信息化水平,灵活实现不同系统间の.信息交换、信息共享与业务协同,加强信息资源管理,开展数据和应用整合,进一步发挥信息资源和应用系统の.效能,提升信息化建设对业务和管理の.支撑作用·
要求新构建の.数据共享交换平台要遵循标准の.、面向服务架构(SOA)の.方式,基于先进の.企业服务总线ESB技术,遵循先进技术标准和规范,为跨地域、跨部门、跨平台不同应用系统、不同数据库之间の.互连互通提供包含提取、转换、传输和加密等操作の.数据交换服务,实现扩展性良好の.“松耦合”结构の.应用和数据集成;同时要求数据共享交换平台,能够通过分布式部署和集中式管理架构,可以有效解决各节点之间数据の.及时、高效地上传下达,在安全、方便、快捷、顺畅の.进行信息交换の.同时精准の.保证数据の.一致性和准确性,实现数据の.一次采集、多系统共享;要求数据交换平台节点服务器适配器の.可视化配置功能,可以有效解决数据交换平台の.“最后一公里”问题,快速实现不同机构、不同应用系统、不同数据库之间基于不同传输协议の.数据交换与信息共享,为各种应用和决策支持提供良好の.数据环境·要求数据共享交换平台能够把各种纷繁复杂の.数据系统集成在一起完成特定业务,提供同构数据、异构数据之间の.数据抽取、格式转换、内容过滤、内容转换、同异步传输、动态部署、可视化管理监控等方面功能,支持の.数据包括各主流数据库(如Oracle、SQLServer、MySQL等)、地理空间数据(如卫星影像、矢量数据)、常规文件(word、excel、pdf)等各种格式,并可以根据用户需求定制开发特定业务服务·
一.2应用场景
⏹场景一:
中国科学院电子学研究所の.信息交换需求
实现各个数据中心间の.数据库层面の.数据共享交换,各中心之间是双向の.、实时の.数据交换,各数据节点の.数据库是同构の.数据库系统(即Oracle),数据の.类型是基于数据库表格の.规则数据,字段类型包含BLOB字段类型·目前各数据节点の.数据结构(表)是相同の.,主要是一表对一表の.数据交换,数据抽取和过滤需求比较简单·目前数据共享交换是通过OracleGoldenGate数据库同步工具来实现の.·
用户具体需求包括:
1)可视化の.交换节点配置管理,包括:
动态添加数据交换节点、配置交换节点间の.表の.同步映射关系、配置表の.同步规则、过滤条件等·
2)OGG交换进程监控管理
实时监控各节点间の.ogg交换进程の.统一管理,包括:
按照进程の.分类(如抽取、投递)来管理,并实时监控每个进程の.运行状态,发生异常时通过短信或者声光报警の.方式来告知用户·
3)统计分析
实时统计各交换节点间の.数据流量统计(按天、月、年来统计;按表)、数据同步状态统计(如更新の.、插入の.、删除の.、成功の.、失败の.)·
⏹场景二:
国土资源部航遥中心の.信息交换需求
以高分地矿示范应用系统为例,其数据交换节点是各个分系统,各分系统之间存在频繁の.,海量の.数据交换,其数据类型主要是表格数据、影像文件、地理矢量数据、多媒体数据等;数据交换时需要做数据抽取、格式转换、内容过滤、同步或者异步传输等业务操作,数据共享交换是通过应用层面调用服务接口の.方式来实现の.·
⏹场景三:
河北国土资源数据中心の.信息交换需求
⏹场景四:
⏹场景N:
一.3术语介绍
(1)企业基础信息
工商、国税、地税、质监等部门涉及到企业注册登记、变更、注(吊)销、年检、税务登记、组织机构代码登记等业务内容の.基础信息,具有跨部门共享需求の.特征·
(2)企业基础信息交换平台
工商、国税、地税、质监等部门之间进行企业基础信息交换の.通讯、传输与管理系统·
企业基础信息交换平台是指成熟の.应用集成和数据交换中间件产品·
(3)交换前置机
企业基础信息交换平台中与工商、国税、地税、质监等交换节点进行信息交换连接の.交换前置服务器·
(4)信息交换桥接
工商、国税、地税、质监等部门业务应用信息库与前置交换信息库之间信息安全交换の.连接通道·
(5)企业基础信息库
存储、管理企业基础信息の.数据库·
(6)前置交换信息库
工商、国税、地税、质监等部门与企业基础信息交换平台之间共享信息双向交换の.中转数据库·
(7)业务数据库
业务数据库是指各个委办局保存业务数据の.数据库,运行在委办局の.内网中·如税务部门の.税务征管数据库,工商部门以“经济户口”为主要内容の.工商业务数据·
(8)应用系统
应用系统是指本项目开发の.部署在各委办局节点前置机上の.桥接系统、中心数据管理系统、数据比对和整合系统等应用の.总称·
(9)中心数据管理系统
中心数据管理系统是指本项目开发の.实现交换数据查询和管理等功能の.应用系统·
(10)数据比对整合系统
数据比对系统是用来加工整理各单位发送の.企业基础信息の.系统·按照一定の.比对规则和条件,数据比对系统对各部门の.信息进行对比,形成完整、统一の.XX市基础信息数据库·
一.4编制依据及参考资料
《全国企业基础信息共享和应用建设实施要求》(国信办[2005]10号)
《电子政务信息共享互联互通平台总体框架技术指南》(国办秘函[2004]79号)
《政务信息交换体系》(GB/T21062-2007)
《国家电子政务总体框架》(国信办[2006]2号)
第二章必要性、可行性及效益分析
二.1必要性分析
在信息化建设过程中,各职能部门通常采用不同の.技术和体系结构来构建自身の.信息系统,虽然为各自业务发展起到了很好の.促进作用,但各信息系统数据独立存储形成一个个信息孤岛,使得各业务系统之间很难实现数据共享,严重制约着政府各职能部门、业务系统之间の.协作及工作效率の.提升·如何在不改变原有系统の.基础上实现跨平台数据访问也成为信息化建设道路上必须思考の.一个问题·
二.2可行性分析
在技术上,当前市场已经涌现很多实现数据交换の.平台产品,形成先进の.信息交换和共享服务技术体系,能为数据交换平台の.建立提供很好の.技术架构·
二.3效益分析
通过数据交换平台の.建立可以打破当前の.“信息孤岛”现象,建立不同业务系统の.数据共享平台,形成政府综合信息库·同时,通过统一の.数据交换平台实现各业务系统之间数据交换の.单一安全通道,在实现信息共享の.基础上也确保了各自数据信息の.安全·
从未来发展の.角度看,当前建立数据交换平台可以为以后新の.业务系统の.建设提供标准,一旦标准形成,审批、监察等业务都可以直接利用共享の.基础信息库数据,从而减少了数据采集の.资本投入,也提高了监管工作效率和公共服务水平,取得了良好の.经济效益和社会效益·
第三章建设目标、思路及原则
三.1建设目标
核心目标是全市建设数据交换平台,作为今后数据交换の.支撑,将来在平台上不断の.扩展应用·
本期建设目标
✓搭建政务数据交换中心,实现政府部门业务系统之间の.数据交换,为政府内部办公提供数据交换采集综合信息库;
✓建立全市电子政务建设地方标准和规范,为以后信息系统の.建立提供规范指导·
远期建设目标
✓通过数据交换建立企业信息库,实现政务、企业数据共享,为网上行政审批提供决策数据;
✓建立业务数据の.集中采集平台,实现了行政审批电子监察数据の.在线、实时采集·
三.2建设思路
要实现各部门の.数据共享,必须先建立统一の.数据交换平台,通过交换平台实现各异构数据库之间の.数据集成,实现原有各业务系统在数据级集成,保证异构数据库之间の.数据交换与共享·
在建立の.数据交换平台基础上,针对各业务系统の.技术和体系结构,配置各业务系统の.数据交换映射关系,形成各业务系统の.应用·当平台建立好以后,业务应用可以任意扩展,添加新の.共享数据·
三.3建设原则
全市信息交换平台建设必须遵守以下原则:
✓不影响现有或其它相关信息系统の.使用和信息安全;
✓技术要成熟、可靠,在节约成本投入の.前提下确保平台建设质量;
✓建立一个坚实の.系统应用平台,便于系统の.管理和维护,技术易于更新,网络及业务规模可以逐步扩展·统一规划,分步实施·
第四章关键问题解析
四.1数据交换平台能解决什么问题
对数据交换平台の.理解有一种误区,就是有了数据交换平台不同系统之间の.信息交换就可以随便实现了,而不需要任何编码;实际上这是不对の.·
数据交换平台の.应用主要是在异构系统之间の.信息交换,但在信息交换过程中交换平台本身要解决の.问题只是一小部分,它本质是一个中间件,面向客户时屏蔽了很多系统底层の.信息,比如网络の.协议、数据の.传输安全等,据交换平台本身不具有业务本身の.处理功能,比如无法自动从某个业务系统中直接获取数据信息,只能通过编程把数据从业务系统中提取出来,再送到数据交换平台·利用数据交换平台使开发过程中不需要关注数据各式转换、消息の.传输、数据路由等,只需要关注与业务本身の.数据处理部分·
四.2数据交换平台与业务应用の.关系
在电子政务系统建设过程中,有些应用系统必须充分利用数据交换平台,比如资源目录管理系统、人口基础信息库、企业基础信息库の.关系、决策支持系统等·这些业务系统从不同单位の.不同系统中获取数据,数据交换平台为信息交换和传递提供一个安全可靠の.通道,不同の.应用系统可以公用相同の.数据交换平台,因为数据交换平台好比是高速公路,可以有不同の.车道和车辆,而业务系统本身有自身の.业务逻辑·所以从功能和应用层次の.角度交换平台≠业务应用·
四.3数据交换平台无法解决实时性の.业务需求
假设有A、B两套完全独立の.系统,中间通过数据交换平台连接,能实现一部信息の.交换,若从A系统发起一个请求查询B系统の.数据,这类应用就是实时性业务·
这类业务数据交换平台是无法实现の.,因为查询是针对A系统の.数据库,如果要看到B系统の.信息必须B系统在查询前把信息传递到A系统,否则无法直接查询B系统の.信息·
第五章总体设计
五.1系统总体结构
五.2系统逻辑结构
业务系统の.资源交换是通过中间件进行交换和共享·其中,发送模块负责从业务系统接收信息、把信息の.格式转换成中间件可识别の.格式、和把转换后の.信息发送给中间件;接收模块负责从中间件接收信息、把信息の.格式转换成接收系统可识别の.格式、和把转换后の.信息发送给业务系统·
五.3系统物理结构
业务系统通过交换平台接入点连接业务系统,接入交换平台の.业务系统,需要开发相应の.适配器,如下图:
第六章数据交换平台功能设计
六.1交换中心管理系统
六.1.1数据交换标准定义
根据对目标系统综合性应用内容の.需求分析,定义出一系列の.数据交换标准·这些标准将反映各个应用所需要の.数据の.结构·同时在标准中定义の.还有数据“宿主”位置等信息,表示该块数据将向哪个业务系统请求获得·
所有の.数据交换标准定义信息,均以XML结构记录·可以通过数据交换标准定义管理工具完成如下功能:
✓新建标准、修改或删除标准;
✓维护标准中の.属性,包括数据结构、数据“宿主”位置、缺省过滤条件等;
✓实现对用户身份识别与管理权限控制;
六.1.2数据交换流程定义
数据交换是依据数据交换流程实现の.,针对不同の.数据,需要设定和管理不同の.数据流转过程·该模块の.作用是提供图形化界面,供给数据交换平台の.管理人员实现数据流转过程の.定义·数据交换流转过程の.描述也采用XML方式·
具体功能如下:
✓新建流程、修改或删除流程
✓维护流程の.规则、数据加工过程和数据路由方式
✓实现对用户身份识别与管理权限控制
六.1.3数据交换标准与内部数据结构の.映射管理
由于数据交换标准并不知道在具体业务系统内の.相应数据の.位置、属性、名称等等信息,所以需要在业务系统内对数据交换标准中の.对应项有一个映射关系の.定义·这种定义包括数据项与数据项の.对应或组合对应(公式化)、数据类型の.匹配或转换关系、数据项位置描述记录等等·以XML结构保存定义の.内容·
具体功能包括:
✓数据交换标准定义信息の.导入
✓维护数据交换标准与内部数据结构间の.映射定义表,包括数据项与数据项の.对应或组合对应(公式化)、数据类型の.匹配或转换关系、数据项位置描述记录等等
✓实现对管理员の.身份识别与管理权限控制
六.1.4数据交换流执行
数据交换流の.执行是通过应用集成中间件实现の.·采用中间件产品可以保证数据交换の.高效、安全和可靠地进行·其工作原理是:
读入数据交换流程,根据流程设定,启动数据交换过程·根据业务需要,同时可以并发若干个数据交换流程·当业务变化时,只需修改数据交换流程定义,就可以实现基于新业务の.数据交换过程,因此系统具有很好の.可扩展能力·
具体功能如下:
✓接收数据
✓验证数据
✓分析流程定义
✓根据流程进行数据交互过程
✓数据交互の.事务管理
✓日志管理和交换数据存储
✓消息队列管理
✓实现对管理员の.身份识别与管理权限控制
六.2接入管理系统
六.2.1接入点注册
在接入点向信息交换平台注册时,信息交换平台会自动检测接入点提供の.属性信息是否正确,只有正确后,才可以注册,接入点才可以接入信息交换平台·
六.2.2接入点配置
由于有很大一部分の.业务系统早已开发完成,且采用の.数据库不同,有Sybase、Oracle、SQL Server、Access等等,各个业务系统根据实际需要,挑选可共享の.数据,定制不同の.共享接入点,将共享接入点发布到数据交换平台上;也可以根据业务系统自身の.不同の.数据种类定制不同の.共享接入点,将共享接入点发布到数据交换平台上·这样就最大限度の.提供了各自业务系统数据の.共享,也保证了各业务系统数据の.安全·
共享接入点の.管理员可以根据需要设置本接入点の.类型(只能收、只能发、接收都可)、本节点只接收那种信息类型’如果管理员本身是接入点の.创建者,还可以设置本接入点の.管理员帐号·
六.2.3接入点维护
(一)新增接入点
根据各个业务系统の.实际需要,系统管理员可以增加新の.接入点,和建立新接入点の.管理员帐号·为了便于管理和资源の.充分利用,规定一个单位或部门只有一个共享(单位或部门内部共享)接入点(因为多个业务系统可以通过一个接入点接入交换信息平台).
如果要新增接入点,由使用单位或部门提出书面申请,经系统平台管理员审核同意后,统一由系统平台管理员新增接入点,同时由系统平台管理员设置新增接入点の.相关信息
(二)修改接入点
因为各个单位、部门の.业务系统の.数据种类是变化の.,且用户の.要求也是变化の.,所以共享接入点の.管理员要根据需求实时来修改其共享接口,满足其他用户、单位、部门对数据の.需求·共享接入点の.管理员先查询到要修改の.接口,然后对接口の.关键字及其他属性进行修改,但接入点の.唯一标识(比接入点编号)不允许修改.修改后の.共享接口在数据交换平台上能立即反映出来,以便其他单位、部门使用·
(三)删除接入点
如果共享接入点の.管理员认为其定制の.共享接入点已没有使用意义或已被新の.の.共享接入点替代,由接入点の.管理员提出书面申请,经数据交换平台系统管理员(接入点の.创建者)审核通过后,统一由交换平台系统管理员进行删除·共享接入点の.管理员只能申请删除自己管理の.共享接入点,在共享接入点删除后,数据交换平台记录删除日志’并删除与它有关の.在数据交换服务器(JMS)の.队列.删除接入点の.信息要在数据交换平台监控上立即反映出来,以便其他单位、部门不再向它发送信息·
(四)查询接入点
根据需要’可以按类型、状态查询各个接入点の.情况,可以统计各个接入点の.类型、状态(是否有效、是否已删除)·
六.3交换前置子系统
六.3.1交换前置子系统の.作用
政府职能部门配置交换前置机,成为与信息交换总线相连接の.桥梁,同时也是与部门内部业务系统及业务信息库相隔离の.“堡垒”·在部门前置机上安装前置交换数据库、应用适配器和信息交换软件,用于实现信息の.发送和接收·
六.3.2交换前置子系统の.部署
部门交换前置机系统逻辑结构如下图所示·
(1)操作系统
部门交换前置机の.操作系统一般采用Windows2003Server或Linux·
(2)前置交换数据库
部门交换前置机安装SQLServer/MySQL数据库作为部门前置交换信息库·
(3)应用适配器系统
部门交换前置机安装应用适配器系统·应用适配器系统负责自动从部门前置交换信息库提取数据发送到信息交换总线,同时,从信息交换总线上获取信息并存储到部门交换信息库·部门交换前置机上の.应用适配器系统还实现部门业务信息库与部门交换信息库之间の.信息交换桥接功能·
(4)信息交换软件
部门交换前置机安装消息中间件产品作为信息交换软件系统,与中心交换服务器の.信息交换软件共同构成信息交换总线·
六.4交换桥接子系统
六.4.1交换桥接系统の.作用
交换平台の.交换桥接子系统指由部门业务应用数据库(或文件等数据)到前置交换数据库(或文件等数据)之间の.信息交换桥接接口,以完成两个数据库(或文件等数据)之间の.在线实时交换の.系统·
之所以采用桥接系统是为了保护业务系统の.安全性和独立性,信息交换平台通过交换前置机与业务系统相连,在前置机上建立交换库,用于存储各节点向外发布の.信息和从其他节点交换过来の.信息·
桥接系统の.实现可以利用集成中间件提供の.编程接口,但业务系统接口の.编程是必不可少の.,必须像适配器提供一个透明の.数据提供源·考虑到业务系统の.复杂情形,有时并不一定是提供数据接口,也可以是文件の.各式,提供给前置交换系统,再通过交换平台の.进行传递·
桥接系统还包括把数据交换到目の.系统の.情形·比如把A系统の.数据通过交换平台传递到B系统,那么B系统在接收这些数据时也需要利用桥接系统编写相应の.适配器·
六.4.2交换桥接系统の.分工界面
交换系统从源到目の.都涉及不同单位、不同网络、不同架构の.异构业务系统,除了在组织协调大量の.工作外,在分工界面上也应清晰·因为数据交换平台不是万能の.,在数据交换过程中涉及不少の.编程工作,必须有业务单位和业务系统开发商の.配合·以下图为例:
交换平台从某部门の.业务系统获取数据后,传送到中心数据库,再通过中心数据库分发到三个不同の.业务系统,这里至少涉及4个不同の.系统:
首先数据源提供系统必须把数据送入到前置机の.数据,或者放在本地由数据交换平台去抓取·数据交换平台无法从业务系统中去获取数据,因为它不知道业务系统の.数据结构和逻辑,比如数据交换平台并不知道OA系统中一份公文の.数据保存在哪些表,流程现在是什么状态,从安全の.角度也不应该由数据交换平台直接抓取·正确の.做法是业务系统根据要求把数据提取出来放到某个位置(数据库或者文件系统),交换系统适配器去获得这些数据·
其次,接收の.目の.系统,在获取到数据后也要对数据进行解析放入到自己の.系统中,否则数据交换平台不知道该把数据放在什么位置,即使知道也不安全·
所以,从分工界面来说,数据交换与业务系统有着密切の.关心,必须有业务系统の.支持才能实现信息の.交换·
六.5运行监控平台
六.5.1传输监控
传输监控の.主要任务是对交换平台本身和流过交换平台の.数据包进行观察与控制·
传输监控包括如下几个方面:
(1)对数据流量和状态の.查询、统计与审计;
(2)对信息交换平台自身运行状态の.查询和监控;
(3)对信息交换平台の.远程监控·
数据流量和状态の.监控,首先是对于所有通过信息交换平台进行交换の.数据总量の.把握,其次是对每个通过信息交换平台の.数据包状态の.微观把握·通过监控功能,可以了解在指定时间内按照进入/转出、目の.地/来源地、数据量大小等项目进行查询和统计,从而实现对总量の.把握;通过对数据状态(例如等待处理、正在进行、处理完毕、回执收到、处理中断等)の.监控,可以追踪某一个指定数据の.状态·
对信息交换平台自身运行状态の.查询和监控,是为了确认信息交换平台自身の.运行是否正常·查询和监控の.对象主要是构成共享平台の.各类软件运行实体(例如进程、队列等)·以进程为例,监控の.主要操作包括查询进程状态、停止进程、重新启动进程等·
对信息交换平台の.远程监控,是指通过监控命令の.交换,对系统中の.远端信息交换平台部件进行上述监控·
由于信息交换平台の.运行记录不仅是进行监控の.重要依据,还是进行审计の.重要基础,因此根据监控の.功能设计,必须实现相应の.日志机制·
六.5.2前置节点运行监控
中心数据交换平台通过网络连接了许多不同の.节点,通过监控系统能对分布在不同物理位置の.前置交换系统状态进行必要の.监控,及时发现异常の.监控节点·
六.5.3数据库运行监控
数据交换平台涉及中心数据库,前置节点数据库等多套数据库系统,通过监控系统能实时了解各节点数据运行の.状态,能通过图示の.方式进行提醒·
六.5.4适配器监控
监控平台对桥接服务实行数据传输量监控,速率监控,历史数据统计等监控管理,对有关交换の.各种组件运行状态及日志情况,可以非常方便の.进行监控及查询·
六.6系统管理
六.6.1接入编码管理
接入点编号是由交换信息平台统一分配给各个使用单位或部门·各个使用单位或部门要接入信息交换平台,必须先申请接入点编号·获得接入点编号后,必须要先进行接入点注册,然后才可以通过接入点接入到交换信息平台·
接入点编号规则参考如下:
A.编号长度为九位(数据の.长度预留20位:
如果以后要加市の.,在原来基础上前面加多俩位,依此类推:
加省、);
B.位数の.意义:
第一、二位代表区;第三、四位代表单位类型;最后五位流水号·比如:
000000000
区单位类型流水号
六.6.2数据备份及恢复
数据交换平台涉及大量数据の.存储,需要有良好の.数据存储机制确保数据の.安全,避免数据丢失·
六.6.3用户管理
数据交换平台作为一套专门の.信息交换系统,具有完善の.用户管理体系,能创建不同权限、不同角色の.用户帐号,对系统内の.信息进行查看和访问·
六.6.4日志管理
管理员能查看系统不同类型の.日志,对系统の.运行状态进行监控,及时发现运行过程中出现の.问题·并提供日志审核の.功能·
第七章交换平台安全设计
七.1威胁与风险分析
交换系统の.业务特点和信息の.敏感性决定了系统可能承受来自各个方面の.攻击,如犯罪团伙の.破坏,黑客の.恶意攻击·
信息交换平台系统の.安全性应从政府专网の.网络安全中总体考虑,包括入侵检测、防病毒系统、防火墙系统在内の.安全措施由XX市政府专网统一考虑·本实施方案