9A文数据产品规格说明书Word格式文档下载.docx
《9A文数据产品规格说明书Word格式文档下载.docx》由会员分享,可在线阅读,更多相关《9A文数据产品规格说明书Word格式文档下载.docx(24页珍藏版)》请在冰豆网上搜索。
2完成风险相关数据标准在元数据管理系统的落地;
3完成风险相关数据质量的评估及数据质量评估分析模型的开发。
4完成其他业务需求中明确的试点系统的数据标准发布和质量评估落地工作。
二.2项目范围
二.2.1实施内容
1)元数据管理系统和数据质量评估管理系统相关基础性工作
根据业务需求,结合企业现有系统的情况,制定具体项目实施方案,确保能完成相关咨询成果在系统内的部署和设置。
完成系统接口设计、系统架构设计和形成实施所需的需求规格化文档等工作。
完成产品的集成安装和初步调试工作。
若提供的软硬件配置建议书不能完全满足企业软硬件选型需要的,需要协助事先完成必要的产品测试工作,确定最终的系统软硬件配置清单。
2)元数据管理系统和数据质量评估管理系统的客制化开发实施
根据企业的业务需求,对产品或应用进行客制化实施。
根据对业务、技术元数据进行抽取和加载,在系统中建立元数据之间的映射关系。
根据评分模型对评分卡进行客制化开发,并能将评分结果数据在第三方报表平台上展现。
本阶段需要完成系统的概要设计、详细设计;
完成数据接口设计和数据ETL工作;
完成产品的配置,应用和报表的客制化开发等。
产品客户化过程中,出现在场人员无法解决的技术或产品问题时,投标人应及时组织国内国外资源,快速解决问题,不能因此对项目进度造成影响。
3)元数据管理系统和数据质量评估管理系统的测试
完成元数据管理系统和数据质量评估管理系统的各类测试工作,包括:
单元测试、集成测试、压力测试和协助用户测试,测试工作需要符合企业测试规范要求。
单元测试和集成测试的主要工作是:
制定测试策略和计划、准备测试案例和数据、执行各类测试案例(含功能测试、接口测试、报表测试、系统管理和非功能性需求测试等)、分析测试结果、针对测试问题进行回归测试。
压力测试的主要工作是:
制定测试策略和计划、准备测试案例和数据、执行性能测试案例、分析测试结果、针对测试问题进行回归测试,完成系统调优工作。
用户测试的主要内容是:
做好测试数据准备工作,并协助完成测试。
4)元数据管理系统和数据质量评估管理系统的上线和试运行
完成元数据管理系统和数据质量评估管理系统的上线和试运行工作。
元数据管理系统和数据质量评估管理系统上线的相关事宜,主要包括:
确定系统软硬件、完成系统整体部署(含集成部署)、调试和调优、完成系统的初始化工作。
完成符合企业规范的上线和移交文档。
编写用户操作手册、业务手册、系统操作手册等。
元数据管理系统和数据质量评估管理系统试运行相关工作,主要包括:
试运行实施规划、试运行过程中的问题整理和处理、试运行结果分析等。
维护系统、明确系统应急处理机制并演练等。
二.3方案概述
数据管控系统建设方案元数据产品MetaOne系统和数据质量系统QualitROne,并结合专业的业务和技术团队,旨在建立一套符合企业数据管控体系建设需求的数据管控体系系统。
数据管控体系建设项目依托元数据和数据质量管理体系,旨在建立一套符合企业特色的数据管控体系系统,本项目实施主要完成数据管控系统咨询成果落地工作,通过数据标准配置;
指标标准管理及分析预警;
元数据获取和调度;
数据质量分析和预警展示和数据探查分析和预警等模块,全方位全角度展示企业系统平台技术和业务元数据分析,最终,实现数据质量监控预警。
第三章总体方案
三.1系统架构
三.1.1总体系统架构
数据管控体系建设平台实施方案采用双模式进行调度配置,为保证第一时间有效监控业务风险相关业务指标监控情况,因此,总体方案中,首先采用企业数据仓库平台调度平台优先监控风险相关业务指标信息,其次元数据管理产品内部调度机制,加载相关平台,关系数据库(应用业务数据和技术业务数据)和数据模型等元数据信息。
信息交付层:
主要展示元数据和数据质量成果信息,展示方式主要通过都必须通过AD域验证(统一认证平台),信息访问通过报表平台BIEE和元数据系统内部展示平台展示元数据和数据质量分析预警信息。
应用层:
主要提供企业BIEE报表系统展示的数据接口,展示业务客户需要的业务元数据信息。
系统管理层:
主要描述MetaOne和QualitROne为用户提供基本功能完善的元数据仓储管理平台,并支持基于平台的应用服务定制。
丰富的调用接口和强大的二次开发指南,保障产品良好的适用性。
系统整体在功能上,划分为存储层、基本功能层、接口层、应用层。
数据获取层:
主要描述系统获取元数据方式有两种触发方式,为实现监控风险相关业务指标,系统将采用部分任务配置在调度平台调度;
其他数据获取方式将采用MetaOne定时触发和依赖满足触发任务,将所需的业务指标数据和平台技术数据安装规范加载至平台内部。
源数据层:
主要描述数据管控体系的数据源信息,包括标准格的业务元数据;
镜像业务系统关系数据库;
ETL系统标准元数据信息;
平台相关技术元数据信息;
模型设计文件元数据和咨询涉及的其他标准元数据文件成果。
三.1.2物理系统架构
数据管控体系系统物理架构采用应用服务和数据库服务器独立方式设计,同时,两台服务器具体内部互补自动切换功能,有效防止由其他因素导致的系统瘫痪。
三.2系统数据流程
下面展示元数据和数据质量系统数据流程图示如下:
三.3网络和安全
MetaOne元数据系统部署于企业的业务网段,通过代理将应用服务器地址反向映射办公网段,仅开通WEB服务端口,向位于办公网段的业务管理用户提供服务;
其他业务系统的接入均在企业的业务网段内,与外部环境隔离。
三.3.1开放的Internet标准
系统建立在开放的Internet标准之上,例如:
SSL,HTTP,RML,TCP/IP,SOAP,支持多层次的客户机/服务器体系结构,其通过TCI组件支持多种报文的传输、组包、解包;
利用webservice实现与异构系统之间的数据交换。
可以成功运行在支持Java虚拟机的各种操作系统及相应的各种硬件平台上,符合信息技术的发展方向,具备广泛的应用前景。
三.3.2系统层安全
系统层安全主要针对系统的操作系统和数据库等软件平台进行安全防护,其主要采用的措施如下:
安装系统的安全补丁(Patch)。
关闭不需要的进程服务和端口。
使用漏洞扫描产品,定期进行安全扫描及时发现问题并采取补救措施。
定期审核系统配置,避免因配置不当造成的权限管理混乱。
三.3.3业务安全控制
通过安全代理前置设备、防火墙等系统来保证系统的安全性,以及通过负载均衡来保证系统的高可用性,这只是从网络环境和系统结构的角度保证系统的安全,整个系统的安全性应该是一个多层次的概念。
主要考虑一下几个方面:
关键操作有详细的操作记录可查。
登录系统日志的安全审计
多维的交易权限管理机制,关键操作提供多重授权功能。
对于管理端的关键数据设置提供严格的复核机制,以保证数据的正确性、合法性。
会话管理(Session):
与应用服务器的会话管理结合,实现多种会话的建立和管理,让不同的会话采用统一的管理机制。
同时实现会话的超时管理,有效防范避免操作人员使用已经失效的会话进行误操作,同时防止垃圾会话数据占用内存,影响系统性能甚至使系统无法工作。
三.3.4统一身份认证
针对统一身份认证系统的要求,系统采取一种适用(针对)于WebLogicServer的、简洁的、有效可行的统一认证即单点登陆(SSO)解决方案。
这个方案以集中统一的用户信息为基础,但不包括上节说明的权限管理,而仅仅提供一个身份验证的服务。
实现SSO的本义。
在SSO帮助用户完成身份验证后,由系统本身的权限管理进行用户行为的进一步控制。
这样不仅完成了用户帐号的集中管理,又不失原有系统灵活的权限控制。
而且方案简单可行,不需要对原有应用做较大更改,适合快速解决SingleSign-On问题,符合行内系统的要求。
其主要采用SAMLBrowserPostProfile方案,通过推模式获取SAMLToken,由IdentitRProvider推Assertion到ServiceProvider.而后验证Assertion将用户重新定向到目标URL。
三.4系统灾备
为了保障对数据处理的高可靠性和高可用性,系统需要具有较好的实时备份和灾难恢复能力。
系统采用SQLSERVER20RR数据库服务器支持的双机热备容错方案来实现系统的备份策略,由两台机器共享一个磁盘阵列(共享磁盘组),当其中一台机器发生故障时,另外一台机器接管整个磁盘阵列,从而实现双机容错。
如下图:
第四章
方案细化
四.1产品功能
四.1.1元数据
元数据产品MetaOne采用高内聚、低耦合的组件式产品架构,丰富功能组件,为客户搭建功能强大的元数据管理平台。
向用户全面开放元数据功能调用接口,并提供整套实施方法论。
使用户在完成元数据管理、维护等基础功能的同时,方便实现二次开发,满足行业应用的针对性需求。
●基本管理平台(MetaOnePlatform)
由元数据仓储、Web应用程序、元数据接口层、统一数据源管理客户端、元模型操控台以及元数据基本维护管理功能组成的组件集合,是MetaOne产品的基本功能集。
●元数据存储库(MetaDataRepositorR)
基于关系数据库的元数据存储库,用于实现元数据的物理存储。
●元数据基本维护界面(MetaOneWebAPP)
B/S结构的Web管理程序,实现用户对元数据的一般管理、维护操作。
●对外服务接口(MetaOneInterface(MOI))
一组基于JavaRMI的API集合,内容包括对元数据、元模型的所有基本操作,配套提供使用方法论,使用户方便调用,实现二次应用开发。
●元数据获取器(MetaDataIntegrationBridge(MIB))
数据源管理平台,对所有连接系统的数据源进行统一管理,实现数据源元数据的抽取和元数据向MetaDataRepositorR的导入。
●元模型管理控制操作台(MetaOneConsole)
元模型操控台,用户通过操控台实现元模型建模。
●基础应用分析
元数据的基本维护管理功能
●高级应用分析
通过元数据接口,调用元数据及相应功能,针对行业需求开发的应用。
四.1.1.1功能特性
MetaOne的产品理念,是为用户提供基本功能完善的元数据仓储管理平台,并支持基于平台的应用服务定制。
●元数据存储层
包含元数据存储库,负责承载不同领域的元模型以及相关的元数据。
●元数据基本功能层
实现系统对元数据的基本功