精准扶贫大数据解决方案.docx

精准扶贫大数据解决方案.docx

《精准扶贫大数据解决方案.docx》由会员分享，可在线阅读，更多相关《精准扶贫大数据解决方案.docx（71页珍藏版）》请在冰豆网上搜索。

XXX精准扶贫大数据解决方案

XXX精准扶贫大数据

（解决方案）

XXX信息技术有限公司

2016年03月17日

XXX大数据精准扶贫

36

目 录

1项目概述 6

1.1背景概述 6

1.2建设目标 6

1.3建设原则 7

2需求分析 9

2.1需求概述 9

2.2目标架构 10

3总体架构设计 12

3.1系统架构设计 12

3.2技术架构设计 13

3.3系统接口设计 13

4应用系统建设方案 15

4.1数据采集层建设 15

4.2扶贫数据仓库建设 15

4.2.1扶贫数据源梳理 15

4.2.2扶贫对象信息库设计 16

4.3信息资源管理平台 19

4.4数据整合服务 20

4.5数据管理平台 21

4.6扶贫应用建设 21

4.6.1扶贫对象洞察 21

4.6.2扶贫项目管理 22

4.6.3扶贫资金管理 22

4.6.4精准扶贫监控系统 23

4.6.5扶贫资源推荐 24

4.6.6扶贫综合分析 24

4.7扶贫门户层建设 25

4.8脱贫攻坚作战指挥中心 25

5技术平台建设方案 28

5.1扶贫数据采集 28

5.2流程管理 28

5.3数据挖掘 28

5.4可视化工具 29

5.5门户平台 29

5.6接口和服务管理 30

6大数据云平台建设方案 31

6.1架构设计 31

6.2虚拟化方案 31

6.2.1计算虚拟化 31

6.2.2存储虚拟化 32

6.2.3网络虚拟化 33

6.3平台资源管理 34

6.3.1云资源池设计 34

6.3.2业务高可用设计 35

6.4大数据平台 36

6.4.1数据采集 37

6.4.2数据预处理 37

6.4.3数据存储及管理 37

6.4.4数据分析及挖掘 38

6.4.5数据展现与应用 39

7硬件建设方案 40

7.1服务器设计 40

7.1.1CPU 41

7.1.2 内存 41

7.1.3 磁盘 42

7.1.4 网卡 42

7.2存储设计 42

7.2.1RAID类型选择 42

7.2.2IOPS计算 43

7.2.3LUN划分 44

7.3网络设计 44

7.3.1网络性能要求 44

7.3.2VLAN划分 44

7.4设备建议 46

8安全管理方案 47

8.1物理安全 47

8.2网络安全 47

8.2.1链路安全 47

8.2.2网络安全 47

8.2.3协议安全 48

8.2.4端口安全 48

8.3系统安全 49

8.3.1物理机安全 49

8.3.2虚拟机安全 49

8.3.3平台安全 49

8.4数据安全 50

8.4.1数据安全 50

8.4.2数据资源安全 51

8.5管理安全 51

8.5.1安全管理制度 51

8.5.2安全管理组织与人员配置 51

8.5.3标准规范 52

9运维管理方案 53

9.1平台运维思路 53

9.2平台运维管理 53

9.2.1设备资源和台账管理 53

9.2.2设备维护管理 58

9.2.3运维考核 59

9.2.4系统管理 59

9.3运维管理规范 60

10集成实施方案 61

10.1系统集成方案 61

10.1.1应用系统集成技术 61

10.1.2应用系统集成方式 62

10.1.3应用系统间信息和业务关系 62

10.2软硬件部署方案 63

10.3项目管理 64

10.4人员组织 64

11项目建设规划 66

12软硬件设备需求清单 67

1项目概述

1.1背景概述

我国现在有2015年我国农村贫困人口从上年的7017万人减少到5575万人，减少1442万人（比上年多减210万人），贫困发生率从上年的7.2%下降到5.7%。

党的十八届五中全会提出了在“我国现行标准下农村贫困人口实现脱贫，贫困县全部摘帽，解决区域性整体贫困。

”的伟大目标。

2015年11月27至28日，中共中央总书记、国家主席、中央军委主席习近平对扶贫开发工作做出详细部署。

针对“扶持谁”“谁来扶”“怎么扶”三个关键性问题，做出了详尽的部署，要坚持精准扶贫、精准脱贫，重在提高脱贫攻坚成效。

关键是要找准路子、构建好的体制机制，在精准施策上出实招、在精准推进上下实功、在精准落地上见实效。

因此构筑扶贫大数据平台，强化扶贫开发的实施方法，对贫困户进行甄别，实现扶贫对象精准，剔除非贫困人员和已脱贫人口，保障真正帮助有需要的贫困人员；同时利用大数据的方法，对贫困人员进行精准画像、建模和打标签，形成贫困人员画像库；通过全方位采集数据，对贫困户、贫困村、贫困地区信息进行深度分析，依据画像和分析的结果，制定帮扶措施和帮扶项目，真正实现精准扶贫。

扶贫项目、扶贫资金的管理也需要进行实时、全流程监测分析，利用大数据

的海量数据处理和实时分析技术，构筑扶贫项目和资金监管系统，对扶贫项目和资金的运行流程，进行监控，同时以户为单位对项目帮扶的效果和资金使用情况进行实时监测，确保项目、资金监管的精准。

同时依据XXX省的扶贫开发工作的要求，对五个一批帮扶的全流程进行实时监测，确保帮扶效果。

精准扶贫的目的是为了实现精准脱贫，依托大数据技术，对贫困人员和贫困户的帮扶效果和脱贫状态进行实时监测，实现退出机制精准，确保贫困人员及时脱贫，满足XXX省扶贫开发工作的需要，落实好XXX省制定的脱贫攻坚任务。

1.2建设目标

基于主流的大数据、云计算、互联网+技术构建扶贫大数据分析平台，服务

XXXXXX省精准扶贫、精准脱贫工作。

按照国家扶贫办、XXX省的统一的标准规范，对分散在各个乡镇、村的贫困户建档立卡数据，扶贫开发工作相关的政府其他部门数据，构建扶贫基础数据库，同时抽取扶贫办现有业务系统数据，整合处理后形成扶贫业务库和扶贫分析库，供上层应用系统使用。

根据XXXXXX省扶贫开发工作的需要，精准扶贫综合管理系统和智能决策系统，服务与精准扶贫，同时构筑扶贫监控系统和扶贫调度指挥中心，支撑精准脱贫。

借助于互联网+，建设扶贫APP和自助终端，实现数据采集和精准查询、精准服务。

1.3建设原则

扶贫大数据平台的建设原则既要注重与现行信息技术有关的国家标准、行业标准和国际标准的相互衔接，又要充分考虑扶贫大数据平台不断发展对标准提出的更新、扩展和延伸的要求，应遵循以下原则：

（1）统一规划的原则

强化顶层设计和综合统筹，按照扶贫办相关建设指导意见和XXX省、市扶贫工作建设规划的统一要求，避免重复建设、孤立建设。

（2）整合共享的原则

最大限度地利用现有的网络、硬件、软件、数据和信息资源，以扶贫为抓手，促进政府各部门的互联互通、业务协同与集成，减少资源浪费。

（3）适用性原则

应当考虑到XXX省扶贫开发工作的实际情况和未来发展方向，加强扶贫对产业的推介和帮扶，使得系统的设计方案具有良好的适用性。

确保功能完善，界面友好，兼容性强，能使用户最方便地实现各种功能，做到“先进实用、有限目标、充分利用现有资源”的建设原则。

（4）先进性原则

以现行需求为基础，充分考虑发展的需要来确定系统规模。

以平台化开发来构造应用体系，功能模块子系统以组件方式扩展。

系统的开发和设计在技术上足够先进，以保证开发出来的系统能够在较长的一段时间内仍能在技术层次上不至于落伍。

（5）扩展性原则

系统结构设计应易于升级和扩展，能满足未来扶贫信息化系统的需求；并为外部系统、企业和公众提供标准数据接口。

（6）稳定性原则

为了保证精准扶贫日常工作的正常运转，要求系统具有良好的稳定性，系统应具备良好的容错能力，保障在特殊情况下不中断正常工作。

（7）安全性的原则

采取积极措施，加强硬件设备、软件措施、网络组建等安全，技术保障，并在管理上建立有效的内外部安全机制，切实杜绝安全隐患。

XXX精准扶贫大数据解决方案

2需求分析

2.1需求概述

XXX省大数据扶贫攻坚的总体思路，是通过大数据服务精准定位脱贫对象，多方整合政府、社会资源，调动多种服务手段，基于大数据全面性和高效性，整合公共与社会的资源，构建XXX省大数据扶贫攻坚服务生态体系，实现扶贫对象精准化、扶贫策略多样化、扶贫结果高效化、扶贫过程标准化,如下图所示。

n“扶持谁”的目标：

基于大数据对贫困人员进行画像、建模、打标签，对贫困户进行甄别；全方位采集数据，实时监测贫困户、贫困村、贫困地区信息；采用大数据技术对贫困地区、人员、致贫原因、脱贫原因进行分类、深度挖掘，预测贫困人员和致贫原因；

n“谁来扶”的目标：

通过大数据的手段对扶贫产业、扶贫项目、扶贫人

员、扶贫政策、扶贫行业等进行画像、建模、分类；依据画像的结果，采用互惠推荐的模式，实现精准扶贫，精准定位合适的帮扶项目/人员，帮扶合适的贫困对象；

n“怎么扶”的目标：

利用大数据技术，建立脱贫项目和资金监管系统，实时监测脱贫项目、资金的使用情况和帮扶效果，保障脱贫项目精准、有效全方位，多渠道采集数据，对贫困户的脱贫状态进行监测、深度分析，实现精准脱贫。

紧紧围绕国家关于精准扶贫开发的总体思路:

帮扶谁、怎么帮、谁来帮为业务导向，五个一批为精准扶贫举措来规划扶贫相关业务系统，为精准扶贫提供支

撑、决策和服务。

分析精准扶贫的政策、参与人、参与组织、企业、产业、行业、扶贫措施等建立扶贫生态，满足各方的业务需求，建立业务模型，规划相关业务系统。

目标用户包括贫困户、贫困村、政府扶贫办/帮扶人员、驻忖人员、社会爱心人士/企业/组织,通过平台把目标用户接入到平台，形成和力，共同协作为扶贫做出贡献。

平台为目标用户提供多样化的服务功能和扶贫措施，包括贫困户的信息采集、所在地的地理信息，环境和管理，自助终端，信息发布，项目管理，资金管理，相关产业的运营支撑。

平台能够根据当地环境，地理等信息，能够提供精准的帮扶措施、决策功能,帮扶措施可以针对区域、贫困村、贫困户.主要帮扶措施包括但不限于产业帮扶、行业扶贫、异地扶贫、整村推进、人才培训、扶贫创新、金融合作、定点扶贫、国际交流合作、东西协作、社会帮扶等。

平台可以实时监控扶贫的各个环节,如资金的使用监控、扶贫过程的监控、效果的监控等,对于异常情况发出预警.同时对扶贫进行考核和评估。

2.2目标架构

XXX精准扶贫大数据利用主流的大数据、云计算技术实现，采用分层的方法构建大数据分析平台，集群采用分布式架构部署实施。

包括基础设施，PAAS，DAAS，

SAAS四层架构。

3总体架构设计

3.1系统架构设计

XXX精准扶贫大数据采用领先的大数据云架构进行实现，主要包括6层：

基础设施层、数据采集层、数据仓库层、应用层、门户层和展示层。

基础设施层主要提供扶贫大数据平台使用的基础资源，包括计算、存储、网络、容灾/备份等；

数据采集层主要负责数据采集，从扶贫大数据平台所需的数据需求出发，包括不限制与扶贫办建档立卡的数据、政府厅委办局及其他机构采集相关贫困对象的数据、从各乡镇扶贫驻村机构手工上传数据，装载进扶贫大数据平台，供上层业务使用；

数据仓库层构成了扶贫大数据