数据管理方案.docx
《数据管理方案.docx》由会员分享，可在线阅读，更多相关《数据管理方案.docx（11页珍藏版）》请在冰豆网上搜索。
数据管理方案
数据中心数据管理方案
1、公司现有数据现状
现公司主要的大数据容量的主要为公司的航片数据和卫片数据、警用调查成果的照片数据，以及用来做调查的大比例尺地形图数据，目前公司勘测、数据、软件部门加起来大概50T的容量。
考虑到以后的扩展和数据备份，数据中心此次预计100T的容量进行数据管理。
针对这种大容量数据管理有三种解决方案：
1、支持大容量的存储+磁带库备份
2、多个NAS级存储
3、购买大量1T和2T的硬盘（一份存储+一份备份）+行之有效的数据进出及保存制度。
前段时间与公司领导从管理的方便性、投入的成本等各方面考虑讨论的结果来看，决定采用第三种解决方案——用大容量硬盘进行管理。
2、硬盘购买的数量及总价
存储100T左右的数据，可以采购1T或2T的硬盘进行存储（1T的硬盘相对比较稳定）。
选购硬盘时需考虑到硬盘的转速、硬盘的缓存容量、硬盘的平均寻道时间、硬盘的功耗以及硬盘的价格。
单碟容量是目前硬盘发展的重点，几乎就是决定硬盘档次的标准，目前盘片数量最多为5张，在盘片数无法增加的情况下，提升单碟容量是提升硬盘容量的唯一办法。
所以，我们在购买硬盘的时候，选择采用垂直记录技术的产品，在性能方面表现更出色。
缓存就作为硬盘中的一个缓冲的区域，调节两者之间的数据传输，缓存的大小直接影响到硬盘的性能，缓存区域越大数据的稳定性就越好，自然数据等待时间也就越短，一般反应到实际操作中就是运行速度越快。
转速是影响硬盘性能的主要因素，目前主流硬盘都采用了性能与可靠性比较均衡的7200rpm设计。
平均寻道时间是硬盘性能参数中非常重要的一个，受硬盘转速与记录密度的影响。
在转速都为7200rpm的情况下，硬盘的记录密度越高，平均寻道时间就越短，更短的平均寻道时间就意味着硬盘在读写大量小文件时的性能更好。
目前市面上硬盘品牌主要有：
西部数据；希捷；日立
根据以下比较，我们可以选择采购的品牌、以及采购方案。
1T容量的硬盘
品牌
西部数据
希捷
日立
规格型号
西部数据1TBSATA3黑盘
WD1002FAEX黑盘
希捷1TBSATAII32M（ST31000340AS）
日立1TBSATA232MHitachiE7K1000
容量
1000G
1000G
1000G
接口标准
S-ATAIII
S-ATAII
S-ATAII
转速
7200rpm
7200rpm
7200rpm
缓存容量
64M
32M
32M
单碟容量
500G
500G
500G
平均寻道时间
读取寻道时间小于8.5ms,写入寻道时间小于9.5ms
读取寻道时间小于8.5ms,写入寻道时间小于9.5ms
平均寻道时间为8.5ms
功耗
休眠和待机0.7W
空闲6.1W,读写6.8W
平均功耗方面寻道11.6W,读写12W,空闲8W
市面价格
￥ 580
￥520
￥560
根据性能好价格相对较优的原则，优先选择西部数据1TBSATA3黑盘的方案。
对与2T容量的硬盘来说，同种品牌同种型号的硬盘价格较昂贵，稳定性也相对差些，目前西部数据2T容量的黑盘市面价格约为1850元，所以在采购硬盘时可以选择价格相对便宜，但绿色节能的西部数据2TBSATAII64MB（WD20EARS）/绿盘。
1、现在市场上1T容量的西部数据黑盘大约是580元，
总价格：
580元/块*100块=58000元
2、2T容量的西部数据绿盘大约是780元
总价格：
780元/块*50=39000元
考虑到2T硬盘稳定性没有1T硬盘的稳定性好，数据存储采用1T硬盘和2T硬盘结合存储的方式，公司密级程度较高、重要性程度较高的数据存放在1T硬盘中，一般重要的数据存放在2T的硬盘中。
现阶段公司数据量比较大，且重要数据比重大，需要综合性能高的西部数据1TBSATA3WD1002FAEX黑盘来存放，因此建议采购50块1T容量的硬盘用于存储重要数据，25块2T容量的硬盘用于储存一般数据。
数据中心按100T容量建设考虑，共需要采购50块1T硬盘，25块2T硬盘，采购一个能够用USB接口进行数据读取的硬盘盒（建议采购SSK飚王星威3.5寸硬盘盒SHE056），总共费用约为：
50块1T硬盘，共计580元/块*50=29000元；
25块2T硬盘，共计780元/块*25=19500元；
硬盘盒1个，约200元，一共需要：
48700元。
考虑到目前公司数据的大小约为50T左右以及硬盘存放问题，建议分期购置，暂时先购置50块硬盘：
20块1T硬盘，共计580元/块*20=11600元；
15块2T硬盘，共计780元/块*15=11700元，
硬盘盒1个，约200，
总共23500元。
待公司数据容量需求扩大时再购置50T容量的硬盘。
（以上价格是数据管理员初步询价的结果，在实际采购时，可能会有些偏差。
）
3、数据盘保存方式
3.1保存位置
由于所需硬盘占用的空间比较大，且数据都是比较重要的，所以建议存放在档案室的铁柜子中，采用防潮、防火、防震、防静电措施，每块硬盘配一个防静电袋，每层铁柜中配防潮珠，每层铁柜垫有海棉或泡沫，每层铁柜贴上标签。
铁柜全部上锁，由数据管理员专员保管钥匙。
3.2数据保存方式
1、数据种类分为：
涉密与非涉密，对涉密数据进行Ⅰ（秘密）、Ⅱ（机密）、Ⅲ（绝密）三种不同级别的密级程度的分类划分。
2、公司先确定涉密数据与非涉密数据，数据中心对涉密数据和非涉密数据分别以不同的标识给磁盘标号。
4、重要的所有数据必须保证同一时间都有二份一样的数据，即标记为存盘的一份，标记为备盘的一份。
例1：
现购买的硬盘总量是100块，标签标记如下：
涉密数据：
【密Ⅰ】XX存001~050，【密Ⅰ】XX备001~050
【密Ⅱ】XX存001~050，【密Ⅱ】XX备001~050
【密Ⅲ】XX存001~050，【密Ⅲ】XX备001~050
非涉密数据：
XX存001~050，XX备001~050
另外每个标记下面标记硬盘的采购时间（这个比较重要，方便以后保修）。
备注：
所有数据使用部门有读取该磁盘需要的员工，个人机器必须何证每周一次全盘扫描查毒的过程，且病毒库在全盘扫描之前必须先更新。
同时要及时打上系统补丁，防止数据硬盘被感染病毒。
3.3数据管理流程
数据入库流程
数据入库时需要按照密级的不同分别进行登记，普通的数据入库需要填写普通数据入库的登记表，密级高的数据入库则需要填写高密级数据入库登记表。
在新的ERP上线后，数据的入库情况同时保存到ERP的数据管理子系统中，可以通过系统对现有数据进行快速查询和检阅，快速找出所需要的数据。
注：
普通数据入库登记表以及高密级数据入库登记表见附件一
数据出库流程
数据出库时同样需要按照密级的不同分别进行登记，普通的数据出库需要填写普通数据出库的登记表，密级高的数据出库则需要填写高密级数据出库登记表
在新的ERP上线后，数据的出库外借情况同时保存到ERP的数据管理子系统中，可以通过系统对领用的数据进行快速查询和检阅，快速找出目前在领用状态的数据。
注：
普通数据出库登记表以及高密级数据出库登记表见附件一
涉密数据销毁流程
数据销毁后，一方面要登记销毁的数据内容，一方面，把已经销毁的数据从数据入库内容中删除。
数据销毁时需要填写数据销毁的登记表
注：
数据销毁登记表见附件一
附件一
普通数据入库登记表
序号
数据名称
数据是否涉密
密级
数据所属项目简称
数据类型/格式
数据来源
入库时间
存盘标签号
备盘标签号
数据入库人签名
数据中心签字
备注
高密级数据入库登记表
序号
数据名称
密级
涉密数据所属项目简称
数据类型/格式
数据来源
入库时间
存盘标签号
备盘标签号
数据入库人签名
数据中心签字
备注
普通数据出库登记表
序号
数据名称
是否涉密
密级
数据所属项目简称
数据类型/格式
出库时间
数据存盘的标签号
销毁人
转存数据销毁时间
销毁方式
数据出库人签名
数据中心签名
备注
高密级数据出库登记表
序号
数据名称
密级
数据所属项目简称
数据类型/格式
出库时间
数据存盘的标签号
销毁人
转存数据销毁时间
销毁方式
数据出库人签名
数据中心签名
备注
数据销毁的登记表
序号
销毁数据名称
是否涉密
所属项目简称
数据类型/格式
销毁原因
销毁审批是否同意
销毁时间
数据存盘的标签号
销毁人签字
备注
密级
保密员
保密组长
数据中心签字
升级会员 