数据库建设技术报告文档格式.docx
《数据库建设技术报告文档格式.docx》由会员分享,可在线阅读,更多相关《数据库建设技术报告文档格式.docx(36页珍藏版)》请在冰豆网上搜索。
同时,对于错填、漏填的属性要进行修正、补填,检查无误后,保存入库。
3.行政区设置
通过行政区设置工具,生成市一县一乡一村一组多级字典,并对行政区必要字段进行维护。
4.权属数据检查入库
农村土地承包管理系统进行发包方、承包方等权属信息的录入及承包地块的关联。
按照软件提供的EXCEL模板,将收集的发包方、承包方及地块信息录入完整,通过批量导人功能,将相应信息挂接人库。
5.数据维护
通过软件提供的维护功能进行标识码、要素代码、地块编码、四至、面积等维护,同时进行数据的统计。
6.成果输出
数据检查无误后,在行政区目录组织处,导出成果包,利用农村土地承包经营权确权登记数据库成果质量检查软件质检
1.4数据库结构
1.县级数据库逻辑结构
2.总体框架
(1)基础层
基础层主要包括支撑农村土地承包经营权软件运行的网络设备、服务器、防火墙及操作系统、数据库管理软件等。
(2)数据层
数据层主要包括基础地理数据和登记调查数据。
基础地理数据包括DOM影像;
登记调查数据包括合同、登记、纠纷仲裁、流转等业务数据。
(3)服务层
服务层应用层的业务运行的支撑,包括GIS技术、SOA技术、工作量技术、组件技术等。
(4)应用层
包括数据建库子系统和登记颁证子系统。
数据建库子系统主要包括矢量数据的采集、格式转换、数据处理、调查数据录入、地块管理及数据库的维护功能;
登记颁证子系统主要包括图形化管理、登记管理、权证管理、流转管理与服务、纠纷仲裁管理、查询与统计、数据上报、历史回溯等功能。
3.架构体系
系统采用B/S架构与C/S架构相结合的架构体系。
数据库建库子系统采用C/S即客户端/服务器端的软件架构,能够保证数据的安全,数据入库的效率等;
登记颁证子系统采用B/S的软件架构,能够方便的进行部署。
4.GIS平台选择
选用技术先进、成熟稳定正版GIS(地理信息系统)平台arcgis10.0,平台具备空间数据采集功能、编辑处理功能、制图功能、空间分析功能等。
5.数据库选择
选用PostgreSQL数据库作为本次农村土地承包经营权项目的数据库管理平台。
6.县级数据库表结构
各要素表结构见附表.
2数据库建设方法
2.1建设依据
(1)《中华人民共和国农村土地承包法》
(2)《中华人民共和国物权法》
(3)《中华人民共和国土地管理法》
(4)《农村土地承包经营权调查规程》(NY/T2537-2014)
(5)《农村土地承包经营权要素编码规则》(NY/T2538-2014)
(6)《农村土地承包经营权确权登记数据库规范》(NY/T2539-2014)
(7)《土地登记办法》(2008,中华人民共和国国土资源部)
(8)《土地调查条例》(2008,中华人民共和国国务院令第518号)
(9)《土地权属争议调查处理办法》(2003,国土资源部17号令)
(10)《土地利用现状分类》(GB/T21010-2007)
(11)《第二次全国土地调查技术规程》(TD/T1014-2007)
(12)《全球定位系统(GPS)测量规范》(GB/T18314-2009)
(13)《城市测量规范》(CJJ/T8-2011)
(14)《1:
5001:
10001:
2000地形图图式》(GB/T7929-1995)
(15)《地籍调查规程》(TD1001-2012);
(16)《城镇变更地籍调查实施细则(试行)》(1998,国土[籍]字第36号);
(17)《日常地籍管理办法〈农村部分〉》(1992,国土[籍]字第8号);
(18)《城镇地籍数据库标准》(TD/T1015-2007)
(19)《全国耕地类型区、耕地地力等级划分》(NY/T309)
(20)最新《全国县及县以上行政区划代码表》。
(21)《数字测绘成果质量检查与验收》(GB18316-2008);
(22)其它相关材料。
以上规范和标准如有变化,以最新发布的为准。
2.2工作程序
2.3软硬件准备
1)软件准备
操作系统:
win7(旗舰版)(64位)
浏览器:
ie8
办公软件:
MSOffice2010
2)系统运行环境
.netFramework3.5
ArcGISEngineRuntime10.1
ArcGISDesktop10.1
农村承包经营权空间数据处理系统
农村土地承包管理系统。
3)硬件准备
服务器:
处理器:
酷睿i5
硬盘:
2T
内存:
8G
客户端:
Inteli5,硬盘:
1T,内存:
8G,操作系统:
Win7
其他:
针式打印机、扫描仪
4)人员准备
建库人员都对数据建设都有丰富的经验,从事过二调数据库建设,农村土地所有权数据库建设,农村宅基地数据库建设。
2.4组织与实施
2.4.1项目组织机构设置
根据项目的实施,主要分为以下六个部门,所有部门工作均向各小组、各部门负责人汇报,汇总之后提交技术部负责人,技术部负责人负责对项目管理部汇报,参见项目组织结构图。
2.4.2制定工期进度计划
(1)根据本标段项目工作量及业主的进度计划要求,制定资料收集、数据处理、成果编辑、成果检查及数据汇交等工序和时间要求,达到控制整个项目总体进度的要求。
(2)核算具体服务项目各工序的工程量,在工期要求时间内完成。
(3)保证项目的关键环节、重点准时甚至提前完成。
消除各种不利条件的限制和影响,充分考虑施工过程中的不利影响条件,使项目切实可行并按期完成。
2.4.3施工计划协调
成立项目实施协调组,协调组由业主、项目部组成。
主要议题是项目工作计划的实施情况,项目计划的重大变更,业主与项目部之间需要协调的重大问题等。
协调方式采用协调会商制度。
2.4.4例会制度
例会每月召开一次,例会由项目经理主持。
通过例会,掌握项目施工进展情况,纠正偏差,协调动作,解决问题,优化方案。
例会内容记录在案,特别是详细记录存在的问题及解决问题的措施。
举行定期的例会来监督项目的进程。
3数据收集与处理
3.1数据内容
农村土地承包经营权确权登记数据库主要包括用于农村土地承包经营权调查、确权登记的地理信息数据和权属数据。
①地理信息数据包括基础地理信息要素、农村土地权属要素和栅格数据。
1)基础地理信息要素包括定位基础、境界与管辖区域以及对承包地块四至描述有重要意义的其他地物信息。
2)农村土地权属要素指用于描述承包地块的面积、四至、地类和空间位置等的矢量信息。
3)栅格数据指用于描述承包地块及其空间分布、方位、毗邻关系等信息的栅格图件。
②权属数据包括发包方、承包方、承包地块信息、权属来源、承包经营权登记簿、承包经营权证等。
1.数据建库的基本要求
调查数据入库前应依照工作底图、调查草图、地块分布图和实际调查情况检查点、线、面之间的相互关系,并进行拓扑处理,构建拓扑关系并核查其正确性。
同一个县级行政区内不同调查单元上报数据结果后,应进行数据汇总和拼接,相邻调查单元矢量数据拼接应确保拓扑关系正确。
不同比例尺或不同精度的数据接边,以较大比例尺或较高精度的调查结果为基准。
数据库的地图投影参数应以调查时的数学基础为准。
对于跨投影带的县级行政区,数据库的地图投影参数以该行政区内承包地块主要分布的投影带投影参数为准。
空间数据入库前,应以县为单位检查数据的完整性、准确性和逻辑一致性,以及空间数据分层和文件命名的规范性等内容。
2.数据库建设工作
(1)地理信息数据包括基础地理要素、承包地块要素和栅格数据。
(2)权属数据包括发包方、承包方、承包地块信息、权属来源、承包经营权登记簿、承包经营权证等。
(3)调查数据入库前应依照工作底图、调查草图、地块分布图和实际调查情况检查点、线、面之间的相互关系,并进行拓扑处理,构建拓扑关系并核查其正确性。
(4)不同调查单元上报数据结果后,应进行数据汇总和拼接,相邻调查单元矢量数据拼接应确保拓扑关系正确。
(5)数据库的地图投影参数应以调查时的数学基础为准。
(6)空间数据入库前,应以县为单位检查数据的完整性、准确性和逻辑一致性,以及空间数据分层和文件命名的规范性等内容。
(7)上级农村土地承包经营权管理部门应制订统一的方案,对下级部门上报的空间数据进行检查、组织和整合后导入本级数据库。
3.2数据处理
将采集到的数据按照规程、规范进行整合处理,形成标准结构的数据格式,然后使用数据库系统输出相关数据成果。
1.数据交换
确权登记数据库需要交换的数据内容包括3种,包括地理信息数据、土地经营承包权权属数据和元数据。
数据交换格式和要求如下:
①地理信息数据,包括基础地理信息要素、农村土地属性要素和栅格数据等;
地理信息数据包括矢量数据和栅格数据2种类型。
矢量数据采用标准ShapeFile格式(shp)。
同一个县级行政区内的矢量文件进行拼接后,存放在矢量数据目录中。
矢量数据文件命名为地理信息数据属性表名+6位县级区划代码+4位年份代码。
栅格数据采用国际工业标准无压缩的TIFF格式(TIF),但需将大地坐标在栅格影像上的定位信息以及像素的地面分辨率等信息添加到TIFF文件上。
内容和格式符合《地理空间数据交换格式》(GB/T17798-2007)的规定。
栅格数据采用标准图幅形式进行组织,存放在栅格数据目录中,分别建立“数字正射影像图”、“数字栅格地图”和“其他栅格数据”目录管理。
②权属数据,包括发包方、承包方、承包合同、流转合同、承包经营权登记簿、承包经营权证等;
权属数据包括表格数据和文档资料2种类型,统一存放到“权属数据”目录中。
表格信息采用MDB格式保存,文件命名采用10位数字型代码,即6位县级区划代码+4位年份代码。
文档材料按照文件夹分类管理。
③元数据
数据交换时以县级行政区为交换单元,数据文件采用目录方式存储,一个交换单元一个目录。
元数据采用XML格式存放到元数据目录中。
栅格数据的元数据的内容和格式符合《地理信息元数据》(GB/T1971005)的技术要求;
矢量数据的元数据主要包括数据标识、空间参照系统、数据内容、数据质量4个部分。
矢量数据元数据结构参见附录。
3.3数据库创建
使用PostgreSQL数据库进行创建,结合现有其他系统的实际情况,建设农村土地承包信息数据库。
主要包括数据建库字典配置和标准数据库创建。
1.字典配置
数据库字典表的增加、修改、删除及表中字段的设置。
数据库字段配置时从本字典库中其他表中拷贝字段或者从SHP文件获取字段。
2.标准数据库创建
根据选择的数据库类型、坐标系统、路径以及登陆名称密码设置,系统自动创建出PostgreSQL数据库。
3.数据编辑
数据编辑主要是为用户提供各类数据编辑与处理的工具,辅助用户进行数据处理以及相关数据检查后数据错误的修改编辑。
主要包括矢量数据编辑处理、属性数据编辑、栅格数据处理等功能。
4.矢量数据编辑处理及拓扑检查
整理收集到的原始数据,检查数据质量,包括数学基础、数据精度等,确保满足建库的需要。
检查的内容有:
1)测量数据
a)数学基础是否正确;
b)要素代码是否有为空;
c)地块界线是否封闭,地块间是否存在重叠或缝隙。
2)权属调查成果
a)权属调查成果资料是否齐全;
b)表单成果填写是否完整、清晰,有无遗漏。
矢量数据编辑处理功能可对矢量数据进行导入、修改等。
系统实现了自定义数据处理流程的构建,通过整合基础的数据处理功能,构建数据处理流程,实现数据处理的流程自动化。
调查数据入库前依照工作底图、调查草图、地块分布图和实际调查情况检查点、线、面之间的相互关系,并进行拓扑处理,构建拓扑关系并核查其正确性。
3.4属性数据编辑
属性数据编辑支持属性字段增加、删除;
可实现数据记录删除、追加与修改;
实现对属性数据的导出。
3.5栅格数据编辑处理
能够进行图像的镜像、裁减、旋转、自动拼接、空间分辨率调整等常用图像处理功能。
系统针对复杂的数据处理、修改等操作提供了扩展脚本的支持,通过脚本的扩展,用户可以根据自己的需求,实现更复杂的数据处理功能。
4数据入库
将处理后的图形和属性数据通过建库软件批量导入到数据库中。
并根据数据库结构与标准,使用数据库管理系统的建库功能录入纸质表单上的属性数据。
需要录入的信息主要有:
发包方信息,承包方信息,承包地块信息等,并与地块图层进行关联挂接。
数据入库后,根据需要进行统一整理,如补充填写必填字段等,主要通过数据库管理系统提供的功能完成。
主要进行整理的内容有:
1)界址点、界址线图层的拓扑生成以及属性的赋值。
并以村民小组为单位,统一生成界址点号并进行排序,应保证界址点号的唯一性。
2)属性挂接后保证必填字段不为空。
4.1数据检查体系及功能
主要包括以下功能:
1)灵活的图形属性检查机制,可对检查规则进行自定义配置;
2)针对单层或多层图形数据提供属性检查及图形拓扑检查,格式和精度分析功能;
3)对于错误数据处理系统提供方便快捷的自动批量一键式处理或手动交互式处理功能:
4)地块跨界检查:
系统自动检查地块是否跨小组界线,可批量裁剪;
并且能够定位跨界地块,进行修改;
5)地物属性批量修改。
支持字段赋常值、字符截断、字段拼接、字符替换等;
6)能对数据进行接边操作。
4.2数据编辑处理
系统按照用户权限,提供各类数据编辑与自动批量一键式处理或手动交互式处理功能,以便在相关数据检查定位后辅助对错误数据进行编辑与处理,如删除和清理导入的错误数据,使得在导入数据发生意外错误时可更正处理,使数据库中的数据不出现垃圾数据等。
(1)数据错误自动修改
系统支持数据错误的自动批量处理,针对数据质量检查报告,实现批量自动改正数据错误,并生成错误修改报告。
(2)矢量数据处理
流程的配置同样采用可视化的方式,操作简单明了。
(3)数据接边处理
为保证全区域范围内的图形无缝,相邻图幅之间的接边尤为重要。
选择需要接边的图幅根据需要设置接边容差,对图幅边界上距离在容差范围内的数进行共点处理。
接边完成后,对处理后数据重新进行接边检查,直至无错误即可。
(4)图形检查处理
为保证数据库中数据实体的规范性与精确性,系统提供数据检查功能,实现对数据的自动质量检查。
待整合的成果数据以及后续更新的数据均要在入库前进行质量检查。
数据检查以交互式和批量进行,支持多用户并行检查,基于检查的内容和结果,形成内容清晰、易于错误定位、提供一定错误修正指导的检查报告。
数据导入完成后,系统通过检查模板自定义、层结构符合性检查、属性数据检查、图形数据检查等功能,实现数据分项质量检查。
具体内容如下:
1)检查模板自定义
用户可根据检查对象对检查模板自定义,设定不同的检查项目。
2)属性数据检查
检查数据值及其单位的正确性,如地类图斑面积扣除的正确性;
检查土地调查分类面积汇总表等统计汇总表数据是否正确;
检查调查成果和汇总成果的数值单位是否符合要求等。
3)图形数据检查
点线面单层、多层图形检查。
检查数据逻辑关系的正确性,如地块是否跨小组界线,可批量裁剪;
检查图形拓扑关系的正确性,如是否存在多余及重叠节点、图形是否闭合、是否存在线的自相交等问题。
4.3权属调查信息录入
录入调查数据并能和GIS数据进行数据关联。
发包方、承包方、地块信息支持手工录入及通过excel批量挂接,并且支持自定义增删字段及模板编辑。
包含新增、修改、删除等维护。
利用GIS平台提供的空间数据转换功能、坐标系转换、图形编辑功能、自动拓扑及拓扑检查工具快速完成图形内业处理入库。
依据农业部农村土地承包经营权数据库标准中空间数据属性要求,内置标准数据库模版,提供各类属性建库自动处理工具、属性表挂接工具,调查数据并能和GIS数据进行数据关联,发包方、承包方、地块信息支持手工录入及通过excel批量挂接,通过设置属性字段映射关系对导入的数据完成字段整理,可自定义增删字段及模板编辑,包含新增、修改、删除等维护。
4.4档案资料扫描
①历史确权档案扫描。
包括村(组)集体经济组织土地承包(调整)方案、本集体经济组织成员的村民会议或村民代表会议关于承包地确权问题的决议(意见)和会议记录等。
②证明材料扫描,包括承包合同、承包方调查表、发包方调查表、地块调查表、调查草图、地块分布图、调查信息公示表、公示结果归户表,土地承包纠纷调解原始记录及调处协议,其他由农户签字盖章的申请、申明、委托、确认等文字材料等。
扫描档案的电子图片大小合适、字迹清晰、方向正确、色彩真实。
根据农业部、国家档案局关于印发《农村土地承包经营权确权登37记颁证档案管理办法》的通知(农经发〔2014〕12号)和《湖北省农村土地承包经营权确权登记颁证档案分类方案、归档范围和保管期限表》对成果档案进行扫描命名。
5数据库建设质量控制
5.1质量控制方法
建库过程中以及建库完成后,需对数据库质量检查实行自检、互检、专检、抽查等质量保障措施,并编写相应的质量检查报告。
1.成果检查
对各单位提交的数据成果进行检查,重点检查数据的命名、格式、内容等方面是否符合相关规定的要求,特别是文档资料数据的表格填写等是否符合规定。
2.索引检查
对提交数据生成的索引进行维护检查,检查索引的正确性,能否与存储路径相对应,并对索引的完整性进行检查,检查是否含盖了所有的汇交数据。
3.拓扑关系检查
对相邻调查单元矢量数据拼接,为确保拓扑关系正确需要进行拓扑关系检查。
4.数据完整性、准确性和逻辑一致性检查
空间数据入库前,以县为单位检查数据的完整性、准确性和逻辑一致性,以及空间数据分层和文件命名的规范性等内容进行检查。
5.数据汇总
将各乡镇的符合质量要求的数据成果进行收集整理。
数据接边
为保证全区域内的图形的完整性,因此要对图形进行接边处理。
6入库前后数据一致性分析
在数据有多分副本及计算标准不同的情况下,如网络、服务器或者软件出现故障,会导致部分入库成功,部分写入失败,及数据计算标准不一致,字段长度不一致,如转换亩采取666.6667等于亩与1平方米等于0.0015亩在部分情况下是不一致的。
这就造成前后数据之间的不一致,数据内容冲突。
实践中,导致数据不一致的情况有很多种,表现样式也多种多样,比如数据更新返回操作失败,事实上数据在存储服务器已经更新成功。
6.1一致性
通过对比入库前后所有数据节点上的数据一致性和正确性,及数据库在一个事务内,对数据的一些约束。
系统在执行过入库操作后数据仍然处于一致的状态。
在执行更新操作执行成功后,用户都应该读取到最新值且与入库前一致。
7数据质量检查结果分析
7.1数据质量检查方法
对于数据质量的逻辑正确性采用农村土承包经营权质量检查软件质检,对于数据质量的真实性采用外业抽样的方式进行。
7.2内外业检查
内业小组按照检查验收规定审查成果资料,并做好检查验收记录。
外业小组按照检查验收规定进行检查对照、审核成果资料,并做好检查记录
7.3形成检查验收报告
专项检查验收工作完成后,实施检查验收方应出具检查验收报告,检查验收报告应由具体的负责人签章或单位签章确认。
检查验收报告应包括检查验收的组织形式、时间、对象,检查验收的依据,提交检查验收的成果资料,检查验收的数量,工作评价、成果评价、整改意见、检查验收结论等。
形成检查验收报告后,应对检查验收情况进行总结,向接受检查验收的单位通报检查验收情况、宣布检查验收结果。
7.4检查结果评定表
经宜昌市检查,被评定为优秀。
7.5数据库检查内容表
如下图所示,详细检查表见附录
8成果自检评定
1.在数据质量方面经作业员应对成果数据进行全面自查,技术负责人应组织作业员互查,指出问题,提出意见并改正;
经应组织专业质量检查员对重要环节进行重点检查,指出问题,提出意见并改正;
经专业质量检查员要不定期的进行抽查,确保数据质量;
数据拼接时,应组织相关人员对拼接结果的接边精度进行检查和控制,应在建库工作中,定期开展阶段性的质量检查,经农业部质检软件质检检查;
数据质量评价为合格。
2.入库过程中,作业单位应保证软硬件设备的连续、稳定运行,配备相应的值守人员和应急设备,避免入库作业过程中,由于设备不稳定造成数据损坏;
入库过程中,加强数据库的版本管理和成果的阶段性备份,数据库稳定性评价为合格。
3.建库软件的一个特点就是稳定高效,在不断的测试与运用中,得到了很好的检验。
访问效率较高,满足运用需求。
综上所述,成果自检评定为合格。
9存在的问题及解决方案
9.1存在的问题
农村土地情况十分复杂,地域差别较大,国标数据库也几经修改来满足各地出现的情况。
有的地方有退耕还林、退耕还湖的,有的地方有集体流转的,为了适应本地的实际情况,各地都有相应的数据库及矢量数据的标准;
有时候一个县是由多个标段分包的,作业单位不同,采购的软件可能不一样,软件如未能及时更新,数据结构也有些许区别,这就需要将多种数据整合起来,最终形成国标数据;
数据质检是以区县为单位进行的,而实际调查过程中,均以行政村为单位进行,一个区县有几百个行政村,就需要将几百个行政村的数据,检查是否有压盖、重叠、不合理缝隙,修改的数据再合并