一种三区三线省级数据库质量检查系统及方法与流程

未命名 09-07 阅读:96 评论:0


1.本发明涉及数据分析技术领域,具体而言,涉及一种三区三线省级数据库质量检查系统及方法。


背景技术:

2.长期以来,我国部分区域的各类空间主体存在功能不明确、相互交错、相互不协调的问题,导致生态保护受影响,耕地和永久基本农田减少,而城镇无序扩张,因此,以2020年度国土变更调查成果为基础,全面开展了“三区三线”划定工作。
3.随着“三区三线”划定工作的展开,涉及“三区三线”的各项业务数据量巨大,且数据之间的联动性较低,导致人工核查作业成果速度较慢。另外,由于省级数据库构建的前期相关工作主要落实于县级工作人员,而当前县级作业人员水平参差不齐,可能技术不规范,作业成果不达标准,进而在人工核查大量参考数据时,准确度低,数据分析不精准。


技术实现要素:

4.本发明所要解决的问题是如何对数据库的作业成果进行高效、准确的质量检查。
5.为解决上述问题,本发明提供一种三区三线省级数据库质量检查系统,包括数据中台模块、数据分析模块和数据模型算法配置模块,
6.所述数据中台模块用于获取作业成果数据,根据所述作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,所述耕地成果数据包括不同市县的耕地用地数据;所述永久基本农田成果数据包括不同市县的永久基本农田用地数据;
7.所述数据分析模块用于对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否质量合格;
8.所述数据模型算法配置模块用于为所述数据传输模块和所述数据分析模块提供模型配置和算法配置,以支持所述数据中台模块和所述数据分析模块进行数据分析。
9.与现有技术相比:本发明所述的三区三线省级数据库质量检查系统,包括数据中台模块、数据分析模块和数据模型算法配置模块,通过各模块之间的通讯连接,进行数据的信息交互,数据中台模块通过获取作业成果数据,并对其进行处理得到耕地成果数据和永久基本农田成果数据,并发送至数据分析模块,由数据分析模块进行数据分析处理,将处理后的数据与预设成果标定范围进行对比,进而判断耕地成果数据和永久基本农田成果数据是否质量合格,通过本发明能够增强数据的联动性,提高对数据的有效利用率,同时,本发明还将数据进行并发处理,区别现有技术中采取的人工叠加数据检查的方式,本发明通过将数据进行拆分,分别进行处理,不仅提高了数据处理的效率,还使得数据更加清晰,不易造成数据混乱,提高核查准确率,并且通过数据模型算法配置模块的模型和算法辅助,帮助本系统加快处理大量数据,采取更加优化的算法和模型对数据进行处理,从而实现对省级数据库的作业成果进行高效、准确地质量检查。
10.可选地,所述数据中台模块包括作业成果目录单元、作业成果数值库单元、举证材料单元、作业成果预核查单元和数据分类单元,
11.所述作业成果目录单元用于存储重大项目用地数据、耕地保护目标图斑数据和永久基本农田图斑数据并进行实时更新;
12.所述作业成果数值库单元用于为所述数据分析模块提供所述预设成果标定范围;
13.所述举证材料单元用于获取不纳入耕地保护目标举证材料和永久基本农田举证材料;
14.所述作业成果预核查单元用于核查所述作业成果数据的目录结构与文件名称是否完整;
15.所述数据分类单元用于当所述作业成果数据的目录结构与文件名称完整时,对所述作业成果数据进行分类处理,获得所述耕地成果数据和所述永久基本农田成果数据。
16.可选地,所述数据分析模块包括图层分析单元,
17.所述图层分析单元用于提取所述作业成果数据中的成果图层数据,判断所述成果图层数据中的图层范围是否位于行政区域图层范围内,若所述图层范围不位于所述行政区域图层范围内,则重新进行提取所述成果图层数据,直至所述图层范围位于所述行政区域图层范围内;
18.所述图层分析单元还用于提取所述耕地成果数据和所述永久基本农田成果数据中的每个图斑,并分析每个所述图斑是否完整;
19.当所有所述图斑完整时,对所述耕地成果数据和所述永久基本农田成果数据进行对比和/或核算;
20.当所述图斑存在不完整时,生成警示信号发送至所述数据中台模块,其中,所述数据中台模块接收所述警示信号后,进行重新获取所述作业成果数据。
21.可选地,所述数据分析模块还包括图斑面积核算单元,
22.所述图斑面积核算单元用于核算所述耕地成果数据和所述永久基本农田成果数据中的每个图斑的面积,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标。
23.可选地,所述数据分析模块还包括数据对比单元,
24.所述数据对比单元用于将所述图斑的面积与所述预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理;
25.所述数据对比单元还用于将所述重大项目用地数据与重大项目用地标准进行对比,判断所述重大项目用地数据是否符合标准;
26.所述数据对比单元还用于将所述耕地保护目标图斑数据和所述永久基本农田图斑数据进行对比,当所述永久基本农田图斑数据中的图斑范围全部位于所述耕地保护目标图斑数据中的图斑范围时,判断永久基本农田符合标准;
27.所述数据对比单元还用于将所述不纳入耕地保护目标举证材料与所述预设成果标定范围进行对比,判断所述不纳入耕地保护目标举证材料中的用地是否纳入耕地保护目标范围;还用于将永久基本农田举证材料与所述预设成果标定范围进行对比,判断所述永久基本农田举证材料中的用地是否纳入永久基本农田范围。
28.可选地,所述数据分析模块还包括数据核查单元,
29.所述数据核查单元用于根据划定基础数据,分别对所述耕地成果数据和所述永久基本农田成果数据进行对比核查,判断所述耕地成果数据和所述永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理。
30.可选地,所述对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,包括:
31.获取多线程的线程池,将所述耕地成果数据和所述永久基本农田成果数据分配至所述线程池,通过所述线程池的多个执行流分别对所述耕地成果数据和所述永久基本农田成果数据进行分析处理。
32.可选地,所述数据模型算法配置模块包括模型配置单元,
33.所述模型配置单元用于为所述数据中台模块、所述数据分析模块提供数据计算模型和成果核查模型,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标。
34.可选地,所述数据模型算法配置模块还包括算法配置单元,
35.所述算法配置单元用于为所述数据中台模块、所述数据分析模块提供数据准备基础算法和数据分析基础算法,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标,其中,所述数据准备基础算法包括数据清理、数据转换、数据筛选、数据正则化。
36.为解决上述问题,本发明还提供了一种三区三线省级数据库质量检查方法,包括:
37.获取作业成果数据,根据所述作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,所述耕地成果数据包括不同市县的耕地用地数据;所述永久基本农田成果数据包括不同市县的永久基本农田用地数据;
38.对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否质量合格。
39.本发明所述的一种三区三线省级数据库质量检查方法与所述一种三区三线省级数据库质量检查系统相对于现有技术的优势相同,在此不再赘述。
附图说明
40.图1为本发明实施例中三区三线省级数据库质量检查系统的结构图;
41.图2为本发明实施例中三区三线省级数据库质量检查方法的流程图。
具体实施方式
42.为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
43.为解决上述问题,结合图1所示,本发明提供一种三区三线省级数据库质量检查系统,包括数据中台模块、数据分析模块和数据模型算法配置模块,
44.具体地,数据中台模块、数据分析模块和数据模型算法配置模块相互通讯连接;通讯连接是通过信号的传输交互在连接的设备之间构成通讯的连接方式,即通过信号的传输
交互在连接的设备之间构成通讯,其中,通讯连接包括有线连接和无线连接。
45.数据中台模块用于获取作业成果数据,根据作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,耕地成果数据包括不同市县的耕地用地数据;永久基本农田成果数据包括不同市县的永久基本农田用地数据;
46.具体地,“三区三线”是根据城镇空间、农业空间、生态空间三种类型的空间,分别对应划定的城镇开发边界、永久基本农田保护红线、生态保护红线三条控制线的简称,同时,根据“三区三线”的划定对耕地和永久基本农田进行质量检查,其中,耕地用地数据包括但不限于耕地保护目标数据和不纳入耕地保护目标数据,可以理解的是,在实际应用过程中,对于耕地用地数据的具体数据内容可以根据用户的实际需求进行人为设定,本实施例中数据中台模块将获取的作业成果数据进行处理,得到耕地成果数据和永久基本农田成果数据,可以理解的是,为便于对后期数据处理,本实施例中耕地成果数据和永久基本农田成果数据会经过处理得到对应得图斑信息,其中,图像分割或者矢量图套合,将整个影像划分成若干个小的区域,这样的区域一般叫做图斑或者像斑,或者是单一地类地块,以及本行政界线,土地权属界线或线状地物分割的单一地类地块称为图斑。
47.数据分析模块用于对耕地成果数据和永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断耕地成果数据和永久基本农田成果数据是否质量合格;
48.具体地,本实施例中的预设成果标定范围为多个标定范围数据,可以理解的是,在进行省级数据库质量检查时,针对不同的检查项目有不同的预设成果标定范围,在本实施例中的预设成果标定范围可以理解为所有标定范围的总称,例如,当对永久基本农田成果数据进行质量检查时,需调取预设成果标定范围中永久基本农田保护标定范围与永久基本农田成果数据进行对比核查,进而判断永久基本农田保护红线数据是否质量合格,因此,本实施例中的预设成果标定范围不是单一一个或一组数据。
49.数据模型算法配置模块用于为数据传输模块和数据分析模块提供模型配置和算法配置,以支持数据中台模块和数据分析模块进行数据分析。
50.本实施例所述的三区三线省级数据库质量检查系统,包括数据中台模块、数据分析模块和数据模型算法配置模块,通过各模块之间的通讯连接,进行数据的信息交互,数据中台模块通过获取作业成果数据,并对其进行处理得到耕地成果数据和永久基本农田成果数据,并发送至数据分析模块,由数据分析模块进行数据分析处理,将处理后的数据与预设成果标定范围进行对比,进而判断耕地成果数据和永久基本农田成果数据是否质量合格,通过本实施例能够增强数据的联动性,提高对数据的有效利用率,同时,本实施例还将数据进行并发处理,区别现有技术中采取的人工叠加数据检查的方式,本实施例通过将数据进行拆分,分别进行处理,不仅提高了数据处理的效率,还使得数据更加清晰,不易造成数据混乱,提高核查准确率,并且通过数据模型算法配置模块的模型和算法辅助,帮助本系统加快处理大量数据,采取更加优化的算法和模型对数据进行处理,从而实现对省级数据库的作业成果进行高效、准确地质量检查。
51.可选地,数据中台模块包括作业成果目录单元、作业成果数值库单元、举证材料单元、作业成果预核查单元和数据分类单元,
52.作业成果目录单元用于存储重大项目用地数据、耕地保护目标图斑数据和永久基
本农田图斑数据并进行实时更新;
53.具体地,本实施例中的重大项目用地数据为经过国家或省市审核通过的重要项目所需要占用土地的面积数据,且包含该用地的图斑信息和地理位置信息,便于核算时确定其用地位置;耕地保护目标图斑数据为耕地保护目标对应的图斑信息,其中,耕地保护是指运用法律、经济、技术等手段和措施,对耕地的数量和质量进行的保护;永久基本农田图斑数据为永久基本农田对应的图斑信息,其中,永久基本农田即对基本农田实行永久性保护,即无论什么情况下都不能改变其用途,不得以任何方式挪作它用的基本农田,基本农田是指按照一定时期人口和社会经济发展对农产品的需求,依据土地利用总体规划确定的不得占用的耕地,永久基本农田既不是在原有基本农田中挑选的一定比例的优质基本农田,也不是永远不能占用的基本农田,本实施例中的重大项目用地数据、耕地保护目标图斑数据和永久基本农田图斑数据可进行人为实时更新,进而使得后续质量检查时,数据的准确率更高。
54.作业成果数值库单元用于为数据分析模块提供预设成果标定范围;
55.具体地,预设成果标定范围为人工根据省级要求进行人为设定,并由作业成果数值库单元进行储存和输出至数据分析模块。
56.举证材料单元用于获取不纳入耕地保护目标举证材料和永久基本农田举证材料;
57.具体地,为结合实际用地情况,通过举证材料单元获取不纳入耕地保护目标举证材料和永久基本农田举证材料,进而对用地实际情况进行判断,从而确定各举证材料对应的用地如何划定与核查。
58.作业成果预核查单元用于核查作业成果数据的目录结构与文件名称是否完整;
59.具体地,为在前期对作业成果数据进行预处理,因此,通过作业成果预核查单元核查目录结构与文件名称是否完整,若核查时,目录结构与文件名称不完整将不进行后续的核查处理,从新进行获取作业成果数据,通过本实施例的预处理,一定程度上降低了后续数据错误的概率,避免了后续数据的缺失与混乱,提高三区三线省级数据库质量检查的准确性。
60.数据分类单元用于当作业成果数据的目录结构与文件名称完整时,对作业成果数据进行分类处理,获得耕地成果数据和永久基本农田成果数据。
61.具体地,本实施例中的数据分类单元通过对作业成果数据进行分类处理,使得核查前期数据得以分门别类,避免数据叠加的错误率,使得数据清晰明了,便于提升后续数据分析的效率和准确性。
62.可选地,数据分析模块包括图层分析单元,
63.图层分析单元用于提取作业成果数据中的成果图层数据,判断成果图层数据中的图层范围是否位于行政区域图层范围内,若图层范围不位于行政区域图层范围内,则重新进行提取成果图层数据,直至图层范围位于行政区域图层范围内;
64.具体地,在进行作业成果数据核查前,需先进行提取成果图层数据,确定该图层位于对应的行政区域图层范围内,若图层范围不位于行政区域图层范围内,则证明对于图层提取出现错误,若继续进行作业成果数据核查,将出现重大失误,因此,在核查前先检验图层是否准确。
65.图层分析单元还用于提取耕地成果数据和永久基本农田成果数据中的每个图斑,
并分析每个图斑是否完整;
66.当所有图斑完整时,对耕地成果数据和永久基本农田成果数据进行对比和/或核算;
67.具体地,图层分析单元还可对耕地成果数据和永久基本农田成果数据中的每个所述图斑进行分析,判断其是否完整,若输入的图斑数据存在不完整,对于后续的图斑面积核算和图斑对比的结果将造成数据错误或数据丢失不存在的问题,降低质量检查的准确率,因此,本实施例先对各图斑进行预先查验,以保证质量检查的准确性。
68.当图斑存在不完整时,生成警示信号发送至数据中台模块,其中,数据中台模块接收警示信号后,进行重新获取作业成果数据。
69.具体地,当图斑存在不完整时,不完整图斑对应的核算数据将存在错误或缺失,进而导致后续核算的结果出现偏差,因此,当分析出图斑存在不完整时,生成警示信号发送至数据中台模块,以提示数据中台模块重新获取作业成果数据,同时,可以理解的是,该警示信号还可以形成弹窗,以提示工作人员作业成果数据有误,进而对其进行修正或重新上传,从而提升省级数据库的作业成果质量检查的准确性。
70.可选地,数据分析模块还包括图斑面积核算单元,
71.图斑面积核算单元用于核算耕地成果数据和永久基本农田成果数据中的每个图斑的面积,以支持数据分析模块判断耕地成果数据和永久基本农田成果数据是否达标。
72.具体地,由于数据分析模块采取的是并行处理,因此在核算图斑面积时,同时对不同类型的图斑数据进行核算处理。
73.可选地,数据分析模块还包括数据对比单元,
74.数据对比单元用于将图斑的面积与预设成果标定范围进行对比,判断耕地成果数据和永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理;
75.具体地,本实施例通过将图斑的面积与预设成果标定范围进行对比,判断耕地成果数据和永久基本农田成果数据是否符合标准,其中,预设成果标定范围包括两组数据,分别与耕地成果数据和永久基本农田成果数据的图斑面积进行比较,在实际应用过程中,需根据国家下发的各省耕地和永久基本农田划定数值作为预设成果标定范围,进而进行对比处理,当符合国家下发得各省耕地和永久基本农田划定数值时,则判定耕地成果数据和永久基本农田成果数据符合标准。
76.数据对比单元还用于将重大项目用地数据与重大项目用地标准进行对比,判断重大项目用地数据是否符合标准;
77.具体地,将不符合标准得重大项目用地数据进行标记,生成提示信息,以方便工作人员进行人工核查和上报。
78.数据对比单元还用于将耕地保护目标图斑数据和永久基本农田图斑数据进行对比,当永久基本农田图斑数据中的图斑范围全部位于耕地保护目标图斑数据中的图斑范围时,判断永久基本农田符合标准;
79.具体地,根据规定永久基本农田应位于耕地保护目标图斑范围内(位于原永久基本农田范围内不宜长期稳定利用的耕地,且为难以退耕的口粮田等特殊情况例外)。
80.数据对比单元还用于将不纳入耕地保护目标举证材料与预设成果标定范围进行
对比,判断不纳入耕地保护目标举证材料中的用地是否纳入耕地保护目标范围;还用于将永久基本农田举证材料与预设成果标定范围进行对比,判断永久基本农田举证材料中的用地是否纳入永久基本农田范围。
81.具体地,在进行三区三线省级数据库质量检查时,由于实际用地存在不同的情况,针对一些不满足划定区域的规范条件或满足规范条件却不在划定区域的用地,可进行上报举证材料,根据举证材料判断其对应的用地该如何划定,并对其进行核查。
82.可选地,数据分析模块还包括数据核查单元,
83.数据核查单元用于根据划定基础数据,分别对耕地成果数据和永久基本农田成果数据进行对比核查,判断耕地成果数据和永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理。
84.具体地,通过划定基础数据,分别对耕地成果数据和永久基本农田成果数据进行对比核查,判断耕地成果数据和永久基本农田成果数据是否符合标准,对于不符合标准的耕地成果数据和永久基本农田成果数据形成反馈信号,反馈给工作人员,并进行数据标红处理。
85.可选地,对耕地成果数据和所述永久基本农田成果数据进行并行分析处理,包括:
86.获取多线程的线程池,将耕地成果数据和永久基本农田成果数据分配至线程池,通过线程池的多个执行流分别对耕地成果数据和永久基本农田成果数据进行分析处理。
87.具体地,多线程是指程序中的线程池包含多个执行流,指在一个程序中可以同时运行多个不同的线程来执行不同的任务,即允许单个程序创建多个并行执行的线程来完成各自的任务,从而提高中央处理器的利用率,在多线程程序中,某一个线程必须等待的时候,中央处理器可以运行其它的线程无需同时等待,一定程度上提高了程序的效率,因此,本实施例将耕地成果数据和永久基本农田成果数据分配到各执行流,即可同时进行处理,节约了数据分析时间。
88.可选地,数据模型算法配置模块包括模型配置单元,
89.模型配置单元用于为数据中台模块、数据分析模块提供数据计算模型和成果核查模型,以支持数据分析模块判断耕地成果数据和永久基本农田成果数据是否达标。
90.可选地,数据模型算法配置模块还包括算法配置单元,
91.算法配置单元用于为数据中台模块、数据分析模块提供数据准备基础算法和数据分析基础算法,以支持数据分析模块判断耕地成果数据和永久基本农田成果数据是否达标,其中,数据准备基础算法包括数据清理、数据转换、数据筛选、数据正则化。
92.具体地,数据模型算法配置模块在本实施例中起到辅助作用,帮助数据中台模块和数据分析模块提高在处理数据时的效率和准确率。
93.一实施例中,三区三线省级数据库质量检查系统获取到某市的作业成果数据,先核查作业成果数据的目录结构与文件名称是否完整,显示作业成果数据的目录结构与文件名称完整,并对作业成果数据进行处理获得耕地成果数据和永久基本农田成果数据,同时,提取作业成果数据的成果图层数据,判断成果图层数据中的图层范围是否位于某市的行政区域图层范围内,在显示位于图层范围内后,提取耕地成果数据和永久基本农田成果数据中的每个图斑,并分析每个图斑是否完整,经分析所有图斑完整,进行每个图斑的核算,并记录图斑面积,将图斑面积与预设成果标定范围进行对比,判断耕地成果数据和永久基本
农田成果数据是否符合标准,经比对核查,全部符合标准,同时,进行核查将不纳入耕地保护目标举证材料与预设成果标定范围进行对比,判断不纳入耕地保护目标举证材料中的用地是否纳入耕地保护目标范围;将永久基本农田举证材料与预设成果标定范围进行对比,判断永久基本农田举证材料中的用地是否纳入永久基本农田范围,将需要纳入永久基本农田范围的用地数据更新至永久基本农田范围。
94.除此之外,还需对重大项目用地数据与重大项目用地标准进行对比,判断重大项目用地数据是否符合标准,将不符合标准的重大项目用地数据进行标记并上报,同时,根据划定基础数据,分别对耕地成果数据和永久基本农田成果数据进行对比核查,判断耕地成果数据和永久基本农田成果数据是否符合标准,将不符合标准的相关用地数据,生成反馈信号,并进行数据标红处理,由工作人员进行核查、记录和上报,通过以上不同项目的核查后,全部符合标准后,则认定为质量核查合格。
95.通过本实施例的质量检查将叠加复杂的数据进行梳理,并发进行处理分析,提高数据关联性的同时,减少数据间的干扰,提升数据的准确性,提高数据处理的效率,节约数据处理分析的时间,同时,通过多步核查,避免因前期输入问题造成的数据错误,从而实现对省级数据库的作业成果进行高效、准确地质量检查。
96.和上述一种三区三线省级数据库质量检查系统相对应,本发明实施例还提供了一种三区三线省级数据库质量检查方法,如图2所示,包括:
97.获取作业成果数据,根据所述作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,所述耕地成果数据包括不同市县的耕地用地数据;所述永久基本农田成果数据包括不同市县的永久基本农田用地数据;
98.对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否质量合格。
99.本实施例中的一种三区三线省级数据库质量检查方法与一种三区三线省级数据库质量检查系统相对于现有技术的优势相同,在此不再赘述。
100.需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
101.以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所发明的原理和新颖特点相一致的最宽的范围。
102.虽然本发明披露如上,但本发明的保护范围并非仅限于此。本领域技术人员在不脱离本发明的精神和范围的前提下,可进行各种变更与修改,这些变更与修改均将落入本
发明的保护范围。

技术特征:
1.一种三区三线省级数据库质量检查系统,其特征在于,包括数据中台模块、数据分析模块和数据模型算法配置模块,所述数据中台模块用于获取作业成果数据,根据所述作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,所述耕地成果数据包括不同市县的耕地用地数据;所述永久基本农田成果数据包括不同市县的永久基本农田用地数据;所述数据分析模块用于对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否质量合格;所述数据模型算法配置模块用于为所述数据传输模块和所述数据分析模块提供模型配置和算法配置,以支持所述数据中台模块和所述数据分析模块进行数据分析。2.根据权利要求1所述的三区三线省级数据库质量检查系统,其特征在于,所述数据中台模块包括作业成果目录单元、作业成果数值库单元、举证材料单元、作业成果预核查单元和数据分类单元,所述作业成果目录单元用于存储重大项目用地数据、耕地保护目标图斑数据和永久基本农田图斑数据并进行实时更新;所述作业成果数值库单元用于为所述数据分析模块提供所述预设成果标定范围;所述举证材料单元用于获取不纳入耕地保护目标举证材料和永久基本农田举证材料;所述作业成果预核查单元用于核查所述作业成果数据的目录结构与文件名称是否完整;所述数据分类单元用于当所述作业成果数据的目录结构与文件名称完整时,对所述作业成果数据进行分类处理,获得所述耕地成果数据和所述永久基本农田成果数据。3.根据权利要求2所述的三区三线省级数据库质量检查系统,其特征在于,所述数据分析模块包括图层分析单元,所述图层分析单元用于提取所述作业成果数据中的成果图层数据,判断所述成果图层数据中的图层范围是否位于行政区域图层范围内,若所述图层范围不位于所述行政区域图层范围内,则重新进行提取所述成果图层数据,直至所述图层范围位于所述行政区域图层范围内;所述图层分析单元还用于提取所述耕地成果数据和所述永久基本农田成果数据中的每个图斑,并分析每个所述图斑是否完整;当所有所述图斑完整时,对所述耕地成果数据和所述永久基本农田成果数据进行对比和/或核算;当所述图斑存在不完整时,生成警示信号发送至所述数据中台模块,其中,所述数据中台模块接收所述警示信号后,进行重新获取所述作业成果数据。4.根据权利要求3所述的三区三线省级数据库质量检查系统,其特征在于,所述数据分析模块还包括图斑面积核算单元,所述图斑面积核算单元用于核算所述耕地成果数据和所述永久基本农田成果数据中的每个图斑的面积,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标。5.根据权利要求4所述的三区三线省级数据库质量检查系统,其特征在于,所述数据分
析模块还包括数据对比单元,所述数据对比单元用于将所述图斑的面积与所述预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理;所述数据对比单元还用于将所述重大项目用地数据与重大项目用地标准进行对比,判断所述重大项目用地数据是否符合标准;所述数据对比单元还用于将所述耕地保护目标图斑数据和所述永久基本农田图斑数据进行对比,当所述永久基本农田图斑数据中的图斑范围全部位于所述耕地保护目标图斑数据中的图斑范围时,判断永久基本农田符合标准;所述数据对比单元还用于将所述不纳入耕地保护目标举证材料与所述预设成果标定范围进行对比,判断所述不纳入耕地保护目标举证材料中的用地是否纳入耕地保护目标范围;还用于将永久基本农田举证材料与所述预设成果标定范围进行对比,判断所述永久基本农田举证材料中的用地是否纳入永久基本农田范围。6.根据权利要求1所述的三区三线省级数据库质量检查系统,其特征在于,所述数据分析模块还包括数据核查单元,所述数据核查单元用于根据划定基础数据,分别对所述耕地成果数据和所述永久基本农田成果数据进行对比核查,判断所述耕地成果数据和所述永久基本农田成果数据是否符合标准,若不符合标准,生成反馈信号,并进行数据标红处理。7.根据权利要求1所述的三区三线省级数据库质量检查系统,其特征在于,所述对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,包括:获取多线程的线程池,将所述耕地成果数据和所述永久基本农田成果数据分配至所述线程池,通过所述线程池的多个执行流分别对所述耕地成果数据和所述永久基本农田成果数据进行分析处理。8.根据权利要求1所述的三区三线省级数据库质量检查系统,其特征在于,所述数据模型算法配置模块包括模型配置单元,所述模型配置单元用于为所述数据中台模块、所述数据分析模块提供数据计算模型和成果核查模型,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标。9.根据权利要求1所述的三区三线省级数据库质量检查系统,其特征在于,所述数据模型算法配置模块还包括算法配置单元,所述算法配置单元用于为所述数据中台模块、所述数据分析模块提供数据准备基础算法和数据分析基础算法,以支持所述数据分析模块判断所述耕地成果数据和所述永久基本农田成果数据是否达标,其中,所述数据准备基础算法包括数据清理、数据转换、数据筛选、数据正则化。10.一种三区三线省级数据库质量检查方法,基于如权利要求1至9任一项所述的三区三线省级数据库质量检查系统,其特征在于,包括:获取作业成果数据,根据所述作业成果数据获得耕地成果数据和永久基本农田成果数据,其中,所述耕地成果数据包括不同市县的耕地用地数据;所述永久基本农田成果数据包括不同市县的永久基本农田用地数据;
对所述耕地成果数据和所述永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断所述耕地成果数据和所述永久基本农田成果数据是否质量合格。

技术总结
本发明提供一种三区三线省级数据库质量检查系统及方法,涉及数据分析技术领域,所述系统包括:数据中台模块用于获取作业成果数据,根据作业成果数据获得耕地成果数据和永久基本农田成果数据;数据分析模块用于对耕地成果数据和永久基本农田成果数据进行并行分析处理,并将处理结果与预设成果标定范围进行对比,判断耕地成果数据和永久基本农田成果数据是否质量合格;数据模型算法配置模块用于为数据传输模块和数据分析模块提供模型配置和算法配置,以支持数据中台模块和数据分析模块进行数据分析。本发明提高了数据处理的效率,提高核查准确率,实现对省级数据库的作业成果进行高效、准确地质量检查。准确地质量检查。准确地质量检查。


技术研发人员:刘学伟 胡畅达 刘倩 李伟 岳彩丰 王诗雨
受保护的技术使用者:黑龙江省国土空间规划研究院
技术研发日:2023.06.08
技术公布日:2023/9/6
版权声明

本文仅代表作者观点,不代表航家之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

航空之家 https://www.aerohome.com.cn/

飞机超市 https://mall.aerohome.com.cn/

航空资讯 https://news.aerohome.com.cn/

分享:

扫一扫在手机阅读、分享本文

相关推荐