大数据平台数据治理整体解决方案 大数据分析平台数据治理建设方案 下载本文

内容发布更新时间 : 2024/5/6 4:18:45星期一 下面是文章的全部内容请认真阅读。

大数据分析平台数据治理建设方案

第1章 项目概述

1.1 总体思路

以加快转变经济发展方式和提高为民服务能力为核心,以“互联网+”作为智慧城市创新引擎,以“大数据”作为建设的大脑,以促进信息互联互通和资源共享为重点。 1.2 建设原则

1.2.1 统筹规划,改革创新。

做好顶层设计,调整体系结构,创新运维模式,打破条块分割,统筹全市资源,推动改革创新,促进共建共享,避免重复建设与资源浪费。

1.2.2 需求导向,应用先行。

深入挖掘智慧XXX建设过程中的问题,梳理城市管理、百姓生活和经济发展等方面的重大需求,作为智慧XXX建设的基础依据,先行开展各类智慧化应用。 1.2.3 政府引导,市场为主。

积极探索智慧城市的发展路径、管理方式、推进模式和保障机制,发挥政府引导作用,充分调动各方面积极性,强化政策法规、规范标准建设,强化市场机制在配置资源的决定性作用,建立多元投融资机制,探索成本低、实效好、互利共赢的建设与运营模式。

30

大数据分析平台数据治理建设方案

1.2.4 智慧应用,拉动经济。

通过在国民经济各领域开展各类智慧化应用,促进我市智慧经济发展,带动就业;以智慧经济的发展,推进智慧化应用的创新。

1.2.5 加强管理,保障安全。

落实国家信息安全等级保护制度,健全网络与信息安全保障体系,建立健全信息发布保密审查制度,确保不出现重大信息安全事故,全面提高信息系统和信息基础设施的安全可控水平。

1.3 建设目标

本项目围绕“智慧XXX”、“互联网+”、“工业4.0”、“大数据”等发展战略和新兴技术,围绕惠民、兴业、善政几大领域,开展“智慧XXX”大数据平台及应用的建设,推动各类政务信息资源得到有效整合和开发利用,创新治理方式,由电子政务向智慧政务升级。以提升市民生活幸福感,提高政府行政管理和服务能力,促进经济转型升级和培育智慧经济,加快信息基础设施和重点领域智慧应用建设为出发点,使我市智慧城市综合发展水平进入副省级城市第一集团。

项目的主要建设目标是:

(一)建立“智慧XXX”统一数据标准体系。

目前XXX市各部门的电子政务系统建设,主要是以功能为核心,体现的是部门级的管理要求和管理水平,缺乏区一级的

31

大数据分析平台数据治理建设方案

数据标准,各系统建设难免出现异构现象。数据格式、类型不一致,数据质量问题突出,难以提供信息共享和业务协同的数据支撑。建立完整、系统、准确、合规的“智慧XXX”统一数据标准是实现信息系统逻辑集中,实现有效深度智能挖掘的必要条件,充分发挥标准化建设的“统一规范”作用,有效瓦解并防范“信息孤岛”和条块分割的重复信息系统建设的有效手段。

统一数据标准体系是各业务局之间互联互通、信息共享、业务协同的基础,结合电子政务建设的实践体会,通过顶层设计和统筹规划,建立针对XXX市大数据平台的数据标准体系,从根本上解决各部门各系统数据存在的不标准、不完整、重复、错误、不一致等数据质量问题,使数据在整合、应用的过程中实现统一标准的管理,达到提升整体数据质量、实现信息共享、信息交换、信息关联的目的。

(二)开发城市数据采集平台和数据共享交换平台。

(三)开展数据融合清洗,建立资源数据库。

智慧XXX资源数据库采用统一数据库的模式进行集中建设,对XXX市各业务部门的数据进行统一收集、加工、存储。智慧XXX大数据平台资源数据库需要从多个数据来源获取数据,这些数据来源中的业务系统并没有经过顶层设计和统筹规划,他们之间的数据之间必然存在不标准、不完整、重复、错误、不一致的问题。为解决上述数据问题,需要根据确立的资源数

32

大数据分析平台数据治理建设方案

据库的数据标准,让数据收集和交换的过程有章可循,在数据来源的数据加载到资源数据库之前对数据进行全面的质量稽查、标准化、修复和匹配融合,最终形成全市统一的实有人口、法人、房屋、车辆、地址、证照、视频、地理空间等数据库,为社会建设、城市管理和公共服务等上层应用提供信息资源保障。

(四)开展智慧城市数据应用。

开展“智慧XXX”大数据应用,包括基本公共服务配置与供给管理平台、决策分析支撑系统、市民服务空间系统、政府数据开放平台、科技创新创业人才服务信息平台等大数据应用项目,数据应用项目分两个阶段实施,第一阶段完成基本公共服务配置与供给管理平台、决策分析支撑系统的建设,第二阶段完成市民服务空间系统、政府数据开放平台、科技创新创业人才服务信息平台的建设。 1.4 主要建设内容

项目主要建设内容包括“一套标准”、“两个平台”、“一个资源数据库”、“五个数据应用”。 1.4.1 标准体系编制

完成数据编码标准、数据交换标准、数据管控标准、数据安全标准、数据质量规范、数据模型规范、数据共享与开放管理办法等标准体系的编制工作。 1.4.2 城市数据采集平台

33

大数据分析平台数据治理建设方案

计划建设的城市数据众包采集平台将通过发展普通市民建立全职、兼职的众包采集队伍,采用移动设备进行众包采集,将数据即时输入数据共享交换平台,将数据进行集中管理,保障数据上传的及时、高效、更新速度快。同时提供数据的及时更新汇总与输出,进行质量把控与管理,为智慧城市的业务应用提供数据支持。

1.4.3 数据共享交换平台

完成政务信息资源共享交换管理办法的编制,开发信息资源交换子系统、信息资源目录子系统、监督及运行管理平台、内外网数据交换平台、应用系统支撑平台等5个子系统。 1.4.4 数据融合清洗

开发工作流调度、数据稽查、数据标准管理、数据质量提升工单系统等4个数据融合清洗工具,实现数据归集与关联集成、数据质量评估与标准转换、数据质量清洗、数据质量监测等数据加工、清洗工作。 1.4.5 资源数据库建设

按照数据仓库的架构来建设资源数据库,建立数据模型,建设数据缓冲区、帖源区、整合区(基础库、扩展库)、主题库、历史数据库、非结构化数据库,并实现存量数据导入及增量数据通过自动化的调度流程入库。 1.4.6 智慧城市数据应用

34