大数据平台数据治理整体解决方案 大数据分析平台数据治理建设方案 下载本文

内容发布更新时间 : 2024/5/20 3:47:50星期一 下面是文章的全部内容请认真阅读。

大数据分析平台数据治理建设方案

交的目录内容进行自动形式审核,未通过审核的目录内容,自动退回到相关部门,经形式修正后重新审核。对于符合标准的目录内容自动进入目录内容服务信息库,按照标准要求自动发布以供用户口访问。

2、提供对需求申请的审批和授权,同时结合需求管理和服务使用情况,提供直观的资源使用情况分类、汇总、统计和日志报表等功能。

3、中心管理者代理为本部门的共享资源信息进行目录编制。 2.1.3.7.3.2 交换系统 1、

支持结构化数据、非结构化数据、资源服务三种资源数

据的交换; 2、

提供资源获取、资源推送、资源比对三种资源交换基础

服务,对于三种基础资源交换服务外的资源交换使用业务协同流程编排进行支持; 3、

支持部门间业务协同的资源数据交换;支持服务流程的

组装,映射和编排,提供各种业务协同场合的支持,包括长流程、短流程及人工参与,并提供图形化简洁的设计工具,支持业务建模到具体实现的转换,能提供多个版本流程同时运行的能力; 4、

根据跨部门政务信息共享及业务协同的实际需要,支持

多个交换域之间信息交换及交换域管理; 5、

提供交换信息库之间的信息处理和稳定可靠、不间断的

信息传递;

60

大数据分析平台数据治理建设方案

6、 建立一个统一的数据交换标准。将各个应用系统的数据

转换成统一的标准格式,来保证不同系统间数据交换的一致性; 7、

对交换过程过管可控可管可审计,对于不同用户的不同

操作记行日志记录,可按多种条件对日志进行定位、查看与统计,对数据交换的情况可进行多种形式的报表统计; 8、

制定接入单位的接口规范,协助各接入单位进行平台的

接入; 9、

支持与异构应用系统的无缝集成,并为其它应用系统提

供所需接口;

10、 支持数据库实时同步和空间地理服务调用; 11、 交换体系应适应机构的调整而灵活发生变化; 12、 系统能自动获取各部门发布的资源目录,在对应的部门前置机上生成相应的库表,并生成相应的服务且能对其进行测试,在目录发生版本变化时,能够对应的做出数据库表版本和服务版本的变化及相应的生命周期管理; 13、 灵活便捷的前置桥接配置工具,C/S和B/S两种配置方式,配置过程简单易用,要支持多种数据的抽取方式(如实时、定时更新),抽取内容支持和非结构化数据,抽取过程及抽取日志管理中心可管理、监控及查看;

14、 服务通过中心与目录相接合,通过目录审核权限的结果来进行交换,同时支持服务、推送、一对多、多对一等多种方式的交换,中心可通过灵活的指配路由规则来实现交换,对于因目录版本变更引起的交换系统变化要提供生命

61

大数据分析平台数据治理建设方案

周期管理;

15、 系统除自身对数据的交换提供多种方式的加密等安全手段,结合CA平台来实现数据的认证,加解密;提供安全可靠的数据传输安全;支持VPN、数据加密、消息数据签名、摘要等管道套接方式对数据传输进行加密,防止越权访问机密信息或恶意篡改;支持HTTPS传输协议,通过SSL实现数据防篡改、数据加密等功能;支持对消息内容的数字签名、数据摘要和信息加密;

16、 提供多种高可用性手段,如双机互备、集群等来保持系统能够7*24小时运行,对平台各种数据采取多种方式的备份,在故障发生时能快速、完整的恢复数据。 2.1.3.7.3.3 监控管理系统 1. 支持高效的网络自动拓扑发现;

2. 支持对硬件设备的监控,能够监控设备的CPU、内存、磁盘、逻辑分区、交换分区、网络接口、进程使用情况;支持对数据库性能监控与管理,提供从应用使用情况、系统资源使用情况、性能指标等全面的监测管理; 3. 支持对监控进行配置管理,配置荐如:主服务程序、是否启用、是否立即启用、指定时间启用、间隔、运行次数、说明等,同时通过监控日志可查看监控程序运行的详细记录对服务的监控,主要监控服务的使用率、异常及失败、服务消费能力、服务使用者情况;对信息交换整个业务流程进行监控;

62

大数据分析平台数据治理建设方案

4. 能够对预警进行配置管理,支持对监控指标设立阀值,并能通过短信、邮件等多种方式进行预警,预警可分等,按照警报的不同等级选择不同的通知方式和通知人员; 5. 能够采集来源于交换平台的交换资源日志、访问目录服务系统日志、使用基础(共享)库资源的日志、访问门户的日志,对这些日志信息进行统一展示和统计分析,为管理人员分析整个共享交换平台的运行和使用情况提供依据;

6. 能够记录任何消息交换的基本资料,如消息格式、时间、消息发送者、消息接收者等;输出业务日志记录;对不需要的业务日志记录进行删除操作;

7. 能够记录系统的运行情况,如发生异常的模块等;输出打印运行日志记录;对不需要的运行日志记录进行删除操作;

8. 能够支持对Oracle等数据库连接和性能监控,实现对数据库表空间使用情况的监控,支持对Oracel等数据库管理,提供数据库服务的启动、停止功能,提供创建表空间、表、触发器、视图以及数据的备份和恢复功能; 9. 支持对Apusic应用服务器等中间件性能监控,能够帮助系统管理员监测系统性能、分析和确定系统的瓶颈。比如能监控应用服务器上的页面/servlet的平均响应时间等性能指标; 10.

支持集中管理的配置文件和远程部署各种服务以及

运行环境的软件升级。系统根据配置文件,自动判断并

63

大数据分析平台数据治理建设方案

更新软件、服务及同步资源目; 11.

提供交换域管理的方式,能够将前置机的数据库资

源、文件资源、服务资源、应用资源、设备资源等异构环境资源纳入具体的交换域进行管理,通过授权来实现交换域资源的查看等功能; 12.

支持为系统中的各种应用提供所需的各种安全服务

管理功能,包括统一谁、传输安全、数据备份与灾难恢复。

2.1.3.7.3.4 内外网交换系统

1. 支持交换数据到从交换中心到隔离网闸的传输,当数据从交换中心传输到共享服务器后,共享服务器可以将需要交换的数据进行格式转换、数据加密、卖出到隔离网闸;

2. 支持交换数据到从隔离网闸到交换中心的传输,当共享服务器从隔离网闸获取需传输的交换数据后,共享服务将需要交换的数据进行数据解密、格式转换、传输到交换中心;

3. 支持在进行共享服务器与隔离网闸的数据传输过程中,需要对传输的数据进行格式转换,使其能存储到隔离网闸的介质中或从隔离网闸的介质中还原需要传输的数据;

4. 支持在交换中心、隔离网闸进行传输的时候,需要有失败重传功能,避免因为网络或硬件的短时故障导致交换

64