统计局大数据统计平台建设方案 智慧统计大数据云平台建设方案

内容发布更新时间 : 2024/12/24 2:10:17星期一 下面是文章的全部内容请认真阅读。

和稳定性;对系统如硬件、操作系统、网络、数据库应设计尽可能详尽的故障处理方案,使系统在出现故障(硬件、软件、网络)时,能够快速恢复应用系统及其相应的数据。

(2)安全性。充分考虑应用层的安全性,做好信息资源的访问控制;应用系统应能够提供用户权限配置及用户操作审计控制。

(3)扩充性。系统采用分层结构设计,网络基础设施层、应用支撑层和应用层结构易于扩充。

(4)易维护性。充分考虑系统软硬件及网络运行的实际情况,在系统总体设计上注意系统的可维护性;采用易于维护的系统平台;应用软件安装应简单、易于操作。系统数据维护方便,备份及数据恢复快速简单;系统软件配置体现自动化,避免复杂的系统配置文件。

(5)可操作性。界面友好,充分考虑操作人员的特点,使数据处理工作简单、方便、快捷。

2.3.2 业务系统性能需求

业务系统性能主要是指作业响应时间方面的要求,作业响应时间是指完成目标系统中的交互或批量处理所需要的响应时间。 根据业务处理类型的不同,把作业划分为查询类业务和统计分析类业务,分别给出响应时间要求的参考值,包括峰值响应时间和平均响应时间。

16

(1)查询类业务

如信息查询、统计报表生成或决策支持的信息查询等。查询业务由于受到查询的复杂程度、查询的数据量大小等因素的影响,需要根据具体情况而定,在此给出三个参考范围。

简单查询平均响应时间:不超过10秒; 复杂查询平均响应时间:不超过100秒;

极限数据查询时间:最大样本量时数据查询时间不超过3分钟;

(2)统计分析类业务

一般统计时间:不超过30秒; 一般分析时间:不超过30秒;

2.3.3 数据检索性能需求

根据数据检索方式不同,把作业划分为区块链元数检索、检索引擎检索和流式检索等要求,分别给出响应时间要求的参考值,包括峰值响应时间和平均响应时间。

(1)区块链元数据检索

数据检索并发:每秒600条记录; 单条记录查询时间:不超过10秒;

(2)引擎检索

要求支持OLTP/OLAP双引擎,并且OLTP引擎支持十万级/秒的事务处理速度;

17

(3)流式检索:

要求支持流要就流式计算性能达到30万条/秒,并且支持高效Sql查询。

18

第三章 应用支撑平台建设方案

根据XX省统计局当前的实际情况,该项目的建设拟分两期进行,本期建设主要基于XX省统计局的现有数据、其他部门的开放数据和互联网数据,建设成服务于XX省统计局常规统计工作,具有宏观经济预判功能、三新统计功能和文化产业统计功能的大数据统计平台。

3.1 建设原则

根据国家电子政务建设的指导思想,结合XX省统计局的具体情况,项目的建设应坚持以下几项原则: (1)规范性

系统设计开发遵循中国国家标准、信息产业部有关软件行业的通用规范、通用的国际规范及各子系统间接口标准,保证XX省统计局的各系统能够根据业务需要实现有效的连接。 (2)开放性

系统设计的各种接口在遵循规范性原则的基础上,保证其可以集成不同设备厂商、系统或平台供应商、软件供应商的产品;保证系统的设备管理、系统扩容和业务维护不依赖于单一设备厂商、系统或软件供应商的产品。 (3)先进性与成熟性相结合

系统设计采用先进的流数据实时采集挖掘技术和手段,以保

19

联系客服:779662525#qq.com(#替换为@) 苏ICP备20003344号-4 ceshi