统计局大数据统计平台建设方案 智慧统计大数据云平台建设方案

智慧统计大数据云平台建设方案2018版

统计局大数据统计平台

建 设 方 案

智慧统计大数据云平台建设方案2018版

目录

第一章 项目概述 ............................................... 5

1.1项目名称 ............................................... 5 1.2 建设单位 ............................................... 5 1.3 编制依据 ............................................... 5 1.4项目背景 ............................................... 5 1.5建设周期 ............................................... 8 1.6建设意义 ............................................... 9 第二章 建设需求 .............................................. 11

2.1建设目标 .............................................. 11 2.2 项目建设需求分析 ...................................... 11 2.3平台性能需求分析 ...................................... 15 第三章 应用支撑平台建设方案 .................................. 19

3.1 建设原则 .............................................. 19 3.2 建设目标 .............................................. 21 3.3 平台架构 .............................................. 21 3.4 大数据平台功能 ........................................ 23

3.4.1数据交换系统 .................................... 23 3.4.2数据质量管理 .................................... 29 3.4.3基础模型搭建 .................................... 34 3.4.4多维分析模型搭建 ................................ 35 3.4.5定制报表功能 .................................... 36 3.4.6自助取数平台 .................................... 38 3.4.7系统管理功能 .................................... 39 3.5数据库设计 ............................................ 40

3.5.1数据库设计目标 .................................. 41 3.5.2数据库架构 ...................................... 41 3.6大数据处理设计 ........................................ 43

3.6.1并行处理设计 .................................... 43 3.6.2数据算法提速 .................................... 47 3.7大数据存储设计 .