计算平台 概要设计说明书

文件编号 版次 总页数 1.0 受控编号 密级 附录 内部公开 42

作者： 日期： 2013-01-28 批准： 日期： 审核： 日期：

（版权所有，翻版必究）

WORD格式 可编辑

文件修改记录

修改日期

修改状态 修改页码及条款 修改人 审核人 批准人 专业技术 知识共享

WORD格式 可编辑

目 录

1. 引言 .................................................. 5

1.1

1.2 1.3 1.4

编写目的 ........................................................... 5 术语与缩略词 ....................................................... 6 对象及范围 ......................................................... 8 参考资料 ........................................................... 9

2. 系统总体设计 .......................................... 9

2.1

需求规定 ........................................................... 9 2.1.1 数据导入 .................................... 错误！未定义书签。 2.1.2 数据运算 .................................... 错误！未定义书签。 2.1.3 运算结果导出 ................................ 错误！未定义书签。 2.1.4 系统监控 .................................... 错误！未定义书签。 2.1.5 调度功能 .................................... 错误！未定义书签。 2.1.6 自动化安装部署与维护 ........................ 错误！未定义书签。 2.2 运行环境 ........................................................... 9 2.3 基本设计思路和处理流程 ............................................. 9 2.4 系统结构 .......................................................... 10

2.4.1 大数据运算系统架构图 ........................................ 10 2.4.2 hadoop体系各组件之间关系图 ................. 错误！未定义书签。 2.4.3 计算平台系统功能图 .......................................... 11 2.4.4 系统功能图逻辑说明 .......................................... 11 2.4.5 计算平台业务流程图 .......................... 错误！未定义书签。 2.5 尚未解决的问题 .................................................... 12

3. 模块/功能设计 ........................................ 12

3.1

计算驱动模块 ...................................................... 15

3.1.1 设计思路 .................................................... 15 3.1.2 流程图 ...................................................... 17 3.1.3 处理逻辑 .................................................... 18 3.2 调度模块 .......................................................... 13

3.2.1 设计思路 .................................................... 13 3.2.2 流程图 ...................................................... 14 3.2.3 处理逻辑 .................................................... 14 3.3 自动化安装部署模块 ................................ 错误！未定义书签。

3.3.1 设计思路 .................................... 错误！未定义书签。 3.3.2 处理逻辑 .................................... 错误！未定义书签。 3.4 调度模块与计算驱动模块交互流程 .................... 错误！未定义书签。

3.4.1 处理流程图 .................................. 错误！未定义书签。 3.4.2 处理逻辑 .................................... 错误！未定义书签。 3.4.3 hadoop驱动模块调用驱动接口 ................. 错误！未定义书签。 3.4.4 调度模块接收hadoop执行状态接口 ............. 错误！未定义书签。

专业技术 知识共享