技术方案建议书
目录
1
云计算系统设计方案概述
.............................................................................................4
1.1
系统基本功能
.................................................................................................4
1.2
主要设计思想和设计目标、设计原则
.............................................................4
1.3
中国电信创新平台的云计算解决方案
.............................................................5
1.4
系统的主要技术特点
......................................................................................5
2
系统总体构架
................................................................................................................6
2.1
系统基本组成与构架
......................................................................................6
2.2
系统功能模块
.................................................................................................7
3
系统基本功能与处理方案
.............................................................................................8
3.1 CDR
、
PSMM
、
DT
数据入库处理功能与方案
...............................................8
3.1.1
基于
FTP
加速引擎的数据高速稳定下载优化方案——更好的下载方式
..8
3.1.2
数据入库模块
..........................................................................................9
3.1.3
基于全局样本抽样的压缩优化方案——更好的压缩方式
.......................10
3.2
索引生成与数据存储方案
.............................................................................11
3.2.1
数据立方
(DataCube)——
更好的索引生成方式
.....................................11
3.2.2
阶梯式数据存储系统——更好的存储方式
............................................13
3.3
单用户数据查询功能与方案
.........................................................................14
3.3.1 cProc
并行计算架构——实时性更强的计算架构
..................................14
3.3.2
单用户单表多字段查询
.........................................................................15
3.4
数据查询统计功能与方案
.............................................................................17
3.4.1 MapReduce
的架构
..............................................................................17
3.4.2
多表连接功能与方案
.............................................................................20
4 Avatar
系统——更好的计算与存储集群可靠性
...........................................................23
4.1
计算与存储集群
Master
单点失效容错处理
..................................................23
4.2
计算与存储集群的负载均衡处理
..................................................................31
5 MapReduce
计算架构可靠性设计
..............................................................................33
6
系统扩展性
.................................................................................................................35
6.1
已有的
Hadoop
集群规模
.............................................................................35
6.2
集群扩展方法
...............................................................................................35
7
设备配置
.....................................................................................................................36
7.1
建议硬件配置
...............................................................................................36
2 / 42
南京云创存储科技有限公司 2012-7-17
评论