江苏省网络舆情监测系统方案建议书.doc
50墨值下载
江苏省网络舆情监测系统
方案建议书
目 录
目
录
1
互联网舆情系统概述
.....................................................................................................1
1.1
什么是互联网舆情
..........................................................................................1
1.2
什么是网络舆情监测系统
...............................................................................1
1.3
网络舆情监测系统的特点
...............................................................................2
2
舆情监测系统总体设计方案
..........................................................................................3
2.1
主要设计思想和设计目标、设计原则
.............................................................3
2.2
系统基本功能
.................................................................................................4
2.3
技术架构介绍
.................................................................................................5
2.4
方案关键技术
.................................................................................................8
2.4.1
全新的数据结构：数据立方(DataCube)
...................................................8
2.4.2
更加稳定的云计算调度实现：
Jobkeeper..............................................11
2.5
云创舆情监测系统的特点
.............................................................................13
2.6
系统可靠性与扩展性
....................................................................................14
2.6.1
系统可靠性
............................................................................................14
2.6.2
系统扩展性
............................................................................................16
2.7
系统设计性能
...............................................................................................17
2.7.1
数据存储能力
........................................................................................17
2.7.2
查询分析计算性能
.................................................................................18
2.8
数据存储子系统
............................................................................................18
2.8.1
海量数据分布式数据存储构架
...............................................................18
2.8.2
适应应用需求的混合存储策略
...............................................................20
2.8.3 HDFS
数据存储
.....................................................................................21
2.8.4 HBase
数据存储
....................................................................................24
2.8.5 Database
数据存储
...............................................................................26
2.8.6
数据存储的可靠性
.................................................................................28
2.8.7
数据压缩
...............................................................................................29
2.9
计算与存储集群的可靠性与负载均衡设计
....................................................31
2.9.1
计算与存储集群
Master
单点失效容错处理
...........................................31
2.9.2
计算与存储集群的负载均衡处理
...........................................................37
2.9.3 HDFS
的可靠性设计
.............................................................................40
2.9.4 HBase
可靠性设计
................................................................................42
2.9.5 MapReduce
计算可靠性设计
................................................................44
2.10
查询统计计算可靠性与负载均衡设计
...........................................................46
of 71
50墨值下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论