暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

课程名称:Storm基本概念

纯洁的明依 2019-11-12
316

2、具体内容

如果要说大数据的开发,那么首先可以想象到一个技术就是Hadoop,但是对于Hadoop这门技术现在已经出现了一些问题,所有的数据不可能进行实时的分析。

在整体的Hadoop的设计上,就丧失了所有的实时性的特点。于是现在随着市场化需求的深入,以及大数据技术应用的范畴越来越广泛,对于整个实时性的分析处理就非常的重要了。开始推出一些内存分析框架,其中最具有代表性的两个开源的内存分析框架:SparkStorm就开始流行了,但是两者有如下的不同:

·Spark要比Storm复杂;

·Storm对于小数据量的处理要比Spark更快,而Spark更加适合于大数据量的处理;


Storm下载地址:http://storm.apache.org/

·Storm本身默认轻松的支持了HA机制,所以整体的使用上只需要一个简单的配置即可实现所有的需求;·Storm需要ZooKeeper组件的支持;

所有的数据的处理操作就好比一个拓扑结构,在这个拓扑结构里面需要按照自己的模式来进行具体的数据的分析编写。、

在整个Storm之中你所关注的问题只是这些spoutsblots的代码如何编写,而不用关心具体的资源是如何进行分配的。

文章转载自纯洁的明依,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论