技术源于生活
适合人群
想要横向扩展技术
掌握更多技术提升个人竞争力
不满意目前工作
希望学习大数据技术转行
学习内容
大数据基础
Java语言、linux系统、hadoop生态圈
大数据应用
数据挖掘、数据分析、数据可视化
大数据从0到1
1.
关于hdfs的读写流程,很多资料都说这是面试中的一个必考点,还没有去看面试题,所以对面试的内容不太了解,先学完hadoop生态圈的东西,把基础搞定,再去看吧。上次说到hdfs的读写流程,网上有一组流传甚广的漫画解析,至于出处,没时间去查证,要是有知道的可以说说,我后期添加上。
2.
先来看写的流程:
3.
再来看读的流程:
4.
写的流程要思考几个点:
1)数据在什么时期切片?
2)数据切片的规则是什么?
3)数据存储成功后的结果是什么?
读的流程要思考几个点:
1)为什么能准确读取数据?
2)读数据的块区顺序是什么?
3)数据读取中断后怎么办?
5.
如果漫画涉及侵权问题,可以联系删除,我很尊重原创!原创不易,都是心血。hdfs的基础学习到此就结束了,下次要开始学习YARN了,一步步的把hadoop生态圈中的工具都学一遍,就可以开始第二阶段了。学习是一个长久的事啊~~加油!
立即关注