暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

大数据 | 数据分层

左羊公社 2023-03-06
974

大数据分层是一种管理和处理大数据的方法,将大数据按照不同的层次进行分类和处理,以提高数据的管理和利用效率。以下是一般的大数据分层顺序:

  1. 数据采集层。数据采集层主要是收集各种数据源头的数据,包括传感器、网络日志、社交媒体、视频、移动应用程序等,为后续的数据分析和利用做好数据采集前的准备工作。

  2. 数据存储层。数据存储层主要是将采集来的数据以结构化或非结构化的方式进行存储,包括关系数据库、非关系数据库、分布式文件系统等等。

  3. 数据处理层。数据处理层主要是对数据进行清洗、去重、变换、计算和分析等操作,以最终生成有用的数据。

  4. 数据分析层。数据分析层主要是通过大数据分析技术和算法,对数据进行分析和挖掘,以获取更深层次的信息和价值。

  5. 数据应用层。数据应用层主要是将分析出的数据应用到实际业务中,包括数据可视化、决策支持、智能服务、人工智能等。

参考文献

[1] Xia F, Yang L T, Wang L, et al. Internet of things. International Conference on Green Communications and Networks (GCN), 2010:395-398.

[2] Qin Y, Tang Y, Yan Y, et al. Study on Key Technology of multi-layer data architecture for marine industry application[J]. Journal of Marine Science and Engineering, 2019, 7(6):160.

[3] Liu Y, Wang J, Xiong Y, et al. Research on multi-level data processing mechanism of big data[J]. Journal of Physics: Conference Series, 2019, 1170(2):022089.

[4] Amiri A, Pourkhalili A, et al. Towards multi-layer data architecture for supply chain management systems[J]. IEEE Access, 2019, 7:119280-119292.

感谢你的观看,YES!
题图 | 图片遵循 CC0 许可协议


文章转载自左羊公社,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论