暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

冷数据存储与数据的未来

原创 柏鹏先 2022-02-28
589

随着几乎所有事物都在经历数字化转型,我们也正在经历着一场“数据爆炸”:随着这种态势而生成的非结构化数据,正在以每年高达60%的速度高速增长,预计到2025年,非结构化数据这一数据类型,将占全球所有数据总量80%至90%的份额。

根据福布斯最近的一项行业调查,绝大多数(95%)的企业表示,有必要对自身所有的非结构化数据进行管理,超过40%的企业表示他们必须定期这样做。

以下这些与企业正在收集和处理的数据类型、数据量相关的几项内容,能帮助我们更好地理解这一点:

冷数据存储与数据的未来

仅一家半导体制造商

每周就会产生超过10亿张的扫描图像,记录4000片晶圆的制造过程;这意味着其需要在多年间,存储高达数PB量级的数据。

一辆正在进行自动驾驶试验的汽车

每使用一小时,就会产生高达2TB的数据;而且这些数据必须维护数年,以应对未来可能出现的安全分析或改造层面的需求。

每个被进行测序的人类基因组

都是独一无二的,且会消耗将近100 GB的存储空间。每个基因组的信息,对于当前和未来的医学研究都具有巨大的价值——这样的价值,是未来几十年甚至更长的时间内,众多研究机构都需要完好存储这些数据的主要原因。

随着数据量的高速增长,企业的存储预算和数据存储容量都难以跟上这样的速度。因此,存储非结构化和非活动数据的难题必须被得到重视;这也是冷数据存储产品的用武之地。

冷数据存储与数据的未来

那么,冷数据存储到底意味着什么呢?

就像一段故事一样,数据也有着自己的开头、中间和结尾“阶段”。根据数据在其生命周期中的位置及其对当前项目的价值维度,可以将其划分为“热数据”、“温数据”或“冷数据”。那些“随需应变”的、几乎每天都在为项目使用的数据被称为“热”数据;之后是“温”数据,其需要被定期访问,但通常不会是每天访问。然而,“冷数据”这一类非活跃、非频繁需要的数据,占到了所有数据存储量的60%以上。

通常情况下,冷数据的保存,多源于相关法规或公司内部政策的要求。然而,这种情况也在逐渐改变;越来越多的公司选择对冷数据进行保留,不仅仅是出于合规的原因,而是因为他们意识到,许多冷数据中,蕴藏着长远的战略价值,而这样的价值,还会随着时间的推移而变得更为丰富。

冷数据存储是一种持久的、安全的、性价比极高的数据长期保存方式。传统来看,冷数据会被写入磁带介质之中,脱机移动后,被转移到存储设备以备未来使用。随着新型数据分析方法的出现,计算能力的增强,以及业务数字化转型的加速,意味着对数据在线存储和易于访问的需求变得更为强烈。但是,冷数据存储系统的长期耐久性、安全性和存储成本方面的优势依旧需要保持。

冷数据存储与数据的未来

冷数据存储策略是否重要?

有调查结果显示,世界未来3年的数据量,将超过过去30年间的数据总和。因此,随着企业逐渐意识到了冷数据的价值,以及数据的高速增长态势,如果企业想要在数据曲线上保持领先,冷数据的存储策略是至关重要的。企业需要优先设计适合自身业务的、可扩展的解决方案,以抓住数据驱动的创新机遇,并尽快解决随着大规模数据积累和持续数据增长而出现的相关问题。

冷数据存储与数据的未来

那么,部署冷数据存储体系的好处有哪些?

许多组织可能会认为,存储大量的数据都会是非常昂贵的一种选择。然而,冷数据存储体系的建立,比用于热数据高性能访问的NVMe和固态硬盘技术要便宜得多。因为冷数据可以存储在性能合适、成本较低的基础设施之上,可以在组织内部完成部署,也可以在云端部署;这也意味着组织可以从一种成本效益更高的角度出发,存储更多的数据集。

现代化的冷数据存储体系,最初是由一些世界上最大的云解决方案提供商所创建的;但随着架构体系和服务模式的创新,冷数据存储解决方案,目前完全可以在组织内部的数据中心、托管设施或托管IT环境中完成部署,以满足数据主权和数据驻留层面的需求(点击了解更多)。这意味着对数据的访问变得更加容易,不再需要支付数据下载的相关费用,而且检索时间从按天变为了按分钟计算。此外,全新的纠删码算法,是专门为冷数据存储需求进过特殊优化的,非常有助于减少存储开销,且不必再采用存储多个数据副本的做法。

冷数据存储与数据的未来

展望数据的未来及其价值

冷数据存储与数据的未来

冷数据存储体系,不仅是存储日益增长的数据集的一种方式,其还可以帮助在组织内部,安全地控制这些宝贵的资产,并协助那些着眼于未来的项目,完成对冷数据的轻松检索。在这个全新的数据时代,越来越明显的趋势在于,即便数据在当前看来无法立刻产生价值,但我们也不能忽视它们。由于冷数据存储技术的全新进展,企业或组织不必再为了活跃数据而牺牲非活跃数据;无论他们是在寻求降低存储成本、抑或是增加数据价值,冷数据存储技术都是不容忽视的一环。

摘自:昆腾存储

「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论