随着几乎所有事物都在经历数字化转型,我们也正在经历着一场“数据爆炸”:随着这种态势而生成的非结构化数据,正在以每年高达60%的速度高速增长,预计到2025年,非结构化数据这一数据类型,将占全球所有数据总量80%至90%的份额。
根据福布斯最近的一项行业调查,绝大多数(95%)的企业表示,有必要对自身所有的非结构化数据进行管理,超过40%的企业表示他们必须定期这样做。
以下这些与企业正在收集和处理的数据类型、数据量相关的几项内容,能帮助我们更好地理解这一点:
仅一家半导体制造商
每周就会产生超过10亿张的扫描图像,记录4000片晶圆的制造过程;这意味着其需要在多年间,存储高达数PB量级的数据。
一辆正在进行自动驾驶试验的汽车
每使用一小时,就会产生高达2TB的数据;而且这些数据必须维护数年,以应对未来可能出现的安全分析或改造层面的需求。
每个被进行测序的人类基因组
都是独一无二的,且会消耗将近100 GB的存储空间。每个基因组的信息,对于当前和未来的医学研究都具有巨大的价值——这样的价值,是未来几十年甚至更长的时间内,众多研究机构都需要完好存储这些数据的主要原因。
随着数据量的高速增长,企业的存储预算和数据存储容量都难以跟上这样的速度。因此,存储非结构化和非活动数据的难题必须被得到重视;这也是冷数据存储产品的用武之地。
那么,冷数据存储到底意味着什么?
就像一段故事一样,数据也有着自己的开头、中间和结尾“阶段”。根据数据在其生命周期中的位置及其对当前项目的价值维度,可以将其划分为“热数据”、“温数据”或“冷数据”。那些“随需应变”的、几乎每天都在为项目使用的数据被称为“热”数据;之后是“温”数据,其需要被定期访问,但通常不会是每天访问。然而,“冷数据”这一类非活跃、非频繁需要的数据,占到了所有数据存储量的60%以上。
通常情况下,冷数据的保存,多源于相关法规或公司内部政策的要求。然而,这种情况也在逐渐改变;越来越多的公司选择对冷数据进行保留,不仅仅是出于合规的原因,而是因为他们意识到,许多冷数据中,蕴藏着长远的战略价值,而这样的价值,还会随着时间的推移而变得更为丰富。
冷数据存储是一种持久的、安全的、性价比极高的数据长期保存方式。传统来看,冷数据会被写入磁带介质之中,脱机移动后,被转移到存储设备以备未来使用。随着新型数据分析方法的出现,计算能力的增强,以及业务数字化转型的加速,意味着对数据在线存储和易于访问的需求变得更为强烈。但是,冷数据存储系统的长期耐久性、安全性和存储成本方面的优势依旧需要保持。
冷数据存储策略是否重要?
有调查结果显示,世界未来3年的数据量,将超过过去30年间的数据总和。因此,随着企业逐渐意识到了冷数据的价值,以及数据的高速增长态势,如果企业想要在数据曲线上保持领先,冷数据的存储策略是至关重要的。企业需要优先设计适合自身业务的、可扩展的解决方案,以抓住数据驱动的创新机遇,并尽快解决随着大规模数据积累和持续数据增长而出现的相关问题。
那么,部署冷数据存储体系的好处有哪些?
许多组织可能会认为,存储大量的数据都会是非常昂贵的一种选择。然而,冷数据存储体系的建立,比用于热数据高性能访问的NVMe和固态硬盘技术要便宜得多。因为冷数据可以存储在性能合适、成本较低的基础设施之上,可以在组织内部完成部署,也可以在云端部署;这也意味着组织可以从一种成本效益更高的角度出发,存储更多的数据集。
现代化的冷数据存储体系,最初是由一些世界上最大的云解决方案提供商所创建的;但随着架构体系和服务模式的创新,冷数据存储解决方案,目前完全可以在组织内部的数据中心、托管设施或托管IT环境中完成部署,以满足数据主权和数据驻留层面的需求(点击了解更多)。这意味着对数据的访问变得更加容易,不再需要支付数据下载的相关费用,而且检索时间从按天变为了按分钟计算。此外,全新的纠删码算法,是专门为冷数据存储需求进过特殊优化的,非常有助于减少存储开销,且不必再采用存储多个数据副本的做法。
展望数据的未来及其价值
冷数据存储体系,不仅是存储日益增长的数据集的一种方式,其还可以帮助在组织内部,安全地控制这些宝贵的资产,并协助那些着眼于未来的项目,完成对冷数据的轻松检索。在这个全新的数据时代,越来越明显的趋势在于,即便数据在当前看来无法立刻产生价值,但我们也不能忽视它们。由于冷数据存储技术的全新进展,企业或组织不必再为了活跃数据而牺牲非活跃数据;无论他们是在寻求降低存储成本、抑或是增加数据价值,冷数据存储技术都是不容忽视的一环。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.