毫无疑问,现在我们身处一个被数据包围的时代,根据IDC 预测,由于5G快速成熟与普及,将引发数据的爆发式增长,到2025年,每年新增数据量将达到175ZB的量级,而且这种预估很有可能会不断调高。这个数据量相当于2016年所产生16.1 ZB数据的十倍以上。数据的爆发带来了用户体验的颠覆性改变,也为众多行业带来了全新的商业机会,但随之出现的是同样艰巨的挑战。
新增数据包括各种结构化和非结构化数据,其中能保存下来的只有不到10%,也就是说超过九成的数据在产生后就流失了。造成这种情况的原因一方面是难以清晰界定数据价值,另一方面是因为存储成本过于高昂。
举例说明更直观,采用当下主流的8T硬盘来存储1ZB的数据,需要1.3亿块硬盘,按照1300元的硬盘单价来计算,则需要花费1690亿元。这还仅仅是硬件购置的成本,如果加上相应的运维、安全防护和人工成本,本地存储的综合成本更为惊人。
对数据进行分类,采用不同的存储方案,是现在可行性最高的方法。归档存储也是在这种背景下应运而生的。
海量数据可以分为冷、热、温三大类,其中冷数据占比在80%以上。冷数据存储市场高手云集,是名副其实的红海。
UCloud近日发布的新一代归档存储产品,让已经没有多少秘密可言的存储市场焕发了新的活力。该产品采用UCloud全新自研存储架构,相较标准存储降低近80%的存储成本,价格低至0.024元/GB/月,与市场同类归档存储产品相比降低近30%成本。
百亿级市场等待挖掘 归档存储市场体量惊人
目前,中国存储市场规模大约在150亿-200亿元之间,每年保持10%的增长速度。数字化转型驱动下,各个行业的存储需求快速增长。其中视频网站、银行、运营商等大型企业的更以海量数据著称,其中公司资料、用户历史数据和备份数据都以冷数据为主,原有的存储成本十分惊人。加上保存年限十分漫长,如果要进行数据迁移,更加费时费力,成本高昂。
尽管冷数据不常被访问,但并不意味着不被访问。如今企业全部从以业务为中心向以数据为中心转型,对历史数据进行挖掘、分析、运用也将提升整个公司的竞争力。所以这些冷数据也需要更加安全、长久的保存。降低成本势在必行,一定要能跟上数据量增加的速度,否则将成为整体业务的明显短板,拖累整个业务流程。
对客户而言,"冷数据"存储成本降低的同时还能进行数据自动化分层存储,这更有利于成本管理。在名将扎堆的存储市场,UCloud找到了新机会。
通过技术细节优化实现存储成本优化
存储分层符合大势所趋,由于数据存在由热至冷的变化特征,存储方案也需要满足把数据从昂贵的存储介质上迁移到低成本介质的需求。UCloud新一代归档存储产品采用了西部数据提供的大容量SMR磁盘与创新技术,将数据自动分层存储,大幅降低"冷数据"存储成本,极大提升了企业应对数据基础架构挑战的能力。
我们可以从几个方面来解读,首先是SMR磁盘技术,西部数据作为SMR(叠瓦式磁记录)的主要推动者之一,通过添加磁盘,扩大磁盘和缩小轨道的物理扩展;让每个区域拼接更多的轨道以实现合理缩放。凭借这一技术,西部数据可以通过允许磁性位区域与相邻磁道重叠,从而像磁盘上的木瓦一样重叠,来提高磁盘表面的位密度,以增加HDD容量并减少数据中心TCO。
西部数据Ultrastar DC HC650 HDD 20TB、Ultrastar DC HC550 HDD18TB和WD Gold HDD18TB
然后是创新,西部数据预估在2023年前数据中心才用的SMR占比将逐步增加或超过50%,并提供了生态系统和系统技术创新。包括能量辅助磁记录(EAMR)技术、三阶寻轨定位系统(TSA)以及第六代HelioSeal技术等磁盘创新技术。
已经商用的SMR(叠瓦式磁记录)磁盘。当然,在20TB+时代,西部数据还规划了EAMR(能量辅助磁记录) 和MAMR(微波辅助磁记录)等技术,可以在满足不断变化的客户和市场需求的同时降低总体拥有成本(TCO)。
UCloud的新一代自研归档存储架构可以同时兼容SMR和CMR盘,充分利用高密机型SMR盘的硬件优势,并采用自研架构降低硬件成本。结合硬件的选型,在软件层面上自主研发了一套磁盘上下电调度系统,可以保障磁盘的寿命的同时,极大降低电费成本,使磁盘能耗降低近90%, 在纯写入场景下,耗能磁盘块数为原有的5%。
三大数据归档需求迎来重大利好
企业要想经营下去须做两件事:开源与节流,成本控制的重要性不言而喻。UCloud新一代归档存储在多媒体数据归档、历史数据合规存储,以及大数据、AI分析数据归档这三大类数据归档存储方面有着广泛的应用场景。存储体量越大,带来的成本变化也就越大。
目前被资本追捧的在线直播、短视频等互联网公司,每天产生的数据量极其可观,而且存储需求随着带宽、用户数的提升还在不断增加。UCloud新一代归档存储可以帮助这类用户实现数据由热到温、由温到冷的存储类型转换,在不同存储类型间实现自动化数据生命周期管理。
传统企业随着数字化转型加快,存储方式的转变也在加速,从本地化转向云端存储。包括教育、医疗、信息存档等领域都在经历数字化转型,传统的蓝光磁带已经越来越不能满足这类用户需求,私有云也因为运维成本原因带给企业越来越大的压力。
还有来自大数据领域的旺盛需求,尤其是人工智能的进一步发展离不开可长期保存的数据资源,这样才能探求出更好的算法、学习的方法和模型,有效地对这些数据进行建模,分析和挖掘这些数据。通过UCloud新一代归档存储整体解决方案的实施,这些场景的实时分析数据得到长期归档存储,促进完成更完善精准的解决方案。
小结:
西部数据公司副总裁兼中国区业务总经理刘钢表示:"如今,云服务提供商和系统集成商有一个共同点:它们都需要一种多层存储策略,利用多种技术管理宝贵数据的爆炸式增长和大量工作负载。西部数据开发、制造, 销售的内容包含了从NAND、固态硬盘、硬盘和平台在内的一系列品类。西部数据完整的数据存储解决方案为当下蓬勃发展的数据需求提供针对性能、容量、总体拥有成本的优化存储选择,帮助我们的客户有效应对他们的数据基础架构挑战。"
在西部数据的平台技术与存储技术的加成下,与UCLOUD共同完成存储功能设计、系统内核开发与硬件系统调试,实现超低成本、极低功耗以及可靠性的保障,推动企业业务的发展。助力UCloud的新一代归档存储产品能够在更广泛的应用场景中有效降低存储成本,同时增加数据资产的利用效率与可靠性,在ZB级数字时代扮演好关键的角色。