应对数据大爆炸,亚马逊云科技的存储之道

数据爆炸性增长是当今时代一大不可阻挡的趋势。

根据IDC数据,全球数据量近年来持续保持双位数增长,预计2025年,全球数据量增长将达到180ZB;与此同时,只有很小一部分比例的数据得以保存下来进行分析。

随着数字经济的快速发展,数据成为一种重要的生产要素,如何将爆发性增长的海量数据存储、管理和确保安全正在成为所有企业都需要面临的一道必答题。因为它关系到数据生产要素能否源源不断供给到各种业务场景、流程之中,以及能否充分发挥生产要素的价值。

日前,全球第一大公有云亚马逊云科技宣布加速云端存储服务创新,构建完整和强大的存储服务:覆盖对象存储、块存储、文件存储、备份、容灾、以及数据传输与边缘处理等,以此来帮助用户应对数据大爆炸时代带来的种种数据存储挑战。

数据大爆炸不可忽视的挑战

如今,数字经济正在对人们的工作与生活产生深刻影响:自动驾驶汽车每天产生数十TB的数据,并且根据法规要求,这些数据需要保存数十年之久;一个直播平台一晚上直播就能够产生高达数PB的数据;一个县域的档案馆,随着数字化加速,每年的数据增长率也接近PB级……

在亚马逊云科技大中华区产品部总经理陈晓建看来,如今海量数据的爆炸性增长,主要带来了三个方面的挑战:

其一、海量数据的爆炸性增长首先会带来敏捷与成本的挑战,摆在很多用户面前最直接的问题就是,如何快速用好海量数据以及如何更加低成本的保存海量数据。

其二、数据自身的多样化,也带来了多样化的数据存储需求。过去,很多企业的数据类型都是以结构化数据为主、非结构化数据为辅;如今,非结构化数据成为数据增长的主力军,并且在越来越多业务场景中发挥着重要作用。陈晓建认为:“业务数据的来源走向多样化,不同业务数据属性存在着很大差异,需要根据不同业务需求来设计相应的存储服务;”

其三,数据的存储、管理、共享和使用面临着安全与合规的挑战。众所周知,数字经济的快速发展,让数据成为重要的生产要素,随着《数据安全法》等一系列相关法律的实施,数据安全和法规遵从让所有企业都不容忽视。

在陈晓建看来,如今企业上云已经是大势所趋,企业工作负载跑在云端成为常态,云端数据存储服务的创新,可以为用户提供功能更强大并兼具成本效益的存储服务,帮助他们在云端开展业务创新。

云上原生存储:降低成本的最有效手段

众所周知,过去的企业级存储往往是以存储阵列为基础,再辅以复制、克隆、重删等软件功能,在过去以结构化数据为主的时代,传统企业级存储的确是数据保存的绝佳方式。但现在,随着海量数据的爆发和云计算的崛起,一切都变了。

以亚马逊云科技为例,自2006年对象存储服务Amazon S3发布以来,十六年时间里充分利用了云计算的规模优势,拼接着易用性、可用性、稳定性等方面的优势,不仅在存储成本方面有着卓越的下降,更是充分支撑起用户云端的创新。如今,Amazon S3存储着超过100万亿个对象,每秒需要处理上千百万次请求。

不仅如此,Amazon S3将数据存储划分为惊人的八个层,从毫秒级的标准版Amazon S3到Amazon Outposts这种放在用户数据中心中类似本地使用的Amazon S3,八个层级可以充分将数据存储的成本细化。陈晓建介绍:“八个存储层级满足了热、温、冷、冻等不同的数据访问层级需求,兼顾了性能和数据存储的成本。”

同时,亚马逊云科技充分利用了云的规模效应,持续推动了数据存储的成本下降。例如,同样存储一份数据,2006年如果需要100块钱,而到2022年就只需要15块钱,存储成本降低了大约7倍。

更加重要的是,亚马逊云科技将智能分层技术充分融入到各种数据存储之中,从对象存储Amazon S3到云原生文件存储Amazon EFS,亚马逊云科技利用智能分层可根据访问频次自动将数据移动到最经济的访问层,在保证性能的同时,不会产生额外的检索费用或运营开销。

仅过去一年,亚马逊云科技共发布了130多项新的存储服务及功能,重点包括:为归档数据提供毫秒级云上检索的Amazon S3 Glacier Instant Retrieval存储等级,将智能分层功能拓展至云原生文件存储Amazon EFS等。陈晓建表示:“存储服务是亚马逊云科技成立之初提供的第一个云服务,十六年时间,亚马逊云科技始终像创立之初一样,通过不断创新来夯实Amazon S3这项基础服务的领先。”

专门构建:满足云上工作负载差异化需求

亚马逊云科技如今成为全球生态最为丰富的一朵云。

越来越多用户将本地的工作负载和数据迁移上云,使得亚马逊云科技意识到满足用户的各种差异化需求、以及之前环境使用习惯的重要性。为了帮助用户应对上云之后不同工作负载的需求,在云端轻松且经济地启动和运行主流的文件系统,亚马逊云科技过去一年有针对性的丰富了Amazon FSx文件存储系列服务。

例如,亚马逊云科技在Amazon FSx for Windows File Server基础上,新推出新一代Amazon FSx for Lustre、基于开源OpenZFS 文件系统构建的Amazon FSx for OpenZFS。

除了这些开源文件系统之外,其实传统企业级市场中,像NetApp这种老牌存储厂商存在着一大批用户,这部分群体上云之后依然希望可以使用到NetApp的存储环境。为此,亚马逊云科技与NetApp合作推出了Amazon FSx for NetApp ONTAP,把NetApp的经典NAS文件存储系统ONTAP放在亚马逊云科技上,客户只需点击几下就能在亚马逊云科技上启动、运行和扩展全面托管的NetApp ONTAP文件存储服务,无需修改其应用或数据管理方式。

这种合作的好处是,即可以让NetApp用户群体能够更好地融入到云的世界之中,又能够让NetApp的混合云战略获得成功。NetApp在中国的合资公司联想凌拓也已经在中国提供相关的服务。联想凌拓产品管理与营销高级总监林佑声表示:“自发布以来,Amazon FSx for NetApp ONTAP获得了包括金融、医疗、石油等一大批客户的认可。”

事实上,除了丰富各种产品与服务之外,亚马逊云科技近年来尤为重视数据保护。众所周知,云存储各种服务一向被诟病,缺少传统企业的灾备功能,在业务连续性上存在着一定的争议。尤其是随着用户越来越多工作负载上云之后,用户对于数据保护和数据合规的重视程度前所未有。

为此,亚马逊云科技通过打造一站式的Amazon Backup,来满足用户在容灾方面管理复杂、安全合规挑战、成本高昂的三大挑战。

据悉,亚马逊云科技过去一年里已经将Amazon Backup扩展至Amazon S3和VMware工作负载,让客户使用统一的数据保护策略,即可配置、管理和监督数据的备份与恢复,此外还涵盖Amazon EC2、 Amazon EBS、Amazon RDS、Amazon Aurora、Amazon DynamoDB等。

例如,澳大利亚领先的独立石油和天然气生产商Santos采用 Amazon Backup,极大地减轻了IT人员的工作负担。不仅备份时间减少了80%,降低了相关运营成本50%,备份任务的成功率从80%提高到100%,完全满足了合规需求。

如今,亚马逊云科技的存储服务覆盖制造业、化工、媒体、社交网站、视频、汽车、航空航天等行业,广泛服务于全球各地、各个行业、各个规模的企业客户,国内如嘉里物流、金风慧能、苏泊尔、OPPO、首汽约车、中集集团、金蝶、桐树基因、我爱我家等头部企业均是亚马逊云科技存储服务的用户。

“如今,亚马逊云科技存储服务已经全面覆盖对象存储、块存储、文件存储、数据备份、数据容灾、以及数据传输与边缘处理各个方面,我们将复杂性屏蔽,为用户提供灵活性高、成本更优的存储服务,帮助用户在云端创新。”陈晓建总结道。

分享到: 更多

为您推荐

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注